Find XO: Cómo crear un modelo de IA que elija una respuesta entre opciones fijas y ajuste su confianza(nishtahir.com)

- En este método, en lugar de hacer que el modelo escriba texto una palabra a la vez, se le pide que elija una de las opciones predefinidas de la A a la E en un solo cálculo. El original explica que así se limita el rango de respuestas que el modelo puede producir. - El autor original ejecutó el modelo Qwen3-1.7B con 1,221 preguntas extraídas al azar del conjunto de datos CommonsenseQA e informó una precisión de 0.5938. Tras un breve entrenamiento adicional, la precisión habría subido a 0.6241. - El autor consideró las probabilidades que produce el modelo como confianza y señaló que, en el rango de confianza de 0.9 a 1.0, la tasa real de respuestas correctas fue de 0.7009, lo que indica que el modelo tenía exceso de confianza. Tras aplicar un valor de temperatura de 3.797, la confianza por rangos y la tasa de aciertos se habrían acercado más.