Laya, sistema para leer textos en 100 idiomas y elegir respuestas(github.com)
Idioma del texto: coreanoVer en el idioma original
Resumen sencillo
- Laya es un sistema que recibe textos en más de 100 idiomas y realiza decisiones en formato de opción múltiple mediante un único procesamiento de red neuronal.
- Los modelos principales consisten en uno para inglés, uno multilingüe para 100 idiomas basado en mmBERT, y modelos de decisión tipados para tareas específicas, con un enrutador que selecciona automáticamente el modelo adecuado según la solicitud.
- Puede procesar documentos de hasta 8192 tokens y, en documentos largos de aproximadamente 4000 tokens, responde correctamente entre 16 y 18 de 20 solicitudes de prueba (medido con scripts de investigación públicos).
- Se puede instalar en entornos Python 3.10 o superiores, y soporta aprendizaje por refuerzo, conversión ONNX y procesamiento por lotes. También se ofrecen bibliotecas separadas para TypeScript y Node.js.
Encontrado en
GitHub ↗ / 29,818 estrellas
¿Te ha pasado algo parecido? Cuéntanos en una o dos líneas qué hiciste. No hace falta conocer el producto.