xlm-roberta-large FacebookAI
- Tipo
- model
- Tarea
- fill-mask
- Framework
- transformers
- Descargas
- 6,271,963
- Me gusta
- 525
- Acceso
- public
- Archivos
- 0
Etiquetas
- modelo de lenguaje
- multilingüe
- relleno de máscara
- NLP
- preentrenamiento
- transformers
- aprendizaje profundo
Resumen
XLM-RoBERTa-large es un modelo de lenguaje multilingüe basado en RoBERTa, preentrenado de forma auto-supervisada con 2.5TB de datos CommonCrawl filtrados que abarcan 100 idiomas. Utiliza el objetivo de modelado de lenguaje enmascarado (MLM), lo que le permite aprender representaciones bidireccional…
README
--- tags: - exbert language: - multilingual - af - am - ar - as - az - be - bg - bn - br - bs - ca - cs - cy - da - de - el - en - eo - es - et - eu - fa - fi - fr - fy - ga - gd - gl - gu - ha - he - hi - hr - hu - hy - id - is - it - ja - jv - ka - kk - km - kn - ko - ku - ky - la - lo - lt - lv …