Para tarefas de tradución automática, os modelos baseados na arquitectura Transformer demostraron ser moi eficaces. Abaixo amósanse algúns dos modelos máis populares e eficaces para traducións:
MarianMT (Helsinki-NLP)
MarianMT é unha serie de modelos de tradución desenvolvidos polo equipo de Helsinki-NLP.
Estes modelos están adestrados previamente en varios pares de idiomas e son eficientes tanto en canto á precisión como á velocidade. Admite un gran número de pares de linguas.
Adestrado previamente para moitas combinacións lingüísticas, polo que é versátil.
Traducións de alta calidade entre diferentes idiomas, incluídas algunhas menos comúns.
Implementación: Dispoñible en Hugging Face baixo o nome Helsinki-NLP/opus-mt-{src}-{tgt} onde {src} e {tgt} Son os códigos lingüísticos.
M2M-100 (Facebook AI)
M2M-100 É un modelo de tradución multilingüe de Facebook AI que admite a tradución directa entre 100 idiomas sen necesidade dun idioma pivote como o inglés.
Tradución directa entre moitos pares de linguas.
Alto rendemento en linguas menos habituais.
Ideal para traducións entre idiomas onde o inglés non é intermedio.
Dispoñible en Hugging Face como facebook/m2m100_418M e outros tamaños de modelos.
T5 (Text-to-Text Transfer Transformer)
Google T5 é un modelo moi versátil que pode realizar moitas tarefas. NLP, incluída a tradución.
T5 está adestrado nun formato de texto a texto, onde calquera tarefa NLP, incluída a tradución, convértese nun problema de xeración de texto. Gran flexibilidade e versatilidade.
Bo desempeño en múltiples tarefas NLP.
Tradución xunto con outras tarefas de procesamento da linguaxe natural.
Dispoñible en Hugging Face como t5-small, t5-base, t5-large, e t5-3b.
mBART (Multilingual BART)
mBART é unha extensión multilingüe de BART, formado en 25 idiomas. É eficiente para tarefas de tradución e optimizado para idiomas con poucos recursos. Especialmente eficaz en linguas con poucos recursos.
Soporte multilingüe nun único modelo. Traducións entre linguas menos representadas e entre pares de linguas que non teñen moitos datos dispoñibles.
Dispoñible en Hugging Face como facebook/mbart-large-50.
IndicTrans (AI4Bharat)
IndicTrans é un modelo adestrado especificamente para traducións entre linguas indias. É unha excelente opción se traballas con idiomas como hindi, tamil, bengalí, etc.
Especializado en linguas indias. Admite traducións entre varias linguas indias sen necesidade de inglés.
Traducións relacionadas coas linguas indias. Dispoñible en Hugging Face como ai4bharat/IndicTrans.
Modelos como T5 e mBART Poden ser moi grandes e requiren moita potencia informática. Se tes recursos limitados, gústalles modelos máis pequenos MarianMT Poderían ser máis prácticos.
Comentar: