XLM-RoBERTa: differenze tra le versioni

Da Wiki AI.
Nessun oggetto della modifica
Nessun oggetto della modifica
 
Riga 4: Riga 4:
|AnnoDiCreazione=2020
|AnnoDiCreazione=2020
|URL=https://openreview.net/pdf?id=SyxS0T4tvS
|URL=https://openreview.net/pdf?id=SyxS0T4tvS
|Pubblicazione=ROBERTA: A ROBUSTLY OPTIMIZED BERT PRE- TRAINING APPROACH
|Pubblicazione=RoBERTa: A Robustly Optimized BERT Pretraining Approach
|URLPubblicazione=https://openreview.net/pdf?id=SyxS0T4tvS
|URLPubblicazione=https://openreview.net/pdf?id=SyxS0T4tvS
}}
}}

Versione attuale delle 13:28, 10 set 2024

XLM-RoBERTa
Nome Inglese Cross-lingual Language Model - Robustly optimized BERT
Sigla XLM-RoBERTa
Anno Di Creazione 2020
Versione Corrente
URL https://openreview.net/pdf?id=SyxS0T4tvS
Pubblicazione RoBERTa: A Robustly Optimized BERT Pretraining Approach
URL Pubblicazione https://openreview.net/pdf?id=SyxS0T4tvS

Sviluppato da Meta, versione multilingue del modello RoBERTa, progettata per gestire efficacemente più lingue.

  • XLM: Cross-lingual Language Model, indicando che il modello è progettato per funzionare in più lingue.
  • RoBERTa: Robustly optimized BERT approach, che è una versione migliorata di BERT (Bidirectional Encoder Representations from Transformers) con più dati di addestramento e tecniche di addestramento ottimizzate.

Supporta 100 lingue ed è particolarmente utile per compiti di elaborazione del linguaggio naturale che richiedono la comprensione e la generazione di testi in più lingue.