Vai al contenuto

SentencePiece

Da Wiki AI.

Versione del 7 lug 2024 alle 20:02 di Alesaccoia (discussione | contributi)

(diff) ← Versione meno recente | Versione attuale (diff) | Versione più recente → (diff)

SentencePiece
Nome Inglese	SentencePiece
Sigla

Tipo di tokenizer spesso utilizzato nei modelli multilingua, a differenza di Wordpiece.

Estratto da "https://wiki.mindmaker.it/index.php?title=SentencePiece&oldid=2428"

Concetto