SentencePiece - SentencePiece è un tokenizzatore di testo non supervisionato e detokenizer per l'elaborazione del linguaggio naturale, che crea unità subword che funzionano attraverso molte lingue.