Cos'è SentencePiece e come si usa
Un altro punto di forza di SentencePiece è la flessibilità: è possibile personalizzare la dimensione del vocabolario, scegliere il tipo di modello di segmentazione e inserire token speciali come EOS (End Of Sentence) e SOS (Start Of Sentence).