バイトペアエンコーディング - バイトペアエンコーディングは、最も頻繁に出現する隣接するシンボルペアを反復的に結合して、NLPモデルのための柔軟な語彙を作るサブワードトークナイゼーションアルゴリズムです。