バイト対符号化

書いてみる

関連タグ

#BPE (5)
#BytePairEncoding (1)
#UTF8 (48)
#gpt2 (86)
#サブワード (1)
#トークン (4,676)

GPT-2を読む⑥入力表現

澁谷直樹 @ キカベン
5か月前

言語AIの進化史⑨バイト対符号化（BPE）

澁谷直樹 @ キカベン
5か月前