Go BPE tokenizer (Encoder+Decoder) for GPT2 and GPT3
语言:Go · GitHub 星标:82 · Fork:20
话题:bpe · byte-pair-encoding · codex · decoder · encoder · go · gpt-2 · gpt-3
在 GitHub 上查看原仓库