BPE (Byte-Pair Encoding)
Byte-Pair Encoding tokenization - Hugging Face NLP Course
subword-nmt
机器翻译 bpe——bytes-pair-encoding以及开源项目subword-nmt快速入门_subword-nmt 开源-CSDN博客
Byte-Pair Encoding tokenization - Hugging Face NLP Course
机器翻译 bpe——bytes-pair-encoding以及开源项目subword-nmt快速入门_subword-nmt 开源-CSDN博客