BPE

BPE (Byte Pair Encoding) là thuật toán tokenization trong GPT. Cách BPE tách văn bản thành token.

2 bài viết