One post tagged with "Byte Pair Encoding"

Neural Machine Translation of Rare Words with Subword Units​

데이터 압축으로 쓰이던 bpe를 자연어에 쓴 논문이다. 단어보다 작은 subword unit을 사용하여 음운론적이고 형태학적으로 번역함으로써, open-vocabulary NMT모델을 소개한다.