Масштабное использование сопоставления фраз для изменения токенизации

#spacy #cjk #spacy #cjk Вопрос: Я новичок в системе spaCy. Возьмем этот пример- 好きになる Токенизатор и теггер на предварительно обученных японских моделях, скорее всего, выдадут результат 好き (существительное) に (adp)…