现代 NLP 分词技术综述

32 位分词研究者历时约 8 个月完成迄今为止最全面的分词领域调查，涵盖分词算法、评估、多语言处理、编码、理论以及分词器的潜在替代方案（如潜在分词或视觉分词），同时涉及约束生成、分词修复和分词器安全等相关主题。