斷詞系統

斷詞系統（Text Segmentation），參照：『維基百科～Text_segmentation』

中文用

• 中央研究院資訊所
  • 中文斷詞系統
    • GitHub - ckiplab/ckiptagger: CKIP Neural Chinese Word Segmentation, POS Tagging, and NER
    • 千呼萬喚十多年！中研院終於開源釋出國產自動化中文斷詞工具，正式採用GPL 3.0釋出
  • 中文剖析系統
  • 中文錯字偵測
• Jieba（以Python為基礎）
  • 中文斷詞：斷句不要悲劇 / Head first Chinese text segmentation
  • Python – (11) 利用jieba實現中文斷詞
  • 中文自然語言處理基礎
• jieba-js
  • 線上中文斷詞工具：Jieba-JS / Online Chinese Analyzer: Jieba-JS

日文用

• Kuromoji（以Java為基礎）
• MeCab，參照：『維基百科～MeCab』（Perl/Ruby/Python/Java/C#）
  • 日文分词器 Mecab 文档

英文用

• quanteda（以R語言為基礎）
  • quanteda