汉语自动分词词典机制的实验研究

分词词典是汉语自动分词系统的一个基本组成部分。 其查询速度直接影响到分词 系统的处理速度。 本文设计并通过实验考察了三种典型的分词词典机制: 整词二分、TRIE 索 引树及逐字二分, 着重比较了它们的时间、空间效率。 实验显示: 基于逐字二分的分词词典机 制简洁、高效, 较好地满足了实用型汉语自动分词系统的需要。