汉语分词词典设计

计算机工程与应用 ›› 2007, Vol. 43 ›› Issue (1): 1-1.

• 博士论坛 • 下一篇

汉语分词词典设计

翟伟斌,周振柳,蒋卓明,许榕生

中科院高能物理研究所计算中心

收稿日期:2006-08-01 修回日期:1900-01-01 出版日期:2007-01-01 发布日期:2007-01-01
通讯作者: 翟伟斌 zhaiwb

Design Dictionary of Chinese Word Segmentation

,,,

中科院高能物理研究所计算中心

Received:2006-08-01 Revised:1900-01-01 Online:2007-01-01 Published:2007-01-01

摘要/Abstract

摘要： 汉语分词词典是中文信息处理系统的重要基础，词典算法设计的优劣直接关系着分词的速度和效率。本文采用动态TRIE索引树的词典机制，设计并实现了汉语分词词典，有效的减少了词典空间。实验结果表明该词典具有较高的查询性能。

关键词: 汉语分词, 词典查询, 中文信息处理

Abstract: Chinese word segmentation dictionary is the important base of Chinese information processing system. The arithmetic of the dictionary influences the speed and efficiency of segmentation. In this paper, the dictionary mechanism is dynamic TRIE tree, and we have designed the Chinese word segmentation dictionary. The dictionary uses less memory. The experiment shows that the dictionary has high efficiency.

Key words: Chinese word segmentation, Search dictionary, Chinese information processing

翟伟斌,周振柳,蒋卓明,许榕生. 汉语分词词典设计[J]. 计算机工程与应用, 2007, 43(1): 1-1.

,,,. Design Dictionary of Chinese Word Segmentation[J]. Computer Engineering and Applications, 2007, 43(1): 1-1.

[1]	胡金柱1，舒江波2，胡泉3，李源1，杨进才1，谢芳4. 复句关系词自动识别中规则的表示方法研究[J]. 计算机工程与应用, 2016, 52(1): 127-132.
[2]	王海1，冯向前1，2，钱钢1，2. 网页在线评论情感倾向的直觉模糊分类[J]. 计算机工程与应用, 2013, 49(1): 148-151.
[3]	樊兴华，王鹏，周鹏. 一种基于扩展的两步文本倾向性分析方法[J]. 计算机工程与应用, 2012, 48(1): 162-165.
[4]	于江德¹，王希杰¹，樊孝忠². 汉语分词中上文和下文重要性比较[J]. 计算机工程与应用, 2011, 47(4): 117-120.
[5]	冯敏萱. 现代汉语“V+N”序列关系的平行处理[J]. 计算机工程与应用, 2010, 46(30): 8-10.
[6]	刘岩,张蕾. 基于概念图的中文信息自动转化技术研究[J]. 计算机工程与应用, 2008, 44(15): 151-154.
[7]	张国兵^1,2,李淼¹. 一种基于局部歧义词网格的快速分词算法[J]. 计算机工程与应用, 2008, 44(12): 175-177.
[8]	李蕾^1,2,王劲林¹,白鹤^1,2,胡晶晶^1,2. 基于FFT的网页正文提取算法研究与实现[J]. 计算机工程与应用, 2007, 43(30): 148-151.
[9]	魏进，常朝稳. 单数组全映射分词词典[J]. 计算机工程与应用, 2007, 43(23): 184-186.
[10]	谌志群. 汉语句子谓词的自动识别方法研究[J]. 计算机工程与应用, 2007, 43(17): 176-178.
[11]	张永奎^1，2，张彦^1，2，安增波³，刘睿^1，2. Web新闻语料分词和标注错误分析[J]. 计算机工程与应用, 2007, 43(15): 166-169.

汉语分词词典设计

Design Dictionary of Chinese Word Segmentation

PDF

可视化

摘要/Abstract

引用本文

使用本文

参考文献

相关文章 11

编辑推荐

Metrics