计算机工程与应用 ›› 2018, Vol. 54 ›› Issue (5): 236-241.DOI: 10.3778/j.issn.1002-8331.1609-0353
薛朋强,鲜 英,努尔布力,吾守尔·斯拉木
XUE Pengqiang, XIAN Ying, Nurbol, Wushour Silamu
摘要: 在这个信息量爆炸性增长的时代,网络不良信息充斥在日常生活当中。为了构建洁净的网络环境,实现对网络维吾尔文中敏感信息的检测与过滤,通过分析维吾尔文的特点,将维吾尔文进行词干提取和编码化处理,再结合DFA和决策树提出了针对维吾尔文敏感信息过滤的相应方法。维吾尔文经过词干提取、编码化处理解决了维吾尔文书写顺序和形式多样、存储易出现乱码等问题。再结合决策树的特点,将转码后的维吾尔文信息存储于决策树节点上,将决策树的子节点按照特定编码进行顺序排列。这样维吾尔文文本信息进行敏感信息过滤时可以缩小检测范围,提高算法效率。