摘 要:传统的行政管理方式随着互联网的高速发展,其效率低下的弊端已经逐渐显露。各级部门在依托互联网快速发展的基础上积极引进现代互联网技术,结合现有行政管理的基本方式形成了符合当代环境的电子政务行政管理方式。民生诉求是电子政务的一个重要组成部分,保障和妥善解决民生问题是职能部门的重要职责,是反映其办事效率的一个窗口。然而由于民生诉求涉及到的投诉信息范围广、数量多、情况错综复杂,这给职能部门快速处理民生诉求带来了挑战。本文通过在电子政务系统中引入基于Trie树的关键词匹配算法,对市民提交的信息进行分析、匹配,从而快速分派到相应部门处理、极大地提升了各部门处理事务的效率。
关键词:电子政务;Trie树;模糊匹配;关键词匹配
1 国内外研究现状
随着经济社会的快速发展,民众的诉求呈现出多样化的趋势,涵盖着从医疗、就业、教育等大的方面,直至寻物、家政等小的方面在内的众多议题观点[1]。研究可知,信息匹配技术在电子政务系统中是处理民生诉求的一项核心技术。如今,信息匹配技术在世界各国都取得了长足进步,依靠国家力量的支持,以信息匹配技术为核心的应用系统也得以广泛的发展[2]。斯坦福大学的特克和郝克特开发了一种基于内容的关键词匹配系统SIFT(Standford Information Filtering T001)[3]。用户凭借这个系统,能够单独创建属于自己的词汇库,并通过使用相关关键字和空间模型来完成用户的诉求和网络信息内容间的相互匹配。美国国家安全局为了应对恐怖活动、军事威胁,建设了“Echelon”通信监视网络[4],可以通过卫星拦截大量包含个人信息的传真、电话和电子邮件等,Echelon也是一个通过关键字匹配来获取通信的电子通信系统[5-6]。在英国,一个专门收集情报机构“英国政府技术援助中心”,在英国政府的主导下也随之成立,这个援助中心可以获取进出英国网络的所有信息[7]。
在国内,由于信息匹配技术和文本处理技术革新的相继问世,相关科研机构、高等院校以及公司,也设计了大量结合系统化技术的优秀产品[8]。例如中科天巩公司与中国科学院联合设计研发的“天机网络网页关键字监测系统”[9]。2009年1月国内首个网络关键字安全研究机构在北京交通大学成立,如今该机构正在全方位地推进网络关键字的产生、传播和导控等方向的研究以及网络舆论安全关键技术的研发[10]。北京大学方正技术研究院设计推出了“方正智思网页关键字预警辅助决策支持系统”[11],该系统依靠对网页中的离线数据的自动解析和预报,合理分析并规划网页关键字的监控内容,产生了一种具有生命周期特征的社情民意反馈系统[2]。
随着国内外对于网络信息关键字的分析技术逐步成熟,关于信息匹配的软件产品得到了大量推广,国内电子政务领域的处理流程得到了部分改善。但是在处理专用信息上,关键词匹配技术还不够完善。特别是,对于市民提交的民生诉求信息的识别技术也仍表现出一定不足,难以满足智能化的要求,其准确率和时效性也有待提高,存在许多问题亟待解决。
2 基于关键字的布尔模型匹配算法
布尔模型因为实现方式简单、匹配速度快、检索方式易于用户理解[12]等特点,在诸多领域得到了应用,成为了网站搜索引擎使用的首选方案。布尔模型是结合集合论和布尔代数思想的简单数学模型,这种模型把文本信息中的关键词从文本信息中提取出来,作为文本的特征值[13]。匹配过程也很简单,把匹配词用“与”、“或”、“非”进行连接就可以组成相应的正则表达式,而后利用正则表达式与模型关键词进行对比得出匹配到的内容是否存在于该文档中。
设文档di(i=1,2,3,…,n)为文本集D=(d1,d2,…,dn)中任意一个文档,Ti=(t1,t2,…,tm)为文档di标引词集,对于某检索,形如Q=W1∧W2∧…∧Wn,如果存在W1∈Ti,W2∈Ti,Wi∈Ti,则称文档di存在于检索结果当中,这里di为命中文档,反之di为不命中文档;对于检索形式为Q=W1∨W2∨…∨Wn的检索式,如若存在一个或多个Wk∈Ti,(k=1,2,…,n),则di为命中文档,反之若不存在满足条件的Wk∈Ti,(k=1,2,…,n),则di为不命中文档[14]。
布尔模型的优势表现在其匹配速度快、实现方式简单等方面,但是这种模型的不足也十分明显。对此可做阐释分析如下。
Disklavier™系列可以通过无线网络连接,实现使用手机、平板电脑即可快捷地对钢琴进行操作。更能与互联网相融,内藏海量类型丰富的钢琴自动演奏曲目数据,实现在任何地点都能享受可媲美现场音乐会的听觉盛宴。还可与另一端的另一台联网的雅马哈自动演奏钢琴相连,进行现场直播,将演奏者所有的触键和脚踏的动作精确无误地实时远程再现。
(1)布尔模型对满足其前提条件的文档进行匹配时容易造成遗漏。由于布尔模型拥有严格的匹配规则,关键字的选取如果稍有偏差就有可能会被过滤,例如当使用“与”作为连接词进行匹配时,系统匹配仅仅只命中与匹配词一致的文档,但是那些和匹配词不一致、内容却一致的文档通常会被遗漏,所以如何选取合适的匹配词就变得十分困难[15]。
(2)无法匹配重点结果。由于布尔模型匹配到的结果是一个大致的范围,对于数据量小的情况比较适用,但是对于在电子政务领域逐步增长的海量数据信息,布尔检索在处理能力上的不足就显得尤为突出。
‘depth’=>$depth,
‘next’=> array(
正是由于民生诉求包含的社会信息十分复杂、庞大,为了能快速地处理这些信息,引入了一种高效的数据结构—Trie树。
3 基于Trie树的匹配算法
3.1 Trie树
比如,在向教育局投诉的信息中,根据教育局的相关关键词构建属于教育局的Trie树结构,以关键词“教育局”为例:
根据样品激发台的大小,对于光谱样品有高度和直径大小的要求。光谱样品尺寸一般为:高25~40 mm,直径12~30 mm。光谱样品在磨制时要求表面光滑,没有多个平面、细纹、凹凸点,要避免油污或者其它污渍,否则会导致钛合金中硅含量测定结果异常。
其中,字典树对含有相同前缀的词进行压缩处理,使其所占用的空间得到了极大优化。同时由于将相同公共前缀的词放在了一起,则使得通过前缀进行匹配也变得十分迅速。研究中构建的一颗字典树即如图1所示。
图1 Trie树示意图
Fig. 1 Schematic of Trie tree
字典树通过从根节点到子节点的路径来表达一个词,图1中e,f节点为一个词的最后一个节点,也就是说图1字典树代表的单词有ade、ad、bd、cbf、cb。字典树的根节点不表示任何字符。字典树不仅节省了存储空间,同时为模糊匹配技术的发展提供了坚实的基础。
3.2 构造基于中文的Trie树
4.统计学处理:采用SPSS 13.0软件进行统计学分析,计数资料组间比较采用χ2检验,计量数据以表示,组间比较采用t检验。P<0.05为差异具有统计学意义。
Trie树也叫作字典树,是对一组词进行结构化处理后的组织[16]。
首先,基于拆词的思想,利用正则表达式将关键词“教育局”拆分为教、育、局三个字。
首先,将投诉内容利用正则表达式拆成单个字符“我”、“是”、…;从根节点处查找第一个字符“我”,并没有查找到以“我”为首字符的关键词,然后继续移动字符指针,直到查找到符合条件的字符节点“学”;接着在“学”这个字符节点下查找字符节点值为“生”的节点,成功找到时计算子树的深度为2,关键词的长度是2,此时字符指针继续移动,如果发现结束标志,就意味着匹配成功,将匹配到的关键词返回,如果未碰到结束标志则继续向后移动指针结点寻找下一个字符。
最后,当插入了每个关键词时,在其末尾增加一个标志符,使用这个字符作为此关键词的结束标志(如图2中的灰色三角),利用这个字符来标记查找到了这个关键词。
循环插入所有关键词。构造出的中文Trie树如图2所示。
图2 中文Trie树
Fig. 2 The Chinese Trie tree
3.3 利用中文Trie树解决中文匹配
以一则民生投诉为例:“我是X中初四学生家长,听孩子说上体育课跑操时老师大声骂学生,有时还用脚踢学生,学生真害怕,3、4班的。请求帮助。”利用图2已经构造好的中文Trie树来开始匹配。
接着,检查根节点是否已经有字符“教”节点,如果已经有这个节点,依次重复检验并添加“育”、“局”两个节点。如果没有,则将“教”添加在根加点下。
Analysis of torsional stiffness of closed rectangular SRC members in pure torsion
循环遍历完毕,返回所有匹配到的关键词。
3.4 Trie树的数据结构设计
Trie树的数据结构设计采用PHP语言,结合了PHP数组的hash特性,代码如下:
Private $root = array(
(3)容易造成匹配结果的冗余。
本题是一道热学和电学的综合题、学生求效率时找不到总的热量、所以无从下手。做热电综合题、如果电路是纯电阻电路、电流做的功一般可认为就是产生的总热量。
// 深度,用来判断命中的字数
(4)因为布尔匹配的实现方式过于简单、往往不能完全反映出想要的结果。
英文Trie 树的结点是由26个英文字母组成的,所以英文Trie树的一个节点最多拥有26个子节点。但是中文却不一样,生活中常用的汉字就高达7 000多个,如果按照英文Trie树的构建法则来构建中文Trie树,将会极大地降低匹配的效率。因此如何构造基于中文的Trie树结构就有着至关重要的研究意义。
例1 取17.4gMnO2固体粉末与一定体积的浓盐酸(含溶质0.4mol)共热制取氯气(假设HCl挥发损失不计),下列叙述中正确的是( )。
$val =>$node, // 使用PHP数组的hash结构,增加子节点的查找速率
在扬州运河中,北部与京杭大运河相连,南侧直接通过西瓜洲而入江,总排涝的面积达到105平方千米。由此可以看出,扬州运河具有排涝、防洪、活水、引水、航运等多种功能。但是,在近年来的发展中,扬州运河的部分河段中,其两岸的生态环境、水质等,都出现了严重的生态问题。例如:在高旻寺、黄金坝这一区间内,一共存在66个排污口,另外有7条支流的水质在受到污染的条件下,直接排入扬州运河中。在扬州运河的东岸,存在很多化工厂、农药厂、制药厂等,其在经营的过程中会产生大量的污水,并排入扬州运河之中。受自然因素的影响,这一区域的水流速度慢,所以自我净化能力不足,无法保证扬州运河的水质达到旅游的要求[1]。
…
)
)
“摩尔根的果蝇杂交实验”是人教版高中生物《必修2·遗传与进化》第二章第二节“基因在染色体上的实验证据”的教学内容,属于遗传学经典实验,不仅为基因在染色体上提供了实验证据,也为学生后续学习伴性遗传奠定了基础。下面采用假说-演绎法进行摩尔根的果蝇杂交实验教学,以问题为驱动,引导学生逐步深入分析问题,解决问题,建构知识,以此发展学生的科学思维和科学探究能力。
4 实验结果及分析
实验环境为MacBook Pro(Retina,15-inch,Mid 2015),处理器为2.2 GHz Intel Core i7,内存16 GB 1600 MHz DDR3,使用PHP语言实现。实验中的给定文本内容来源于某市民心网1 000个市民提交的诉求问题。
将1 000个市民提交的问题内容分成4个小组,每组250篇,并计算其查全率、查准率以及所耗时间。基于Trie树结构的关键词匹配结果,见表1。
基于正则表达式的关键词匹配结果,见表2。
表1 基于Trie树的关键词匹配结果
Tab. 1 Key word matching results based on Trie
实验组号敏感词总个数正确过滤个数查全率/%查准率/%所用时间/s第一组25624294.5393.071.25第二组26525796.9894.481.11第三组23422797.0095.690.86第四组27425593.0692.721.37
表2 基于正则表达式的关键词匹配结果
Tab. 2 Keyword matching results based on regular expressions
实验组号敏感词总个数正确过滤个数查全率/%查准率/%所用时间/s第一组25623591.8094.003.37第二组26524492.0893.123.42第三组23421792.7394.343.08第四组27424890.5193.283.63
要应用在电子政务领域,至关重要的就是效率与准确率。通过以上实验结果可以发现,与在电子政务系统中单纯使用正则表达式相比,使用Trie树结构处理250条数据基本耗时在1 s左右,并且根据关键词匹配到的结果,将其分发到命中的部门,准确率基本都高达93%以上,明显改善了处理民生诉求问题的效率,符合电子政务领域的基本要求。
5 结束语
本文通过在电子政务系统中引入Trie树这种效率极高的数据结构结合正则表达式,极大地提高了匹配效率,使得职能部门在处理民众诉求时,能够及时将民众反映的相关问题分派到相应的部门去办理,优化部门办事效率,提升了民众对职能部门的工作满意度。
(2)向甲烧杯中注入浓度分别为0.1 mol/L的氢氧化钠溶液20mL,滴加2滴1%的酚酞溶液,打开“计算表格”添加变量V代表盐酸体积,将滴定管初始体积输入到相应位置,先测出烧杯内氢氧化钠溶液的pH,再滴加0.1 mol/L的稀盐酸,每滴加2mL,待系统显示的pH值稳定后,点击“手动记录”,记一次溶液的pH,当酚酞变为淡红色时改为慢滴加,溶液变为无色时提醒学生观察溶液的pH,直至达到滴定终点,用蒸馏水冲洗pH电极。
(2)西安市采暖季的首要污染物为PM2.5和PM10,且SO2、PM2.5、PM10的月平均质量浓度与温度之间的线性相关关系较为显著,为极强相关关系,温度对其影响较大。应根据这一特征进行研究并对空气进行治理。而NO2、O3与温度的相关性不强,但近年来,伴随着NO2、O3含量的增加,且其治理难度更大,在未来几年,如何控制减少这2种气体成为治理环境问题的关键,应加强对这2种气体的监测与防治。
参考文献
[1] 麦范金, 李东普, 岳晓光. 基于双向匹配法和特征选择算法的中文分词技术研究[J].昆明理工大学学报(自然科学版),2011,36(1):47-51.
[2] 靳瑞敏. 网页关键字过滤研究及改进[D]. 呼和浩特:内蒙古大学,2012.
[3] http://zjnustdl.blogdriver.com/zjnustdl//1196699.html.
[4] 俞文洋,张连堂,段淑敏. KMP模式匹配算法的研究[J].郑州轻工业学院学报(自然科学版),2007,22(5):64-66.
[5] HARALICK R M. Statistical and structural approaches to texture[J] . Proceedings of the IEEE, 1979,67(5):786-804.
[6] TAMURA H, MORI S, YAMAWAKI T. Textural features corresponding to visual perception[J]. IEEE Transactions on Systems, Man, and Cybernetics, 1978,8(6):460-473.
[7] CHEN Yixin, WANG J Z, KROVETZ R. Clue:Cluster-based retrieval of images by unsupervised learning[J]. IEEE Transactions on Image Processing: A Publication of the IEEE Signal Processing Society, 2005,14(8):1187-1201.
[8] FLECK M, FORSYTH D,BREGLER C. Finding naked people[C]// 1996 European Conference on Computer Vision. Berlin, Germany:Springer-Verlag, 1996,2:592-602.
[9] WU S, MANBER U. A fast algorithm for multi-pattern searching[R].Tucson:University of Arizona, 1994.
[10]SAGE D, NEUMANN F R, HEDIGER F,et al. Automatic tracking of individual particles:Application to the study of chromosome dynamics[J].IEEE Transactions on Image Processing, 2005,14(9):1372-1383.
[11]http://www.ekany.corn/wd998/cg/tutorialapter8/lesson8-6.html.
[12]李静.基于概念匹配度模型的文献检索系统[D].成都:西南交通大学,2009.
[13]段立娟,崔国勤,高文,等.多层次特定类型图像过滤方法[J].计算机辅助设计与图形学学报,2002,14(5): 404-409.
[14]范晓,申铱京.基于IE浏览器的色情图片过滤器「J].吉林大学学报(信息科学版),2004,22(6): 631-637.
[15]冯军红,刘桂林,高立新,等.基于小样本训练集的肤色模型建立方法「J].计算机工程与应用,2003(28):67-71.
[16]赵晓晖.基于内容的敏感图片过滤技术的研究及其在IE浏览器中的实现[D].长春:吉林大学,2005.
ApplicationofkeywordmatchingalgorithmbasedonTrietreeine-government
CHEN Youwei, KANG Lei
(School of Computer Science, Xi'an Shiyou University, Xi'an 710065, China)
【Abstract】With the rapid development of the Internet, the dilemma of the low efficiency of traditional administrative management methods has gradually emerged. On the basis of the rapid development of the Internet, departments at all levels actively introduce modern Internet technologies, and in combination with the basic methods of government administration, form an e-government administrative approach that conforms to the contemporary environment. People's livelihood appeal is an important part of e-government. Safeguarding and properly solving people's livelihood issues is an important duty of the department and a window reflecting the efficiency of department affairs. However, due to the wide range of complaints and the large number of complaints involved in the people's livelihood appeals, this has brought challenges to the department's rapid handling of people's livelihood demands. This paper introduces Trie tree based on keyword matching algorithm in the e-government system to analyze the information submitted by the citizens, and then quickly dispatch them to the corresponding departments for processing, which greatly increases the efficiency of the department's handling of affairs.
【Keywords】e-government; Trie tree; fuzzy matching; keyword matching
文章编号:2095-2163(2019)05-0167-04
中图分类号:TP301.6
文献标志码:A
作者简介:陈有伟(1994-),男,硕士研究生,主要研究方向:计算机系统结构、管理信息系统; 康 磊(1968-),女,副教授,主要研究方向:嵌入式系统、计算机体系结构。
收稿日期:2019-06-03
标签:关键词论文; 节点论文; 电子政务论文; 布尔论文; 信息论文; 政治论文; 法律论文; 政治理论论文; 国家理论论文; 国家行政管理论文; 《智能计算机与应用》2019年第5期论文; 西安石油大学计算机学院论文;