基于深度学习的中文自动分词研究

基于深度学习的中文自动分词研究

论文摘要

传统机器学习分词的方法工作效率普遍偏低,因其基本依赖于人工设计的特征工程,且需要大量的人工验证特征的有效性。而基于神经网络深度学习算法出现后,实现了训练神经网络自动学习特征,这种方式极大减少工作量,同时提高提取特征工程的效率。本文根据一种基于长短时记忆神经网络与条件随机场模型结合的中文自动分词模型进行测试,结果表明分词准确率、召回率极高,更具通用性。

论文目录

  • 一、国内中文分词的研究现状
  • 二、中文自动分词的研究意义及主要应用
  •   1、自动翻译
  •   2、搜索引擎
  •   3、语音合成
  • 三、神经网络模型与实现
  •   1、LSTM神经网络模型
  •   2、条件随机场模型(CRF)
  •   3、系统整体架构
  •   4、实验结果与分析
  • 四、结束语
  • 文章来源

    类型: 期刊论文

    作者: 那勇,李明全

    关键词: 机器学习,中文分词,深度学习,特征工程

    来源: 吉林广播电视大学学报 2019年12期

    年度: 2019

    分类: 社会科学Ⅱ辑,信息科技

    专业: 计算机软件及计算机应用,自动化技术

    单位: 吉林广播电视大学吉林省远程教育技术科技创新中心,吉林建筑科技学院

    基金: 吉林省科技发展计划资助项目,项目编号:20190902010TC

    分类号: TP391.1;TP18

    页码: 58-59+62

    总页数: 3

    文件大小: 1917K

    下载量: 312

    相关论文文献

    • [1].中文自动分词中的歧义现象研究[J]. 语文学刊 2013(18)
    • [2].基于条件随机场的藏语自动分词方法研究与实现[J]. 中文信息学报 2013(04)
    • [3].信息过滤中的中文自动分词技术研究[J]. 计算机工程与科学 2009(03)
    • [4].中文自动分词系统概述[J]. 电脑知识与技术 2010(33)
    • [5].多种方法融合的中文自动分词系统的设计与实现[J]. 韩山师范学院学报 2009(06)
    • [6].下期要目[J]. 图书情报工作 2019(22)
    • [7].在线英语语料库自动分词和分句的实现[J]. 电脑知识与技术 2010(28)
    • [8].基于数学设计的计算机自动分词算法[J]. 江西科学 2009(05)
    • [9].以《汉学引得丛刊》为领域词表的先秦典籍自动分词探讨[J]. 图书情报工作 2015(11)
    • [10].藏文词级处理研究现状及热点方法[J]. 电脑知识与技术 2015(32)
    • [11].藏文自动分词技术研究综述[J]. 科技视界 2016(06)
    • [12].藏语自动分词中的几个关键问题的研究[J]. 中文信息学报 2014(04)
    • [13].藏文自动分词系统中虚词识别算法研究[J]. 计算机应用与软件 2017(09)
    • [14].藏语自动分词中的数词识别方法研究[J]. 西藏大学学报(自然科学版) 2015(02)
    • [15].傣文自动分词系统的设计与实现[J]. 中文信息学报 2013(06)
    • [16].彝文自动分词技术研究[J]. 中文信息学报 2011(03)
    • [17].自动答疑系统中文自动分词模块设计与实现[J]. 现代计算机(专业版) 2010(02)
    • [18].基于DRIS系统中的中文自动分词模块设计与实现[J]. 电子设计工程 2016(14)
    • [19].基于小字符集的藏文自动分词技术研究[J]. 西藏大学学报(自然科学版) 2013(02)
    • [20].藏文自动分词系统的设计[J]. 计算机工程与科学 2011(05)
    • [21].基于模板知识的带噪音半结构文本数据自动分词方法[J]. 微型机与应用 2015(17)
    • [22].从计算机自动分词的障碍谈汉语书面语改革[J]. 语文学刊 2008(02)
    • [23].基于词频学习和动态词频更新的藏文自动分词系统设计[J]. 计算机应用与软件 2014(05)
    • [24].藏文自动分词中未登录词处理方法研究[J]. 计算机工程 2012(17)
    • [25].国内中文自动分词技术研究综述[J]. 图书情报工作 2011(02)
    • [26].中文信息处理中自动分词技术的研究与展望[J]. 科技创新与应用 2015(25)
    • [27].班智达藏文自动分词系统的设计与实现[J]. 青海师范大学民族师范学院学报 2010(02)
    • [28].基于计算机自动分词的研究[J]. 沈阳化工学院学报 2008(03)
    • [29].基于CFRs模型的交集型歧义消解研究[J]. 电脑知识与技术 2018(18)
    • [30].基于隐马尔科夫模型的彝文分词系统设计与开发[J]. 西南民族大学学报(自然科学版) 2012(01)

    标签:;  ;  ;  ;  

    基于深度学习的中文自动分词研究
    下载Doc文档

    猜你喜欢