检索结果-南通市图书馆

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于结构化学习的语句压缩研究

中文信息学报 2013年第2期27卷 10-16,64页

作者：张永磊王红玲周国栋苏州大学自然语言处理实验室江苏苏州215006 苏州大学计算机科学与技术学院江苏苏州215006

近年来随着各类信息的日益增多,语句压缩作为自动摘要的重要部分也越来越引起研究者的关注。然而当前针对语句压缩的研究才刚刚展开,存在压缩效果不佳、没有统一的自动评测指标等问题。该文在简单的删除单词的方法框架下,采用基于特征... 详细信息

近年来随着各类信息的日益增多,语句压缩作为自动摘要的重要部分也越来越引起研究者的关注。然而当前针对语句压缩的研究才刚刚展开,存在压缩效果不佳、没有统一的自动评测指标等问题。该文在简单的删除单词的方法框架下,采用基于特征权重的最大边缘训练的结构化学习方法实现语句压缩。同时该文还提出了两种新的自动评价指标(N-Gram和BLEU)来评价语句压缩的性能。实验结果表明,采用结构化学习方法能够在保持较好压缩率的情况下保留源语句的主要信息,并且新提出的两个评价指标能够有效反映语句压缩性能。

关键词：语句压缩结构化学习自动评测

维普期刊数据库

同方期刊数据库评论

在线全文

学校读者我要写书评

暂无评论

基于语句压缩的中文语义依存分析

计算机应用 2017年第A1期37卷 266-269页

作者：周亮俊向阳同济大学计算机科学与技术系上海201804

针对当前中文语义依存分析中耗时长、准确率低的问题,提出了一种基于语句压缩进行中文语义依存分析的方法。在此方案中,首先通过开源工具CRF++训练得到特定的序列化标签压缩模型,通过此模型得到任意输入句子的主干信息,并为下一步提供... 详细信息

针对当前中文语义依存分析中耗时长、准确率低的问题,提出了一种基于语句压缩进行中文语义依存分析的方法。在此方案中,首先通过开源工具CRF++训练得到特定的序列化标签压缩模型,通过此模型得到任意输入句子的主干信息,并为下一步提供候选集;其次,选取原句和压缩后句子中的词性、上下文等特征,使用条件随机场对其中的语义依存关系进行识别;最后进行谓语消歧和句子回溯。实验以Co NLL 2009公开任务中的公有语料作为数据集,与传统的直接使用基于图的语义依存分析方法相比,本方案的处理时间缩短了80%,精确率提高了3.48%,综合指标提高了2.11%。

关键词：语义依存语句压缩条件随机场中文信息处理

维普期刊数据库

同方期刊数据库评论

在线全文

学校读者我要写书评

暂无评论

中文语句压缩关键技术研究

中文语句压缩关键技术研究

作者：姜雪东北大学

学位级别：硕士

近年来,随着计算机和互联网的广泛应用和迅速发展,自然语言处理技术正进入到一个飞速发展的时代。与此同时,如何从海量数据中迅速而准确的获取有价值的信息越来越受到研究人员的关注。语句压缩技术作为解决这一问题的基本技术具有很高... 详细信息

近年来,随着计算机和互联网的广泛应用和迅速发展,自然语言处理技术正进入到一个飞速发展的时代。与此同时,如何从海量数据中迅速而准确的获取有价值的信息越来越受到研究人员的关注。语句压缩技术作为解决这一问题的基本技术具有很高的现实意义。语句压缩可以应用于自动文摘、问答系统和机器翻译等诸多任务中。本文以语句压缩为核心,提出了中文语句压缩规范,并在规范指导下人工标注了一个语料库。利用该语料库,本文构建了一个针对中文任务的自动压缩系统,并采用人工和自动两类指标对压缩结果进行评价。本文的主要工作和贡献主要包括以下几个方面：（1）鉴于目前语句压缩任务的主流研究方向集中于有监督的学习方法,而缺乏大规模适用于该任务的平行语料库给研究工作带来了很大的挑战。因此,本文根据中文语言结构特点,提出了一套中文语句压缩语料库标注规范,并在该规范指导下构建了语料库NEUCSS,共3308组“原语句-压缩句”句对。NEUCSS填补了目前适用于该任务的语料库的空白,为未来相关研究工作提供良好的数据基础。另外,本文还介绍了整个语料库的标注实施过程以及质量控制手段。（2）利用NEUCSS语料库,构建了一套针对中文任务的自动语句压缩系统。系统基于同步树替换文法,在预处理生成平行句法树的基础上进行规则抽取,之后采用支持结构化输出的支持向量机算法学习模型参数,并利用该参数对测试句子进行解码,获得最终压缩结果。（3）进行了中文语句压缩任务的评价指标的研究。主要有人工评价和自动评价两种方法。由于人工评价结果准度高,可信性强,因此目前大部分的研究工作都以采用人工评价指标为主。因此,本文也从语法正确性和语意完整性两个角度对系统压缩结果进行了人工评价和分析。然而人工评价时间和人力成本过高,因此,本文引入了压缩率、BLEU、 NIST、GTM、WER、PER、TER及Relations F1几种自动评价指标,并通过实验分析发现几种自动评价指标与人工评价有良好的相关性。

关键词：自然语言处理语句压缩语料库标注规范自动评价

基于概率统计和句法分析的中文语句压缩系统的研究与实现

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于概率统计和句法分析的中文语句压缩系统的研究与实现

作者：赵青北京邮电大学

学位级别：硕士

随着互联网的快速发展和数字设备的广泛使用,人们对信息的获取和接收都提出了更高的要求。虽然搜索引擎的出现大大加速了人们查找信息的速度,但是搜索引擎返回的是和查询内容相关的多个链接,其中内容大多是重复或者相似的,因此还得通过... 详细信息

随着互联网的快速发展和数字设备的广泛使用,人们对信息的获取和接收都提出了更高的要求。虽然搜索引擎的出现大大加速了人们查找信息的速度,但是搜索引擎返回的是和查询内容相关的多个链接,其中内容大多是重复或者相似的,因此还得通过人工识别的方法去筛选所需内容,费时费力。为了快速而准确地获取主要信息,同时适应移动终端和数字多媒体技术对于信息显示的要求,许多互联网产品应运而生：内容聚合（RSS）,电子邮件提醒,电影字幕生成等,这些无一不用到文本重写技术。近几年来,此项技术在多文档摘要,问答系统,机器翻译等自然语言处理领域也都得到了广泛的应用。而语句压缩则在其中占有重要的位置,它致力于在保留原语句关键信息的前提下生成一个更为简短,合乎语法规范的新句子。本文首次研究和实现了一种基于概率统计和句法分析的中文语句压缩系统,在总结前人研究成果的基础上,结合中文语句压缩的实际情况,一方面引入了有监督的机器学习方法来提取压缩规则,通过统计原句和压缩句在压缩前后句法成分的变化规律来计算各个句法成分的删除概率;另一方面采用命名实体识别技术和正则表达式匹配技术来进行扩展知识库的构建和缩略语的替换。因此本系统的压缩实际上实现了词语删除,词语替换,等文本重写操作。另外,由于国内外关于中文语句压缩的研究较少,相应资源不容易获取,因此作者构建了自己的中文训练语料库和扩展知识库,用于实验的训练和对压缩结果的测试。本文最后介绍了本系统在测试集上的实验结果,实验结果表明本系统具有良好的中文语句压缩效果和友好的操作体验。

关键词：文本重写语句压缩概率统计句法分析缩略语料库

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

语句压缩题常见题型解题技巧

考试(中考版) 2004年第12期 7-11页

作者：汤远浚

语句压缩题可全面检测学生对文段的筛选、概括和表达等方面的能力,频见于考卷中。《考试大纲》更是把它作为一个重要考点单列出来。考生在答题时,要按照给定的材料的要求、思路和格式进行语言组织。现结合相关典型试题分析如下:

关键词：解题技巧四川省语句压缩科技活动周日本自卫队中心句奥运会吉祥物修改宪法孙悟空贫困生

基于hLDA层次主题模型的多文档摘要技术研究

同方期刊数据库评论

在线全文

同方期刊数据库

学校读者我要写书评

暂无评论

基于hLDA层次主题模型的多文档摘要技术研究

作者：刘红艳北京邮电大学

学位级别：硕士

随着网络的发展,知识经济时代的到来,人们学习生活节奏的加快,人们对获取信息的速度和质量提出了越来越高的要求,多文档摘要技术应运而生,成为自然语言处理领域研究者们关注的焦点。多文档摘要技术是根据描述同一话题的多篇相关文... 详细信息

随着网络的发展,知识经济时代的到来,人们学习生活节奏的加快,人们对获取信息的速度和质量提出了越来越高的要求,多文档摘要技术应运而生,成为自然语言处理领域研究者们关注的焦点。多文档摘要技术是根据描述同一话题的多篇相关文档生成一篇信息覆盖全面、语言流畅、短小精悍、可读性强的摘要,满足人们快速获取知识的需求,加快信息的传播速度。本课题主要研究基于层次潜在狄利克雷分配（hierarchical Latent Dirichlet Allocation, hLDA）主题模型和语句压缩的多文档摘要方法。hLDA是一种有代表性的完全概率生成模型。它不仅能在大规模离散数据中挖掘潜在主题,同时自动适应数据集的增长,并能把这些隐含主题组织成树状的层次结构,识别主题间的抽象关系,从而实现更深层次的语义内涵分析。本文的主要内容和工作有如下几个方面： 1)以句子为基本处理单元,构建多文档数据集的层次主题树结构模型。hLDA模型树中的每一个节点是一个主题,每一个主题由不同的词构成,从根节点到子节点选择主题生成一条路径,所有的句子自动的分配到不同的路径上,同一条路径上的句子组成的簇构成了一个子主题,这是我们抽取句子的重要依据。 2)研究了句子抽取策略,基于前面层次主题句子聚类的结果,我们根据主题的重要度从不同的主题中抽取句子。主要考虑了句子与标题的相似度、句子的抽象程度、句子的长度等多种特征信息来衡量句子权重。由于受摘要长度的限制,我们借助语句压缩方法为摘要句剪枝,提高其质量和可读性。 3)研究了摘要质量评测方法,通过借助原文档集合和专家理想摘要两种方法对TAC2010发布的所有摘要进行了评测,结果表明了该方法的有效性。

关键词：多文档摘要层次潜在狄利克雷分配主题模型语句压缩