检索结果-南通市图书馆

晋图学刊 2003年第2期 21-23页

作者：王彩霞南京大学信息管理系江苏南京210093

本文介绍了自动摘要技术的发展情况,着重分析了几种主要的自动摘要技术,探讨了自动摘要应考虑的因素,并谈了中文文献的自动摘要技术,最后提出与自动摘要相关的技术难点。

关键词：自动摘要技术中文文献自动文摘自动摘录信息抽取

维普期刊数据库

浅谈自动摘要技术在边防情报公开文献收集中的应用

在线全文

学校读者我要写书评

暂无评论

科技信息(学术研究) 2008年第5期 37-38页

作者：陈晨中国人民武装警察部队学院

随着信息分析处理技术的发展,情报的搜集已由过去的主要依靠秘密手段搜集逐步转向主要利用公开途径搜集。据统计,21世纪90年代以来,世界各国所需情报的60%以上来自公开的收集途径。但是,我边防情报部门所需要的重要信息往往会被大篇幅... 详细信息

随着信息分析处理技术的发展,情报的搜集已由过去的主要依靠秘密手段搜集逐步转向主要利用公开途径搜集。据统计,21世纪90年代以来,世界各国所需情报的60%以上来自公开的收集途径。但是,我边防情报部门所需要的重要信息往往会被大篇幅的冗余信息淹没。如何迅速准确地从海量信息中发现对我边防工作有价值的情报信息,是我边防情报收集工作的重要部分,自动摘要技术的发展及应用则会大大提高情报收集的效率。

关键词：自动摘要技术情报收集公开文献特征词

在线全文

同方期刊数据库

学校读者我要写书评

暂无评论

一种跨语言的自动摘要技术

电脑与信息技术 2009年第4期17卷 5-7页

作者：洪田玉陈志刚中南大学信息科学与工程学院长沙410083

随着信息快速增长,如何从大量文档中提取摘要信息成为自然语言处理一个重要的研究方向。文章提出了一种不依赖于任何训练集和自然语言本身信息的自动摘要方法,该方法利用改进后的PageRank公式和HITS公式对文档所有句子打分排序,选取得... 详细信息

随着信息快速增长,如何从大量文档中提取摘要信息成为自然语言处理一个重要的研究方向。文章提出了一种不依赖于任何训练集和自然语言本身信息的自动摘要方法,该方法利用改进后的PageRank公式和HITS公式对文档所有句子打分排序,选取得分高的句子作为摘要。实验证明,该方法简单易行,具有高效性,良好的效果以及扩展性。

关键词：自动摘要技术 PageRank HITS

维普期刊数据库

在线全文

学校读者我要写书评

暂无评论

基于大语言模型的法律文本的自动摘要方法

数据分析与知识发现 2024年

作者：朱丹浩黄肖宇李堯霖王东波江苏警官学院刑事科学技术系江苏警官学院计算机信息与网络安全系南京理工大学信息管理与信息系统系南京农业大学信息管理学院

[目的]法律文本自动摘要是法律人工智能领域的重要研究方向。目前，传统的法律文本摘要方法仅关注法律文本的序列化信息，忽视了其中的逻辑结构，处理复杂的法律语言结构和内容时效果有限，准确性和逻辑性无法满足实际工作需求。[方法]... 详细信息

[目的]法律文本自动摘要是法律人工智能领域的重要研究方向。目前，传统的法律文本摘要方法仅关注法律文本的序列化信息，忽视了其中的逻辑结构，处理复杂的法律语言结构和内容时效果有限，准确性和逻辑性无法满足实际工作需求。[方法]本文提出了一种基于大语言模型微调的法律文本自动摘要方法。主要工作包括：1）构建了一套法律文本摘要指令数据集。2）探索了指令增强和结果增强两种数据增强方式。3）对预训练模型进行领域化微调，并对结果进行了多维度评价。[结果]在CAIL2020数据集上，本文方法在ROUGE-1、ROUGE-2 和ROUGE-L的F1 指标上分别比最好的基准结果增长了13.8、21.3和7.4。在人工评估和智能评估方面的结果也进一步证明了本文方法在各个维度的有效性。[局限]在处理专业术语密集和逻辑结构复杂的法律文本时，生成的摘要在细节和法律条款的准确性上仍存在不足。[结论]基于大语言模型微调可有效提升法律文本的摘要水平。

关键词：法律文本自动摘要技术大语言模型指令数据集领域化微调

在线全文

同方期刊数据库

学校读者我要写书评

暂无评论

网络舆情监控管理系统的设计与实现

网络舆情监控管理系统的设计与实现

作者：徐美燕电子科技大学

学位级别：硕士

互联网改变了人们的信息的获取和信息共享的方式,为广大网民的生活带来方便的同时给政府管理网络增加了难度。网络的匿名性导致了人们可以非常自由的发表自己对事情的看法,特别是对一些焦点事件、热点问题和敏感话题,传播非常快,有些片... 详细信息

互联网改变了人们的信息的获取和信息共享的方式,为广大网民的生活带来方便的同时给政府管理网络增加了难度。网络的匿名性导致了人们可以非常自由的发表自己对事情的看法,特别是对一些焦点事件、热点问题和敏感话题,传播非常快,有些片面的观点容易误导网民。如何采取有效的计算机技术管理这些舆情信息是一项值得研究的问题。本文对信息收集模式下舆情监控系统进行了探讨,主要研究如下:1、通过研究国内外的研究现状,对舆情收集、舆情处理和舆情反馈这几个方面的现状和不足进行了分析,明确了网络舆情监管工作的重点和困难。在明确了项目的需求的基础上,对网络舆情监控系统进行概要的设计,梳理了系统流程、搭建了系统框架,并细化了功能要求,指明了开发设计的具体方向和方法。2、在参考其他类似系统的基础上采用了网络信息数据采集技术、信息数据智能化处理技术、文本挖掘技术以及模糊检索技术设计网络舆情监控系统。该系统需要具备在互联网中的新闻网页、论坛、微博、贴吧等数据源进行精准采集、定向采集和综合关联分析功能,以提供互联网舆情信息检索、互联网热点信息发现、跟踪定位、敏感信息监控、舆情实时监管、统计分析等多维度的互联网舆情分析服务。采用新的算法处理网页舆情,及时上报突发群体性事件。3、设计了针对网络舆情监控系统的测试用例,主要是完成了完整的功能测试和压力测试。测试结果的结论是表示系统的达到了设计目标。设计开发的舆情监控系统已经协助政府智能部门、企事业单位第一时间把握舆情动向,准确掌握预警信息,响应较大影响的重要事件,从正面引导舆论和宣传,消除负面影响,建设社会主义主流舆论,并为政府企事业单位提供决策依据。

关键词：消息总线信息抽取事件预警去噪自动摘要技术

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于新闻文本摘要的突发事件演化分析

基于新闻文本摘要的突发事件演化分析

作者：刘桐电子科技大学

学位级别：硕士

突发事件通常会对人类社会及环境造成直接的破坏性和重大影响,因此人民群众对其抱有极大地关注度。且近几十年,突发事件频发,尤其是当下处于疫情时代,突发的公共卫生事件更是备受重视。当今的移动互联网时代,有助于大众及时获取有关突... 详细信息

突发事件通常会对人类社会及环境造成直接的破坏性和重大影响,因此人民群众对其抱有极大地关注度。且近几十年,突发事件频发,尤其是当下处于疫情时代,突发的公共卫生事件更是备受重视。当今的移动互联网时代,有助于大众及时获取有关突发事件的信息并开展救援等。但同时,网络上信息纷杂,很难使适应碎片化阅读的大众便捷、全面、系统地了解某一事件,尤其是当该事件影响持续时间较长时。因此,从杂乱无章的大量事件文本中抽取出重要信息,并按照时间逻辑顺序,简明扼要地呈现事件发展情况具有现实意义。而从给定文本中提取最重要信息的自动摘要技术是实现该目标的重要研究方向。因此,本文通过对自动摘要技术进行研究,设计实现了SCC-UNILM生成模型,构建了突发事件时间演化序列,并完成了突发事件信息抽取系统的设计与实现。本文主要的工作内容如下:1.本文分析了目前摘要算法存在的问题,针对这些问题以及本文的目的,选用UNILM模型,并在其基础上,融合了拷贝机制,将sparse softmax替代传统softmax,在整体损失函数中加入coverage损失,完成了UNILM生成式算法的改进,提出了SCC-UNILM生成模型。并利用ROUGE评价值作为评价指标,在LCSTS数据集上进行验证,改进的SCC-UNILM模型的表现优于其他基准模型。2.本文主要利用了改进的SCC-UNILM算法,时序生成算法以及消除冗余信息的算法设计了突发事件的时间演化序列的构建方法。其主要由文本预处理模块、文本聚类及去重模块以及突发事件时间演化序列生成模块共三个模块组成。其中突发事件时间演化序列生成模块是核心模块。为了尽可能多的保留有用信息,将文本按照自然段为单位进行摘要生成。又由于构建的是时间序列,那么就需要保证每个段落皆有时间标识。因此,本文设计了时序生成算法。然而,在尽可能多的保留有用信息的同时,也带来了多余的重复信息。所以,本文还提出了结合语义角色标注的句子相似度计算的办法去除冗余信息。最后,再依照事件背景、事件经过、事件影响的结构组织成了完整的事件时间演化序列的构建。3.本文设计了一个突发事件信息抽取系统。该系统包含了文本预处理模块、篇章信息抽取模块以及事件时间演化序列生成模块。主要实现了分词＆词性分析、指代消解、语义角色标注、关键词提取、文本摘要生成和事件时间演化序列生成的功能。

关键词：自动摘要技术突发事件 UNILM 事件演化

基于深度学习的企业文档知识搜索系统的研究与实现

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于深度学习的企业文档知识搜索系统的研究与实现

作者：司纯北京邮电大学

学位级别：硕士

在现代计算机技术蓬勃发展之前,纸质文档是人们传递信息和承载智慧的重要媒介,而如今信息科技快速发展,电子文档因其更便于传输和存储,成为了人们沟通协作的重要媒介,也是企业内部重要的智力资产。随着数字化转型的加快,文档数量呈指数... 详细信息

在现代计算机技术蓬勃发展之前,纸质文档是人们传递信息和承载智慧的重要媒介,而如今信息科技快速发展,电子文档因其更便于传输和存储,成为了人们沟通协作的重要媒介,也是企业内部重要的智力资产。随着数字化转型的加快,文档数量呈指数级快速增长,电子文档使用频率高幅增加,如何从海量文档中快速准确地定位目标文件,并为用户提供优质的文档搜索体验成为我们需要关注的问题。本文在调研现有文档搜索产品的基础上,设计一种面向企业的文档搜索框架——千寻,并且以该框架为基础,实现了企业文档知识搜索系统,同时针对中文长文本研发了自动摘要模型。在系统功能方面,主要围绕文档管理和文档搜索两部分实现,为了提供良好的用户搜索体验,系统提供全文检索功能,支持多种常见格式文档的在线预览,并且提供图谱增强搜索功能辅助用户关联信息。同时,对用户上传的文档提取关键信息生成简短摘要,并在搜索结果页面同文件名等关键信息一同返回给用户,辅助用户快速定位目标文件。自动摘要模型采用抽取与生成相结合的方式进行构建,首先用RoBERTa预训练模型进行向量化,并用全局平均池化进行降维处理,进而输入注意力层学习向量语句之间的相互关系,微调句向量;其次将句向量输入以DGCNN为主体的摘要抽取模型,标注关键语句用于下一步的训练;最后用T5-PEGASUS预训练模型对抽取出的语句进行润色,得到最终的文本摘要。本文设计实现的企业文档知识搜索系统为不同权限等阶的用户提供了完整的文档管理与文档搜索功能,且设计诸多针对文档搜索的特色辅助功能,提升用户的文档搜索体验与搜索效率。实验结果表明,本文提出的中文长文本摘要模型具有更好的效果,Rouge-1分值达到70.26,提升了 4.02%,Rouge-L 分值达到 67.15,提升了 2.15%;且本文改进的向量化方法在使摘要抽取的准确率和精准率小幅度提升的同时,也使召回率提高了三个百分点。

关键词：中文长文本摘要自动摘要技术知识图谱文档检索