检索结果-南通市图书馆

基于ikanalyzer及VSM的人大代表议案建议相似度计算

在线全文

学校读者我要写书评

暂无评论

信息通信 2016年第8期29卷 48-50页

作者：郑翠仙孙文强邓创兴蒋廷耀三峡大学湖北宜昌443002

提出议案建议是人大代表最重要的履职工作之一,人大代表提交议案建议前需要比对分析自己所拟定的议案建议与以往代表所提出的议案建议的重复性,以确定其合理性。文章采用ikanalyzer分词器,基于向量空间模型进行文本相似度计算,构建了人... 详细信息

提出议案建议是人大代表最重要的履职工作之一,人大代表提交议案建议前需要比对分析自己所拟定的议案建议与以往代表所提出的议案建议的重复性,以确定其合理性。文章采用ikanalyzer分词器,基于向量空间模型进行文本相似度计算,构建了人大代表议案建议相似度计算系统,提出了提高系统性能的途径并进行了实验分析。

关键词：议案建议 ikanalyzer 向量空间模型相似度

在线全文

学校读者我要写书评

暂无评论

安规培训系统事件报告单分类技术研究与应用

安规培训系统事件报告单分类技术研究与应用

作者：郭灏华北电力大学

学位级别：硕士

充足的电力供应为我国的经济发展提供了先决条件,基于我国的能源结构的特殊性火力发电厂仍是我国占比最大的发电模式。近年来,智能分类算法的研究不断深入,有效的解决了海量数据下有效信息的获取问题。本文针对火力发电企业的管理人员... 详细信息

充足的电力供应为我国的经济发展提供了先决条件,基于我国的能源结构的特殊性火力发电厂仍是我国占比最大的发电模式。近年来,智能分类算法的研究不断深入,有效的解决了海量数据下有效信息的获取问题。本文针对火力发电企业的管理人员在安规培训管理中出现的问题,结合智能分类算法,考虑“安规两票培训考核系统”的工程实现问题,提出了基于卷积神经网络算法的电厂生产事件报告单分类算法。本文对常用的分类算法进行研究,通过分析火力发电厂生产事件报告单的特点,选定卷积神经网络算法作为分类算法基础并进行优化。使用Ik-Analyzer分词器对事件报告单文本进行中文分词处理,获得报告单的构成词组。通过Text-Rank算法筛选出每张报告单的关键词。选择报告单关键词文本作为语料输入word2vec模型,初步得到关键词对象的空间向量。考虑相应的工程应用以及后续升级工作,应尽量采用同平台下的语言及框架开发,故使用Google的开源项目deeplearning4j进行卷积神经网络分类训练,按照事件报告单所违反的“二十五项反措”内容进行分类。最后经过迭代计算获得神经网络分类模型。在完成建模工作后根据该数据分类模型可以获得未分类事件报告单的推荐分类类型,亦可通过当前热点事件进行事件报告单学习推荐。实测证明,对于用于参考的未分类报告单,本文算法可以有效的筛选出与之匹配的分类类型推荐给用户,并对各种分类类型的匹配度进行统计,对于热点事件亦可以通过分类模型进行事件报告单学习的推荐,便于用户对相关知识点进行强化学习。

关键词：事件报告单卷积神经网络 ikanalyzer TextRank

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于中文分词技术的在线自动答疑系统研究

基于中文分词技术的在线自动答疑系统研究

作者：竹景汉浙江工业大学

学位级别：硕士

随着我国网络技术的发展，计算机技术在各领域也得到了广泛的应用，其中一个重要的应用及典型的实例就是我国网络教育的普及化。而答疑系统与网络教育平台是紧密联系的，它是网络教学中的一个重要支点，答疑系统能帮助学生克服一系列在... 详细信息

随着我国网络技术的发展，计算机技术在各领域也得到了广泛的应用，其中一个重要的应用及典型的实例就是我国网络教育的普及化。而答疑系统与网络教育平台是紧密联系的，它是网络教学中的一个重要支点，答疑系统能帮助学生克服一系列在实际中遇到的问题，解决学习过程中的疑惑，使教学能够更加顺利的进行。它的发展是伴随着多种相关的技术一起应用的，中文分词方法是现阶段中考虑最多的技术。可以说，如果没有使用分词算法，再完美的答疑系统也是不具备智能性的。本文是建立在中文分词技术的基础上，研究和设计的一个在线自动答疑系统。首先，我们分析了这个系统的背景和研究现状;其次，简要的描述了现有的分词技术并确定了将字符串匹配方法作为本文的分词方法;最后确定将全切分图算法应用到字符串匹配方法中。算法的过程大致是：将待处理字符串按照内存中读取的词典内容逐一扫描得到一个串首词集合，对该集合中每一元素的剩余子串进行递归扫描，最后得到一条最优路径的过程。分词质量的好坏直接影响答疑系统的准确性，分词词典的设计影响分词的时间，实验结果表明，该方法有利于实现对字典一次访问后的多次利用，能一定程度提高了智能答疑系统的效率。分析答疑系统自身需要的特点后，研究本系统的程序代码，将基于全切分图算法的机械分词方法嵌入到Lucene全文检索系统中。根据Lucene检索引擎具有很强的面向对象的特征，对其核心部分的抽象类与开放的msnm-lib包中的类进行封装，实现答疑系统的在线自动功能。Lucene系统采用模糊查询的方法，对分词后的关键词在数据库中相应的找到答案，并反馈给学生。最后是对本文全部工作进行总结，也对今后进一步的研究方向做了分析与展望。

关键词：中文分词全切分串首词 MSN机器人 ikanalyzer

基于Heritrix与Solr的就业主题搜索引擎的研究与优化

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

齐齐哈尔大学学报（自然科学版） 2018年第4期34卷 13-20页

作者：郑燕娥郑志明仰恩大学工程技术学院福建泉州362014 湄洲湾职业技术学院福建莆田351254

随着信息化步伐的加快,网络求职越来越普及,通用搜索引擎以及招聘网也成为大学生获取就业信息的主要渠道。针对大多通用搜索引擎搜索的就业信息精准度不高以及招聘网站内容繁杂等问题,研究面向大学生的就业主题搜索引擎系统。借助Herit... 详细信息

随着信息化步伐的加快,网络求职越来越普及,通用搜索引擎以及招聘网也成为大学生获取就业信息的主要渠道。针对大多通用搜索引擎搜索的就业信息精准度不高以及招聘网站内容繁杂等问题,研究面向大学生的就业主题搜索引擎系统。借助Heritrix爬虫工具以及Solr全文搜索引擎进行二次开发,并对Heritrix爬虫工具默认的爬取策略以及队列分配策略进行优化,同时引入IK Analyzer改进Solr的中文分词的准确率。系统原型测试结果表明,系统具有较好抓取效率以及查准率。

关键词：就业主题垂直搜索引擎 Heritrix Solr ikanalyzer

在线全文

学校读者我要写书评

暂无评论

基于Lucene和协同过滤算法的知识推送

长春工业大学学报 2016年第5期37卷 503-506页

作者：肖巍唐东凯孙境棋刘泽豪长春工业大学计算机科学与工程学院吉林长春130012

将Lucene检索技术、ikanalyzer分词器以及Tika文本提取技术相结合进行智能文件检索及分类。然后根据用户的检索结果对文件关键字进行权值设置,用户关注度越高,则关键字权值越大。使用协同过滤算法根据用户查找的内容对用户关注度高的文... 详细信息

将Lucene检索技术、ikanalyzer分词器以及Tika文本提取技术相结合进行智能文件检索及分类。然后根据用户的检索结果对文件关键字进行权值设置,用户关注度越高,则关键字权值越大。使用协同过滤算法根据用户查找的内容对用户关注度高的文件进行推送。

关键词： Lucene ikanalyzer Tika 协同过滤算法

分布式智能地质调查资料全文检索系统的设计与实现

在线全文

学校读者我要写书评

暂无评论

国土资源导刊 2014年第5期11卷 85-88页

作者：陈宇达万勇泉李莉中国地质调查局武汉地质调查中心湖北武汉430205

为了进一步提升地质资料社会化服务的能力和开拓地质资料信息服务的新途径,逐步打破地质资料档案级和文件级检索的局限性,本文提出并设计了综合运用ikanalyzer、Lucene、Java RMI等技术的地质资料全文检索系统解决方案。通过实践表明,... 详细信息

为了进一步提升地质资料社会化服务的能力和开拓地质资料信息服务的新途径,逐步打破地质资料档案级和文件级检索的局限性,本文提出并设计了综合运用ikanalyzer、Lucene、Java RMI等技术的地质资料全文检索系统解决方案。通过实践表明,该系统可以有效地提升地质资料检索能力和用户体验,为地质资料的社会化服务提供了高效、快捷、简明、互动的服务平台。

关键词：分布式 ikanalyzer 地质调查资料全文检索系统

在线全文

学校读者我要写书评

暂无评论

基于Hadoop的文本分析平台实践

安顺学院学报 2020年第1期22卷 132-136页

作者：张吉亮尹兰贵州师范大学大数据与计算机科学学院

分析大量的非结构化文本数据已经成为各类研究及数据分析中的重要任务。本文借助Hadoop分布式计算平台,搭建了一个基于ikanalyzer开源工具的文本分析应用系统框架,系统基于Spring Boot架构进行了Web应用平台搭建,结合node.js技术构建了... 详细信息

分析大量的非结构化文本数据已经成为各类研究及数据分析中的重要任务。本文借助Hadoop分布式计算平台,搭建了一个基于ikanalyzer开源工具的文本分析应用系统框架,系统基于Spring Boot架构进行了Web应用平台搭建,结合node.js技术构建了数据驱动的Web前端UI呈现。研究实践了从文档收集、文档预处理、分布式计算、中文分词及词频分析、可视化呈现的初步流程。借助该系统平台,研究分别以金庸小说文本数据及采集的贵州省极贫乡镇教育基础数据作为语料数据进行了相关文本统计分析实践。

关键词： Hadoop ikanalyzer Srping Boot node.js 中文信息处理

两种中文分词算法在云计算平台上的实现及比较

在线全文

学校读者我要写书评

暂无评论

网络安全技术与应用 2014年第12期 67-67,71页

作者：孟帮杰王占刚天津工业大学计算机科学与软件学院天津300387

当前ikanalyzer(IK)和ICTCLAS(IC)是主流的中文分词算法。文中首先通过理论对比二者在单机环境下的性能,然后使用Hadoop集群、Hadoop分布式文件管理系统(HDFS)和并行处理大数据集的Map Reduce组成的框架,利用优化后的算法,通过大量的实... 详细信息

当前ikanalyzer(IK)和ICTCLAS(IC)是主流的中文分词算法。文中首先通过理论对比二者在单机环境下的性能,然后使用Hadoop集群、Hadoop分布式文件管理系统(HDFS)和并行处理大数据集的Map Reduce组成的框架,利用优化后的算法,通过大量的实验对二者在分布式环境下处理大数据集的表现做出比较。

关键词： ikanalyzer 倒置排序 HDFS Map Reduce Hadoop

云计算平台上两种中文分词算法的实现对比研究

在线全文

学校读者我要写书评

暂无评论

电脑知识与技术 2021年第9期17卷 191-192页

作者：周寅龙广富武汉船舶职业技术学院湖北武汉430050

现如今,常用的中文分词算法为ikanalyzer(简称为:IK)和ICTCLAS(简称为:IC)两种,这两种算法也可以说是如今的主流中文分词算法,为了能够更好的研究两种算法的性能,本文首先利用理论对两种算法在单机环境下的性能进行分析,而后通过Hadoop... 详细信息

现如今,常用的中文分词算法为ikanalyzer(简称为:IK)和ICTCLAS(简称为:IC)两种,这两种算法也可以说是如今的主流中文分词算法,为了能够更好的研究两种算法的性能,本文首先利用理论对两种算法在单机环境下的性能进行分析,而后通过Hadoop分布式文件管理系统(简称为:HDFS)、Hadoop集群和并行处理大数据集的MapReduce所共同组成的系统框架,并将算法优化后,通过开展大量的实践性实验对两种不同算法在分布式环境下对大数据集进行处理后的表现进行比较,而后得出具体的分析结果,希望能够为相关人士带来帮助。

关键词：云计算 ikanalyzer ICTCLAS Hadoop 比较