检索结果-南通市图书馆

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于hadoop的犯罪行为特征分析与研究

基于Hadoop的犯罪行为特征分析与研究

作者：周广斌哈尔滨理工大学

学位级别：硕士

随着社会经济和计算机技术的不断发展,人工智能、数据挖掘、大数据技术、机器学习以及数据可视化等新技术的应用领域不断扩大,形成了各具特色的研究分支技术。国民经济和新技术的发展,也让犯罪行为趋于高智能化、动态化和科技化,违法乱... 详细信息

随着社会经济和计算机技术的不断发展,人工智能、数据挖掘、大数据技术、机器学习以及数据可视化等新技术的应用领域不断扩大,形成了各具特色的研究分支技术。国民经济和新技术的发展,也让犯罪行为趋于高智能化、动态化和科技化,违法乱纪的犯罪行为对我国公安警务机制改革、执法策略制定、犯罪行为控制以及防范工作带来了严峻考验。面对高智商和高科技犯罪,警务工作者如何正确的犯罪特征分析并根据分析结果采取有效措施避免对人们生命财产造成威胁是公安系统亟待解决的首要问题。目前,针对犯罪行为的分析,大部分根据历史犯罪数据进行半人工化的分析,这种分析方式已不能满足警务安全的需求,因此,需要一种智能化的犯罪特征分析方法和系统满足警务安全的需求,降低警务人员的工作量,提高犯罪特征分析的效率。本文基于hadoop大数据技术,对监管改造信息管理系统中收集到的罪犯信息建立数据库,并对收集的罪犯信息进行数据预处理,包括数据的采集和数据的分析分类,通过犯罪行为分析本文所涉及系统的需求,结合聚类算法以及关联规则算法,完成了犯罪行为特征分析系统的设计。本文基于Java语言和B/S构架完成犯罪行为特征分析系统的设计,根据系统设计需求,完成了数据解析系统、犯罪行为分群子系统以及犯罪行为特征分析子系统的设计。最后通过黑白盒测试方法完成系统测试,系统设计实现了用户登录系统、数据解析系统、犯罪分群系统、犯罪行为特征分析系统。并对系统的运行效果进行测试,测试结果表明,该系统可满足犯罪特征分析的需求,为公安系统犯罪行为特征分析提供参考和借鉴。

关键词： Hadoop技术犯罪特征分析聚类算法关联规则算法

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于Ukey验证的媒体资产管理系统

基于Ukey验证的媒体资产管理系统

作者：加依达尔·巴岱北京交通大学

学位级别：硕士

如今,网络的快速发展使信息和数据的共享和交流日益广泛和深入。与此同时,随着互联网上敏感资源数量的不断增加,人们愈发意识到数据资源保护的重要性。随着数字多媒体资源已经全面取代传媒体资源,数字技术的应用极大地促进了多媒体技术... 详细信息

如今,网络的快速发展使信息和数据的共享和交流日益广泛和深入。与此同时,随着互联网上敏感资源数量的不断增加,人们愈发意识到数据资源保护的重要性。随着数字多媒体资源已经全面取代传媒体资源,数字技术的应用极大地促进了多媒体技术的发展。而数字技术的应用,和人们对高清高质多媒体影视资源的需求,不仅带来了多媒体影视资产的制作、存储和管理上的问题,也带来了在公共通信网络中存储和传输的数据安全性问题。为解决这些问题,建设一个提高高清高质媒体资产的渲染速度,并为海量影视资产的存储管理提供支持,同时保障数字媒体资产的存取率和安全性的媒体资产管理系统,成为企业必要的开发工作。因此,本课题将研发实现一个可对海量媒体资产进行高效存储管理,并且可以通过实现基于Ukey的身份认证平台来实现对企业系统安全的维护。在本系统的研发过程中,本人参与完成了如下工作:媒体资产管理系统的需求分析,系统的设计,系统的实现环节。包括媒资上传功能,媒资检索功能,媒资著录功能,著录审核功能及用户管理功能的模块设计与开发实现,同时也参与了基于Ukey验证的身份认证功能的研发、设计与实现工作。本系统基于hadoop分布式存储平台的架构设计,运用分布式存储管理方式开发,实现了将大量存储空间整合来提供多媒体资源的并行存取;分布式渲染极大地提高了高清高质媒体资产的渲染速度,实现了对多媒体资产的冗余存储;同时采用Ukey验证,在原有身份认证技术的研究之上,参考数字签名式技术,研究得出一种新的认证方法,将其应用在企业媒资管理系统的开发中,实现了对企业系统数据安全的维护。目前该系统已投入上线,且运行稳定。通过研究实现的系统功能,可以高效地实现多媒体资产的存储管理,提高高清高质多媒体资产的渲染效果,同时也提高了企业系统中多媒体数据资源的安全性。

关键词：媒体资产管理系统 Hadoop技术 UKey 安全认证

基于hadoop的海洋环境信息分布式架构设计

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

海洋测绘 2019年第6期39卷 79-82页

作者：袁延艺金际航李海滨海军海洋测绘研究所

海洋环境信息建设是实现“认知海洋”、“透明海洋”、“智能海洋”的基础,从分散海洋环境信息海量数据采集、异构海洋环境信息的高效数据存储、基于节点动态性能的海量海洋环境信息数据处理与分析任务分配、基于人工智能的定向功能的... 详细信息

海洋环境信息建设是实现“认知海洋”、“透明海洋”、“智能海洋”的基础,从分散海洋环境信息海量数据采集、异构海洋环境信息的高效数据存储、基于节点动态性能的海量海洋环境信息数据处理与分析任务分配、基于人工智能的定向功能的辅助决策等四个方面,探讨了基于Hadoop技术的海洋环境信息分布式架构设计方法,实现将海量、多源、异构、多时空、动态的海洋环境信息进行高效、高质、及时、快速的采集、传输、存储、处理、分析及智能化应用,以全面提升海洋环境自主信息感知获取、融合处理和应急保障能力。

关键词：海洋环境信息 Hadoop技术云平台分布式架构辅助决策大数据

维普期刊数据库

同方期刊数据库评论

在线全文

学校读者我要写书评

暂无评论

基于云计算的设备状态维护关键技术研究

基于云计算的设备状态维护关键技术研究

作者：杨明西安科技大学

学位级别：硕士

设备维护作为提升现代化企业核心竞争力的重要因素,是企业生产效益和经济效益的重要保证,如何制定设备的维修计划以及采取何种维修行动是企业进行设备维护需要解决的关键性问题。设备运行低故障甚至零故障的期望,使得企业更加注重运用... 详细信息

设备维护作为提升现代化企业核心竞争力的重要因素,是企业生产效益和经济效益的重要保证,如何制定设备的维修计划以及采取何种维修行动是企业进行设备维护需要解决的关键性问题。设备运行低故障甚至零故障的期望,使得企业更加注重运用先进的检测、诊断技术保证设备的健康运行,与此同时也产生了大量的设备运行、故障等方面的信息。针对上述问题,本文将云计算技术和设备维护技术相结合,提出了基于hadoop的设备状态维护云平台,为现代企业进行设备维护提供了一种新方法和新思路。首先,基于Hadoop技术,建立设备状态维护云平台的体系架构,对网络各层进行布局,并进一步设计设备状态维护服务层在设备维修管理方面的功能模块,根据各功能模块的作用对其进行详细论述。其次,研究以期望平均维护总费用最小为目标的设备状态维护模型,综合分析考虑设备失效率、最小修理费用和停机造成的损失等因素对模型的影响,在此基础上,提出一种基于遗传算法的决策模型优化求解方法,并进行实例验证。最后,为了提高和优化计算速度,研究基于MapReduce计算模型和遗传算法相结合的快速求解方法,提高求解效率,并开发程序和验证。通过对基于云计算的设备状态维护关键技术研究,可以有效的为设备维护行动提供决策建议,并且具有求解速度快,资源利用合理等优势,很好的满足了企业的需要也促进了设备维护技术的进步。

关键词：云计算设备状态维护 Hadoop技术遗传算法 MapReduce

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于个性化推荐的移动学习模型研究与应用

基于个性化推荐的移动学习模型研究与应用

作者：董翰薇北京工业大学

学位级别：硕士

近年来,大数据、移动技术的飞速发展使人们的生活已经无法脱离智能手机,由于其便捷性、移动性等特点,已被广泛应用于各个领域。在教育领域中,则出现了一种利用智能移动终端的新型学习模式——“移动学习”。这种学习模式可以使学习者用... 详细信息

近年来,大数据、移动技术的飞速发展使人们的生活已经无法脱离智能手机,由于其便捷性、移动性等特点,已被广泛应用于各个领域。在教育领域中,则出现了一种利用智能移动终端的新型学习模式——“移动学习”。这种学习模式可以使学习者用户在任何时间、任何地点根据自己的喜好进行学习,从而激发学习者的学习兴趣,但是,随着教学资源的爆炸式增长,针对移动学习中海量数据的存储及资源的有效利用成为了目前亟待解决的问题。因此,本研究旨在针对移动学习应用,研究海量数据的存储及资源利用的问题。在海量教学资源存储方面,采用大数据云存储平台hadoop作为移动学习系统的存储平台,由于hadoop在小文件存储方面存在较大缺陷,本文提出了一种小文件存储的优化策略,解决了小文件存储瓶颈。在系统开发方面,首先对系统进行需求分析,系统架构设计,然后构建了基于个性化推荐的移动学习模型,最后根据模型进行开发并实现。在开发过程中,设计了个性化资源推荐模块,通过对协同过滤推荐算法进行研究并优化,使该教学资源的推荐精确度有了一定的提高。本研究不仅有效解决了海量资源存储的问题,还满足了学习者在学习过程中的个性化需求,使教学资源利用率得到了一定的提高。使学生能够更方便、更高效的进行移动学习。

关键词：大数据教学资源 Hadoop技术个性化推荐

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于大数据的企业用户数据分析平台的设计

电子技术与软件工程 2022年第19期 205-209页

作者：姚子扬宝鸡文理学院陕西省宝鸡市721000

本文围绕着基于大数据的企业用户数据分析平台的设计展开探讨,对用户行为分析做出概述,对基于数据分析的大数据技术进行分析,探索借助大数据技术构建用户数据分析平台的重要价值,明确系统设计需求,并提出一种基于大数据的企业用户数据... 详细信息

本文围绕着基于大数据的企业用户数据分析平台的设计展开探讨,对用户行为分析做出概述,对基于数据分析的大数据技术进行分析,探索借助大数据技术构建用户数据分析平台的重要价值,明确系统设计需求,并提出一种基于大数据的企业用户数据分析平台的设计方案,为相关的系统架构设计提供一定的思路,促进大数据技术在企业生产营销中的应用,推动企业信息化发展。

关键词： Hadoop技术企业用户数据分析平台信息系统设计

维普期刊数据库

同方期刊数据库评论

在线全文

学校读者我要写书评

暂无评论

基于云计算的海量大数据存储系统设计和实现

信息与电脑 2022年第23期34卷 147-149页

作者：孙惠芬江苏联合职业技术学院镇江分院江苏镇江212006

云计算技术是大数据存储、处理和管理的一项热门技术。随着互联网中海量数据的爆炸性增加,传统数据存储方式逐渐无法充分满足对海量数据存储的要求,而云计算中的云存储技术为海量数据存储提供了解决思路。为实现对海量数据的管理、存储... 详细信息

云计算技术是大数据存储、处理和管理的一项热门技术。随着互联网中海量数据的爆炸性增加,传统数据存储方式逐渐无法充分满足对海量数据存储的要求,而云计算中的云存储技术为海量数据存储提供了解决思路。为实现对海量数据的管理、存储以及智能分析,基于云计算技术对海量大数据的存储和管理等展开相应的研究,并根据hadoop架构技术提出了一种新型的海量大数据存储系统设计方案,同时给出了各项模块的设计方案,增强了对海量大数据的高效存储、处理以及管理的能力。

关键词：云计算技术海量大数据存储系统 Hadoop技术云存储

林业科技成果标识方法及其信息管理系统设计与实现

维普期刊数据库

同方期刊数据库评论

在线全文

学校读者我要写书评

暂无评论

林业科技成果标识方法及其信息管理系统设计与实现

作者：高军中国林业科学研究院

学位级别：硕士

林业领域的科研项目具有持续性、系统性、原始性和公益性等特点。该类项目的历史科研项目成果整编工作的本质目标是将通过考察、观测、探测、监测、调查、试验、实验以及编撰等方式获取到的科研数据、图集、典志、标本和样品等经过系统... 详细信息

林业领域的科研项目具有持续性、系统性、原始性和公益性等特点。该类项目的历史科研项目成果整编工作的本质目标是将通过考察、观测、探测、监测、调查、试验、实验以及编撰等方式获取到的科研数据、图集、典志、标本和样品等经过系统化、规范化的集成,达到共享利用,支撑科技发展。过去绝大部分已结题的林业项目数据资料由于没有得到有效的集成、整编与挖掘,有些数据资料在结题后就没有再发挥作用,不利于林业科技事业的发展。目前,林业领域已经对其所涵盖的一些对象进行了分类和标识。但是这些标识适用范围小,不能够很好的实现林业科技成果与全国共享数据体系的融合,其规范化程度、互操作能力以及标识唯一性、扩展性和便捷访问性都存在较大局限。为了处理林业科技成果标识局限性这一问题,需要为其建立新的标识体系。国际上常用的标识技术有数字对象标识符、对象标识符、电子产品代码等。电子产品代码（Electronic Product Code）对格式、长度要求严格,而且兼容性和可扩展性差。数字对象标识符（Digital Object Identifier）标识技术主要应用在出版领域,存在着知识产权的问题并且容易产生信息安全隐患。对象标识符（Object Identifier）与其他标识机制比较起来,具有明显的特征:结构上以分层的形式建立、可灵活兼容现有标识体系、容易扩展,可以在元数据标识和多种对象标识中使用。基于对象标识符的物联网统一标识体系可灵活的与现有的林业领域标识兼容,为林业领域奠定统一标识基础,所以可以作为林业领域的标识编码技术使用。本文引入OID（对象标识符,Object Identifer）技术建立了林业科技成果的标识与解析机制,提出了一种新的科学数据共享交换方法,建立了林业领域的标识体系。进而具体到为每条记录、每份文档和每张图片建立唯一对象标识符。为林业科技成果建立了分层灵活、可扩展性强、不定长的标识,使其能够兼容现有的各种编码机制的同时还具备自主可控性,适于国家和各行业应用的统一管理。有效落实了林业基础性工作数据进一步集成共享,为科技创新提供坚实基础的地位。对于标识后的林业科技成果管理来说。面对日益增长的林业科技成果,传统的数据库管理系统扩展能力差。对硬件设备的要求高,且价格昂贵,数据管理安全性低。为了解决管理系统的扩展性这一问题,本研究中使用Hadoop技术来设计并实现标识后的林业科技成果管理系统。针对标识后的林业科技成果,本文基于Hadoop技术实现了林业科技成果管理原型系统。并且针对林业历史科技成果进行OID统一编码。将其中的非结构化数据存储于HDFS当中,将元数据和结构化数据存储于HBase数据库中。以这种方式来保存数据,为数据的保存提供了副本机制,当发现有损坏的数据时,可以及时的自动修复损坏的数据,保证了数据的可靠性以及存储的灵活性。最后对设计的林业科技成果管理原型系统功能进行了测试。结果表明,该系统基于Hadoop技术实现了Web端的数据上传、下载,数据编辑,数据展示,数据查询功能。

关键词：林业科技成果 Hadoop技术数据共享 OID（对像标识符）

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

使用微博分类算法优化疾病防控过程的研究

使用微博分类算法优化疾病防控过程的研究

作者：王志国燕山大学

学位级别：硕士

互联网络带来第三次工业革命后,更深刻的改变了世界人民的生活习惯。就我国国内情况来看,微博就是互联网时代的宠儿。微博这一新时代的产品从无到有,发展到普及而至今更是拥有了覆盖全国的互联网产品。当前,数据分析组织可以从网络传输... 详细信息

互联网络带来第三次工业革命后,更深刻的改变了世界人民的生活习惯。就我国国内情况来看,微博就是互联网时代的宠儿。微博这一新时代的产品从无到有,发展到普及而至今更是拥有了覆盖全国的互联网产品。当前,数据分析组织可以从网络传输过程和存储数据中提取到海量的文本信息。本文研究的算法是使用这些大规模的数据,根据疾病防控的具体需求,及时、准确的提取出有价值的统计分析信息,从而为疾病爆发及时报警和季节性传染病的预防工作提供有指导意义的分析数据。本文中主要研究工作如下。首先,对微博、非结构化文本、大数据技术进行简要分析,包括微博的发展现状、特点,非结构化文本的处理中各个步骤涵盖的技术,大数据技术、云计算技术的相关理论知识。其次,使用申请到的新浪微博API使用权,开发算法获得一定规模的微博文本,对这些文本进行预处理后,分别作为训练语料和分析数据。分析的过程包括计算语料库,特征提取和对提取的结果进行评价等关键部分。最后,根据疾病防控中心的具体要求,将分析数据结果进行完全格式化,产生报表界面显示。还对运行本分类算法需要hadoop平台配置方法和Map-Reduce算法进行简要描述。

关键词：疾病防控微博文本 Hadoop技术