检索结果-南通市图书馆

在线全文

学校读者我要写书评

暂无评论

基于数据分配策略的数据泄漏检测研究

计算机工程 2015年第4期41卷 140-144页

作者：唐昌龙刘吉强北京交通大学计算机与信息技术学院北京100044

使用数据分配策略(DAS)能有效检测数据泄露。鉴于此,分别介绍基于第1代和第2代DAS的检测方法。利用过失模型在解决数据泄漏检测问题上的优势,研究基于过失代理模型的数据分配算法,对其中的明确数据请求分配算法、随机假对象分配算法和优... 详细信息

使用数据分配策略(DAS)能有效检测数据泄露。鉴于此,分别介绍基于第1代和第2代DAS的检测方法。利用过失模型在解决数据泄漏检测问题上的优势,研究基于过失代理模型的数据分配算法,对其中的明确数据请求分配算法、随机假对象分配算法和优化Agent选择算法进行优化,并对代理模型进行实验仿真,结果表明,优化算法在添加伪数据后能明显提高对过失代理的检测率。此外,还给出针对过失模型的研究方向。

关键词：数据分配策略过失模型数据泄漏保护数据隐私伪数据

在线全文

学校读者我要写书评

暂无评论

浅谈面向物联网传感器信息的数据分配策略

科技资讯 2016年第26期14卷 18-18,20页

作者：张红天津现代职业技术学院天津300350

物联网是在技术不断发展的基础上提出的一个全新概念,主要指的是利用物理世界中的物体相互通信协作来完成同一个任务的技术,此技术从提出至今虽然只有短短十几年,但是取得的成绩却十分巨大。物联网传感器数据具有海量性的特征,主要是因... 详细信息

物联网是在技术不断发展的基础上提出的一个全新概念,主要指的是利用物理世界中的物体相互通信协作来完成同一个任务的技术,此技术从提出至今虽然只有短短十几年,但是取得的成绩却十分巨大。物联网传感器数据具有海量性的特征,主要是因为物联网传感器会不断地产生大量的描述物理的信息,而这些信息会被汇聚到数据中心,进而形成海量的数据流,海量数据流不仅包括实时信息,还包括历史信息。因为物联网传感器的数据信息和时间、空间都有关系,所以如果不进行有效的数据分配,很容易产生访问失衡的情况,该文就面向物联网传感器信息的数据分配策略展开讨论,旨在实现数据分配的最优,从而达到全时域中的通信成本最低。

关键词：物联网传感器信息数据分配策略

在线全文

学校读者我要写书评

暂无评论

分布式数据库中数据分配策略及费用分析研究

上海海运学院学报 1997年第2期18卷 47-51页

作者：郑宇周广声上海海运学院计算机系

在分布式数据库系统的设计中，数据的分配问题直接影响着系统的性能。本文论述了分布式数据库中的３种数据分配策略，并通过实例对各种数据分配方法进行了分析与比较。

关键词：分布式数据库数据分配策略费用分析

异构平台下基于HDFS的数据动态分配策略研究

在线全文

学校读者我要写书评

暂无评论

异构平台下基于HDFS的数据动态分配策略研究

作者：文士林北方工业大学

学位级别：硕士

随着信息化社会的快速发展,互联网中的数据量急速增长。由于传统存储模式难以突破其存储限制,分布式存储系统便越来越受欢迎,其中HDFS(Hadoop Distributed File System)是目前应用比较广泛的一个分布式文件存储系统。随着先进存储设备... 详细信息

随着信息化社会的快速发展,互联网中的数据量急速增长。由于传统存储模式难以突破其存储限制,分布式存储系统便越来越受欢迎,其中HDFS(Hadoop Distributed File System)是目前应用比较广泛的一个分布式文件存储系统。随着先进存储设备的发展,具有高读写性能的SSD和普通磁盘等异构设备作为目前主流的存储介质,已被广泛应用于HDFS系统中。HDFS有效解决了大数据处理面临的海量数据存储问题,并通过提供不同的数据存储策略和相应的存储接口来对冷热度不同的数据进行存放,这样开发人员就可以利用这些接口实现对数据的分类存储。然而,如何精确地对HDFS系统中的冷数据和热数据进行分配成为当前最为关键的问题。经过研究与分析发现,在对HDFS系统中数据进行分配时,现阶段通常采用的分配算法是首先为所有数据统一分配存储策略,然后根据数据的访问频率去动态调整其存储策略,从而实现对冷热数据的分配。但是采用传统算法对HDFS系统中的数据进行分配时,存在以卜问题:一方面,一些冷数据可能被存储在SSD上,导致系统中SSD的命中率不高,无法充分发挥SSD作用,造成SSD硬件资源的浪费,影响HDFS的性能;另一方面,一些热数据可能被存储在普通磁盘上,导致这些数据的读写效率低,降低了系统的吞吐量和存取效率,也会影响HDFS的性能。针对传统分配算法存在的问题,本文基于HDFS在数据(文件级)分配策略方面进行研究,完成的主要工作如下:(1)通过热度值来反映文件的访问热度,提出了一种基于Trace分析预设文件初始热度值的方法。其主要思想是:基于其他HDFS应用程序的大量Trace或当前HDFS应用程序的历史记录进行分析,综合考虑文件类型、大小和上传用户等影响因素,构建模型来计算不同类型文件的热度值。这样,当每个新文件第一次上传时,根据其类型,为其预设一个初始热度值,实现对文件热度的初始分配。(2)传统方法中基于访问频率的动态分配策略是利用过去一段时间的文件访问次数来预测文件未来的访问频率,而忽略了文件类型和大小等一些关键因素对文件未来访问频率影响的事实。为此,提出了一种利用BP神经网络调整文件热度值的方法。当文件被访问时,综合考虑文件类型、大小和访问次数等影响因素,构建模型来计算文件的实时热度值,并利用BP进行调整。然后根据调整后的热度值,预测出经常访问的文件和不常访问的文件,实现对文件热度的实时分配。(3)在文件热度分配以后,利用HDFS提供的六种存储策略和相应的存储接口,根据文件热度,将文件存储到具有不同读写性能的异构设备中。(4)基于HDFS,用本文的数据分配策略对比传统的数据分配算法,进行大量仿真和实验,实验证明本文的数据分配策略能较好地提升HDFS性能。

关键词： HDFS 异构设备热度值 BP神经网络数据分配策略

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

一种复杂多边形最大内圆的快速查找算法

光谱学与光谱分析 2013年第6期33卷 1581-1586页

作者：沈占锋 Yongwei Sheng 骆剑承中国科学院遥感与数字地球研究所北京100101 Department of Geography University of CaliforniaLos Angeles(UCLA)

任意多边形的最大内圆的快速查找在多个领域有着重要的应用。首先给出了任意多边形的Voronoi图的生成方法,以及基于Voronoi图实现该多边形的最大内圆的寻找算法,在此基础上分别采用中线简化及并行化处理对算法进行了效率方面的改进,并... 详细信息

任意多边形的最大内圆的快速查找在多个领域有着重要的应用。首先给出了任意多边形的Voronoi图的生成方法,以及基于Voronoi图实现该多边形的最大内圆的寻找算法,在此基础上分别采用中线简化及并行化处理对算法进行了效率方面的改进,并重点研究了矢量数据并行化过程中的数据分配策略,给出了其最优数据划分策略——算法复杂度均衡法。最后对北美阿拉斯加地区的多个湖泊进行了最大内圆的查找实验,相应的实验结果表明,改进的方法能够很大程度地提高最大内圆的查找效率。

关键词：最大内圆 Voronoi 中线(Medial Axis) 并行计算数据分配策略