检索结果-南通市图书馆

作者：曹大洲吉林大学

学位级别：硕士

随着Internet 技术的不断发展和广泛应用,网络中流媒体的数据越来越多。流媒体的实时性、宽带性的特点使得Internet 资源不能满足要求,因此流媒体代理缓存技术被提出来。由于流媒体文件非常庞大,目前最常用的Web 代理缓存策略不适合缓... 详细信息

随着Internet 技术的不断发展和广泛应用,网络中流媒体的数据越来越多。流媒体的实时性、宽带性的特点使得Internet 资源不能满足要求,因此流媒体代理缓存技术被提出来。由于流媒体文件非常庞大,目前最常用的Web 代理缓存策略不适合缓存流媒体文件,因此迫切需要新的代理缓存策略来解决这些问题。流媒体代理缓存的设计目标是节约网络资源,减轻流媒体服务器的负担,降低客户端的启动延迟时间,提高对用户的服务质量。同时代理服务器的缓存策略能够保证代理缓存的利用率尽可能大。本文在参考已有的流媒体代理缓存理论基础上,采用前缀缓存+变长分段+动态缓存的缓存管理策略;参照流媒体服务器的工作原理,采用RTSP 协议作为流传输协议,实现了流媒体代理缓存系统。

关键词：流媒体代理缓存前缀缓存变长分段动态缓存 RTSP

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于强化学习的短视频推荐及缓存策略研究

基于强化学习的短视频推荐及缓存策略研究

作者：李建科西安电子科技大学

学位级别：硕士

目前,在短视频平台浏览短视频已经成为人们日常生活中最主流的娱乐方式之一。短视频之所以具有强大的吸引力,是因为其精简的视频内容让用户能够在碎片化的休息时间完成观看,以缓解压力、放松心情。常见的短视频Application(APP)通过视... 详细信息

目前,在短视频平台浏览短视频已经成为人们日常生活中最主流的娱乐方式之一。短视频之所以具有强大的吸引力,是因为其精简的视频内容让用户能够在碎片化的休息时间完成观看,以缓解压力、放松心情。常见的短视频Application(APP)通过视频推荐技术为用户量身推荐符合用户个性化的视频。然而,短视频APP中除了短视频以外还有大量的直播视频。目前直播视频已经成为短视频APP运营商的主要盈利方式,具有重要的商业价值。然而,目前针对短视频和直播视频的联合推荐方法的研究较少。视频缓存技术通过在客户端维护视频缓存队列,防止用户在观看短视频时出现卡顿。不过,如果提前缓存的短视频没有被用户观看,将造成用户流量的大量浪费。针对以上问题,本文的工作描述如下:首先,本文重点研究了短视频服务器中的短视频和直播视频的联合推荐,即在短视频推荐列表中添加直播视频推荐条目。为此,我们提出了一种基于两级强化学习的联合视频推荐系统。该系统分为两个部分:首先使用级联Deep Q-network(DQN)算法得到待推荐的短视频列表,然后通过Asynchronous Advantage Actor-Critic(A3C)算法将直播视频添加到短视频推荐列表中。级联DQN不仅可以找到适合用户的短视频,还考虑了不同短视频之间的关系,为用户推荐合适的、已排序的短视频队列。在向短视频推荐列表中添加直播视频时,A3C会结合用户当前的空闲时间长度以及推荐队列中各个短视频与待添加的直播视频之间的相似度,从而决定是否将直播视频添加到短视频推荐队列中。在进行视频添加时,还需要考虑直播视频的选择以及直播视频的添加位置。本文通过时间序列预测来完成推荐直播视频的添加。最终,与随机将直播视频添加到短视频推荐队列中的算法相比,基于两级强化学习的联合视频推荐系统在提高用户使用短视频APP的时间以及提高用户观看推荐的直播视频的概率这两方面都有着突出的效果。其次,本文研究了短视频APP中缓存队列里的短视频缓存策略。为了最小化用户的卡顿次数以及用户带宽浪费,本文提出了基于Proximal Policy Optimization(PPO)的动态缓存和速率控制系统。该系统在带宽较好时缓存较少的视频块,以避免带宽的浪费;而在带宽较差时,该系统需要保证缓存区中存在较多的视频块,并且降低下一个短视频的播放速率,同时需要保证该短视频缓存比例较高,以此来降低用户卡顿的概率。为了实现上述目标,本文引入了Web RTC中基于时延的带宽预测算法来预测网络带宽,并设计了基于块的短视频缓存策略。最终,本文使用PPO算法来决定三个动作,分别是:本时隙是否缓存视频块、对缓存区中短视频的重排序以及下一个短视频的播放速率。相比传统的尽量填满缓存区的算法以及类抖音缓存算法,本系统可以显著减少视频卡顿次数和网络带宽的浪费,从而提高用户的观看体验和网络资源利用效率。

关键词：短视频联合推荐强化学习动态缓存速率控制

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于块匹配和随机蕨的电子稳像方法研究

基于块匹配和随机蕨的电子稳像方法研究

作者：胡晖华中科技大学

学位级别：硕士

电子稳像算法与传统的稳像方法相比具有高实时性、体积小、易于操作、高精度、低功耗等诸多优势，在军事和民用生活中有着广泛应用。随着稳像算法的成熟和稳像产品的问世，电子稳像的研究越来越重要。论文首先说明了研究电子稳像的意... 详细信息

电子稳像算法与传统的稳像方法相比具有高实时性、体积小、易于操作、高精度、低功耗等诸多优势，在军事和民用生活中有着广泛应用。随着稳像算法的成熟和稳像产品的问世，电子稳像的研究越来越重要。论文首先说明了研究电子稳像的意义和必要性，介绍了目前国内外的研究情况;随后详细阐述了电子稳像的基本原理，介绍并分析了摄像机的运动模型和图像运动模型;重点分析了几种经典的电子稳像核心算法（运动矢量估计，运动决定，运动补偿）以及其适用情况和局限性。针对目前没有哪一种电子稳像方法能够应用于任何场景的稳像这一情况，分别设计了基于摄像机载体固定和存在扫描运动两种情况的电子稳像系统，有针对性的采用合适的运动估计和运动补偿算法。对于摄像机载体固定情况，选用大视场图像作为参考帧，随机蕨分类匹配和块匹配方法作为运动估计算法，直接进行补偿输出;对于存在扫描运动的摄像机载体情况，设计动态缓存为参考帧，采用块匹配和特征匹配进行运动估计，然后选用Kalman滤波和阻尼系数进行运动决定和运动补偿，获取清晰稳定的视频。最后对稳像结果进行了客观的分析和评价。本文还采用工业摄像机在电子稳像系统平台下实现了实时稳像输出，分析其在实际应用中的实时性能。

关键词：电子稳像运动估计块匹配随机蕨动态缓存

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

流媒体代理缓存技术的研究与实现

流媒体代理缓存技术的研究与实现

作者：李四海山东大学

学位级别：硕士

随着Internet技术的不断发展和普及，简单的文本、图像、声音信息已经不能满足人们的需要，取而代之的是音频、视频、符号数据形成的综合多媒体信息，即流媒体。流媒体的特点就是媒体数据量大且需要在网络上快速传递，因此必须消耗可观... 详细信息

随着Internet技术的不断发展和普及，简单的文本、图像、声音信息已经不能满足人们的需要，取而代之的是音频、视频、符号数据形成的综合多媒体信息，即流媒体。流媒体的特点就是媒体数据量大且需要在网络上快速传递，因此必须消耗可观的网络资源。网络资源紧张又常常导致流媒体应用难以满足实际需求。流媒体传输技术是解决网络资源紧张与流媒体传输过多消耗资源这一矛盾的重要研究内容。流媒体代理缓存技术是从Web代理缓存技术发展而来的，Web代理缓存是目前为止WWW服务中最有效和最常用的机制。Web代理缓存机制适合缓存需求较小的文件，而流媒体文件通常有几百MB到几个GB，并不适合完全缓存，因此需要研究新的缓存策略。本文主要采取三种策略：前缀缓存、变长分段缓存（后缀缓存）和动态缓存。三种策略是联系在一起的，从媒体普及角度出发考虑媒体被给予的代理缓存空间，能提高代理缓存的利用率，提高代理对客户的服务质量。同时，为解决媒体的开始反应时间和数据传送的平稳，在传送的过程中把媒体分成两部分，前面的部分比较小，就是前缀缓存，后面的部分比较大，叫后缀。前缀缓存保存在代理缓存中，当客户申请时，首先播放前缀缓存所存储的部分媒体，并把后缀缓存的部分从内容服务器传送到代理服务器，当播放完前缀缓存，再播放后缀缓存的部分。这种方法有效地解决了开始的有效延迟时间和数据的平滑问题。变长分段是人为地把来自服务器的数据分成长度固定的块。初始段（即前缀）包含一定数量的块，第一段包含块数等于初始段，后面每一段都包含前一段2倍的块数。对于所有的媒体，规定前缀都是可以缓存的，并且前缀缓存只能由其他的媒体文件的前缀来替换;对于变长分段，通过计算它的普及度来决定是否允许缓存。普及度和分段的长度有关，和此分段被访问的次数以及前面已经在代理中缓存的分段被访问次数有关，即分段越长，普及度越小;被访问的次数越多，普及度越大。代理缓存的替换策略采用分段替换+LRU替换策略。媒体已缓存部分的缓存值类似于普及度，缓存值和媒体被缓存部分的长度以及被访问的次数有关。把

关键词：流媒体代理缓存前缀缓存变长分段动态缓存

分离式内存系统的分布式事务机制性能优化研究

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

分离式内存系统的分布式事务机制性能优化研究

作者：杨飞宇华中科技大学

学位级别：硕士

新兴的分离式内存系统具有扩展性好、可用性高和资源利用率高等优良特性,有望成为新一代主流系统架构。但是其存储资源与计算资源分离的特点使得传统分布式事务机制无法直接应用,而现有的相关研究工作未关注到分离式内存系统对事务获取... 详细信息

新兴的分离式内存系统具有扩展性好、可用性高和资源利用率高等优良特性,有望成为新一代主流系统架构。但是其存储资源与计算资源分离的特点使得传统分布式事务机制无法直接应用,而现有的相关研究工作未关注到分离式内存系统对事务获取数据锁和数据值的限制,存在热点数据加锁失败率高和事务执行时间长的问题。这些问题会增大事务的中止率,进而影响事务的性能。针对热点数据加锁失败率高的问题,提出了热点感知的数据分区策略(HotspotAware Data Partitioning,HADP)。HADP首先通过事务的读写集识别出系统中的热点数据以及热点数据间的关联度信息。其次通过将热点信息和关联度信息转化为图并执行图划分操作,在计算节点间实现了热点数据所有权的划分,以支持计算节点在本地对热点数据加锁,从而提高了加锁成功率。针对事务执行时间过长的问题,提出了空间友好的动态缓存策略(Space Friendly Dynamic Cache,SFDC)。SFDC首先通过复用HADP的分区结果,以支持计算节点缓存自己持有所有权的数据,从而避免节点间的缓存一致性问题。其次通过使用指针的空白位设计了组合计数器,在不占用额外内存空间的前提下维护了数据的访问次数。最后通过元数据信息为数据定义了空间价值,以筛选出最能节省网络开销的地址和数据值进行缓存,从而实现缓存的动态调整。基于这两种策略,设计并实现了适用于分离式内存系统的高性能分布式事务Ashen。在对数据分区策略和动态缓存策略进行有效性测试的基础上,使用拟真测试负载对其进行性能测试。测试结果表明,在TPCC测试负载下Ashen相较于FORD和FaRM事务提交吞吐量最高提升26.6%和120%。

关键词：分离式内存分布式事务数据分区动态缓存

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

片上网络路由器的缓存优化研究

片上网络路由器的缓存优化研究

作者：刘成哈尔滨工业大学

学位级别：硕士

随着半导体工艺尺寸的持续降低,系统集成度的不断提高,SoC体系结构的焦点由单核以计算为核心的设计转移到多核以通信为核心的设计。在复杂的多核SoC系统中,通信所消耗的功耗已经和逻辑运算以及存储消耗的功耗相当,并有望超过它们。芯片... 详细信息

随着半导体工艺尺寸的持续降低,系统集成度的不断提高,SoC体系结构的焦点由单核以计算为核心的设计转移到多核以通信为核心的设计。在复杂的多核SoC系统中,通信所消耗的功耗已经和逻辑运算以及存储消耗的功耗相当,并有望超过它们。芯片面积和功耗预算日益受控于芯片的互连网络,这使得片上互连设计研究倍受关注,并成为推动NoC优化研究的一个主要动力。片上网络路由器的缓存占据着整个网络很大比重的功耗和面积,并对网络的性能有着显著的影响,因此片上网络路由器缓存的优化研究具有重要的意义。为了指导缓存优化,给出了一种基于参数组（λ, H ,α,δ）的流量特征模型,该模型能够准确地量化应用的负载特征。同时利用经典的流量模型分析了片上网络缓存利用率分布的一般规律,发现了缓存利用率的时间和空间分布不均,由此提出了动态优化与静态优化相结合的优化思想,在这种思想的指导下,完成了以下两种缓存优化方案的设计。1)针对一般性的虚拟通道路由器结构,提出了一种静态虚通道数量分配与动态功率门控相结合的缓存优化方法。首先建立片上网络输出阻塞概率模型,依据网络中阻塞概率分配网络中不同节点不同端口的虚拟通道数量,平衡网络中虚拟通道的利用情况。然后引入功率门控策略,适时关闭掉系统运行中处于空闲状态的虚拟通道,降低片上网络的静态功耗开销。这样,针对片上网络的缓存利用特征从空间和时间两个角度实现了缓存的优化。试验结果表明,与单一的缓存分配或者功率门控策略相比,这种混合的优化算法在低负载下能够获得20.30%4.53%的能耗节省,即使是在网络饱和注入率附近,也可获得大约8.5%左右的能耗节省。2)针对虚拟通道功能限定的路由器结构,提出了一种静态缓存容量分配与动态缓存结构相结合的缓存优化方法。首先采用简化的单一缓存通道路由器模型进行排队分析,计算网络中各个端口缓存满概率,并以此为依据应用贪心算法分配各个端口缓存容量,去除网络中缓存的空间分布冗余。然后设计了一种动态缓存结构,使得同一端口不同的虚拟通道能够共享所有空闲的缓存,充分利用了有限的缓存资源。这样,静态缓存容量分配算法忽略的同一端口内数据冲突信息正好可由动态缓存结构来弥补,两种优化方法结合起来,进一步降低了片上网络缓存开销。与单一的缓存分配或者动态缓存结构相比,结合后的优化方法能够节省10.00%6.43%的缓存开销。

关键词：片上网络缓存优化缓存分配功率门控动态缓存

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

电子商务网站中高性能数据搜索关键技术研究

电子商务网站中高性能数据搜索关键技术研究

作者：赵文发武汉理工大学

学位级别：硕士

随着Web技术飞速发展,全球经济一体化的形成,顾客的消费水平不断提高,企业之间的竞争日益加剧,加上政治、经济、社会环境的巨大变化,导致市场需求的日益多样化。电子商务在这种环境里得到了迅猛的发展。但机遇和挑战总是并存,在电子商... 详细信息

随着Web技术飞速发展,全球经济一体化的形成,顾客的消费水平不断提高,企业之间的竞争日益加剧,加上政治、经济、社会环境的巨大变化,导致市场需求的日益多样化。电子商务在这种环境里得到了迅猛的发展。但机遇和挑战总是并存,在电子商务快速发展的同时,电子商务网站的访问性能成为影响企业竞争力的重要因素。本文首先介绍影响网站访问性能的四个因素数据库查询速度、Web服务器的反应速度、浏览器(用户)到Web服务器之间的访问速度和浏览器显示页面信息的速度,分析了数据库查询优化技术和基于软件的优化技术的研究现状。其次,以一具体的商务网站——网上书店为背景对网站访问性能优化技术进行研究。分析网上书店的需求,运用UML技术进行了功能设计、架构设计和数据库设计。网上书店的一个关键问题是如何从大量的图书信息中搜索出用户所需的图书信息,并将搜索到的信息尽快的传递到用户界面上。网上书店的数据库的设计应该遵循查询速度最快的原则,因为与用户的交互大多数是查询而不是修改数据。本文探讨了提高网上书店查询速度的方法,包括使用索引,优化SQL语句,在表的设计中以空间换时间,将图书信息表按类别分割成一定数量的小表,以及基于Ajax的局部刷新,异步读取技术。网上书店的网页可以按照功用的不同分为6类,它们的访问命中率是不同的。显然提高命中率高的网页的反应速度可以收到事半功倍的效果。本文选择命中率高的近期图书销售排行榜来进行了三种实现:不运用缓存、运用SqlDataSource控件数据缓存和运用部分页面输出缓存,这三种实现证明了利用适当的缓存可以大大提高网站反应速度(约80倍)。

关键词：电子商务数据库优化动态缓存 *** Ajax

面向QoS需求的网络流量调度与整形方法研究

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

面向QoS需求的网络流量调度与整形方法研究

作者：王张煜南京信息工程大学

学位级别：硕士

近年来,互联网在各类领域中发挥着越来越重要的作用,这使得用户对网络的服务质量(Quality of Service,QoS)提出了更高的要求。随着网络中业务量的迅速增长,节点缓存和链路带宽逐渐无法承受业务流量的汇聚与传输,导致网络频繁出现拥塞状... 详细信息

近年来,互联网在各类领域中发挥着越来越重要的作用,这使得用户对网络的服务质量(Quality of Service,QoS)提出了更高的要求。随着网络中业务量的迅速增长,节点缓存和链路带宽逐渐无法承受业务流量的汇聚与传输,导致网络频繁出现拥塞状况。队列调度和流量整形是缓解网络拥塞的常用方法,两者分别从流量的调度顺序和流量的突发限制对网络的QoS进行保障。本文针对现有队列调度和流量整形算法的不足展开了深入的研究,具体内容如下:(1)针对现有队列调度算法中长数据包调度不及时导致业务传输时延增加和队列缓存空间不足的问题,提出一种基于动态权重和动态缓存的队列调度算法DWDB。该算法首先对赤字加权轮询(Dynamic Weighted Round Robin,DWRR)的权重参数进行了动态优化,解决了长数据包出现连续多轮未被调度的问题;其次,该算法引入动态队列缓存容量的思想,通过借用其它队列缓存进行协同调度,解决队列缓存空间不足的问题。实验结果表明,DWDB相较于其它对比算法在时延、丢包和抖动上至少降低了8.5%、5.8%和34.6%。(2)针对现有流量整形算法处理突发流量能力不足,最终引起业务传输优先级降低的问题,提出一种基于可变速率和动态令牌分配的流量整形算法VRDTA。该算法首先对单速率三色标记(single rate Three Color Marker,sr TCM)的令牌投放速率进行了可变优化,解决了令牌资源浪费的问题;其次,该算法使所有队列共享E桶令牌,解决了高突发流量带来的令牌不足问题;最后,该算法引入令牌借贷策略,解决了数据包延迟发送的问题。实验结果表明,VRDTA相较于其它对比算法,在时延、丢包和抖动上至少降低了11.8%、10.9%和14.0%。

关键词：队列调度流量整形动态权重动态缓存令牌分配

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

融合多源信息的生物医学命名实体识别研究

融合多源信息的生物医学命名实体识别研究

作者：童逸琦厦门大学

学位级别：硕士

生物医学命名实体识别旨在从海量非结构化文本中自动抽取疾病、基因和化学药物等实体提及,是许多下游自然语言处理任务的基础。目前基于深度学习的BioNER方法通常需要大量的训练数据。而受生物医学领域高度专业性的限制以及研究人员在... 详细信息

生物医学命名实体识别旨在从海量非结构化文本中自动抽取疾病、基因和化学药物等实体提及,是许多下游自然语言处理任务的基础。目前基于深度学习的BioNER方法通常需要大量的训练数据。而受生物医学领域高度专业性的限制以及研究人员在道德伦理、数据隐私等方面的考虑,BioNER数据集的规模远小于新闻等通用领域NER数据集,这极大限制了模型的识别效果。与以往研究集中于如何让模型更好的利用词级别信息不同,本文提出了一个基于多任务学习的BioNER模型。该模型可同时支持分类、实体识别、问答等多个任务,在不引入外部数据的前提下,我们通过设计多个辅助任务来充分利用数据集本身隐含的粗粒度信息,进而提升BioNER性能。另一方面,针对目前大多数BioNER方法未考虑领域知识的问题,本文还初步探索了将BioNER转换为机器阅读理解问题,通过精心设计的问答对来引入先验知识。此外,目前大多数神经架构BioNER系统将独立的句子视为其训练单元,而不考虑上下文信息,该类方法往往存在标签不一致的问题,即同一文档中所含的不同句子,其相同的实体提及被错误识别为不同标签。为了解决该问题,本文提出了一个基于动态缓存的BioNER模型。该模型使用缓存结构记忆历史隐状态,并通过一个上下文门控结构和多头注意力机制进行跨句建模。为了动态更新缓存我们设计了一个辅助任务和打分函数来定量衡量不同句子所包含的历史信息大小。本文采用当前最先进的预训练模型BioBERT作为基线系统,并在三个公开的BioNER数据集上进行了实验。其结果表明,引入句内粗粒度信息的模型能分别取得0.40,0.37和0.91的F1值提升,引入先验知识的模型能分别取得的F1值提升0.46,0.30和0.43的F1值提升,而引入句间信息的模型能分别取得0.30,0.53和1.08的F1值提升。

关键词：生物医学命名实体识别多源信息多任务学习动态缓存

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于视觉暂留的电子稳像方法研究

基于视觉暂留的电子稳像方法研究

作者：陈承康华中科技大学

学位级别：硕士

无论在军用还是民用上，摄像系统的应用都越来越广泛。摄像平台受到干扰产生无意识运动会导致得到的图像序列存在抖动，影响了进一步的图像分析。稳像方法由此产生。与传统的稳像方法比较，电子稳像具有高实时性、高精度、低功耗、低成... 详细信息

无论在军用还是民用上，摄像系统的应用都越来越广泛。摄像平台受到干扰产生无意识运动会导致得到的图像序列存在抖动，影响了进一步的图像分析。稳像方法由此产生。与传统的稳像方法比较，电子稳像具有高实时性、高精度、低功耗、低成本、体积小等优势。论文先是详细介绍了电子稳像的意义以及国内外的发展情况;然后阐述了电子稳像的基本原理、系统组成，以及图像的运动模型;接着分析了电子稳像各个子模块（运动估计、运动决定、运动补偿）的基本算法的适用情况和局限。目前的电子稳像方法足以满足大多数的应用，但是在图像序列间具有大动态抖动情况下无法正常工作。在这种情况下，我们提出了一种能够处理大动态抖动图像序列的高精度电子稳像方法——基于视觉暂留效应的电子稳像方法。该方法使用了一个拼接的大场景作为参考帧，分别采用改进的块匹配和特征匹配两种方法进行运动估计，然后用Kalman滤波器估算出有意运动矢量，接着使用了基于清晰度的图像融合策略更新参考帧，最后从更新的参考帧中获取清晰稳定的稳像结果。论文最后针对各种情况下的视频分别进行了多组实验。实验结果表明文中提出的算法稳定有效，精度达到了亚像素级，而且具有很高的实时性，能够有效处理多种情况下的图像序列。

关键词：电子稳像视觉暂留特征匹配 Harris-SIFT 动态缓存实时稳像