检索结果-南通市图书馆

vSpec: workload-adaptive operating system specialization for virtual machines in cloud computing

在线全文

同方期刊数据库

学校读者我要写书评

暂无评论

Science China(Information Sciences) 2016年第9期59卷 47-62页

作者： Xinkui ZHAO Jianwei YIN zuoning chen Sheng HE College of Computer Science Zhejiang University National Parallel Computing Engineering Research Center Jiangnan Institute of Computing Technology

In general, operating systems(OSs) are designed to mediate access to device hardware by applications. They process different kinds of system calls using an indiscriminate kernel with the same *** in cloud computing platforms are constructed from service components. Each of the service components is assigned separately to an individual virtual machine(VM), which leads to homogeneous system calls on each VM. In addition, the requirements for kernel function and configuration of system parameters from different VMs are different. Therefore, the suit-to-all design incurs an unnecessary performance overhead and restricts the OS’s processing capacity in cloud computing. In this paper, we propose an adaptive model for cloud computing to resolve the conflict between generality and performance. Our model adaptively specializes the OS of a VM according to the resource-consuming characteristics of workloads on the VM. We implement a prototype of the adaptive model, v Spec. There are five classes of VM: CPU-intensive, memory-intensive, I/O-intensive, networkintensive and compound, according to the resource-consuming characteristics of the workloads running on the VMs. v Spec specializes the OS of a VM according to the VM class. We perform comprehensive experiments to evaluate the effectiveness of v Spec on benchmarks and real-world applications.

关键词： workload classification operating system specialization workload-aware cloud computing v Spec system performance

Scalability and efficiency challenges for the exascale supercomputing system:practice of a parallel supporting environment on the Sunway exascale prototype system

在线全文

同方期刊数据库

学校读者我要写书评

暂无评论

Frontiers of Information Technology & Electronic Engineering 2023年第1期24卷 41-58页

作者： Xiaobin HE Xin chen Heng GUO Xin LIU Dexun chen Yuling YANG Jie GAO Yunlong FENG Longde chen Xiaona DIAO zuoning chen National Research Center of Parallel Computer Engineering and Technology Beijing 100190China

With the continuous improvement of supercomputer performance and the integration of artificial intelligence with traditional scientific computing,the scale of applications is gradually increasing,from millions to tens of millions of computing cores,which raises great challenges to achieve high scalability and efficiency of parallel applications on super-large-scale *** the Sunway exascale prototype system as an example,in this paper we first analyze the challenges of high scalability and high efficiency for parallel applications in the exascale *** overcome these challenges,the optimization technologies used in the parallel supporting environment software on the Sunway exascale prototype system are highlighted,including the parallel operating system,input/output(I/O)optimization technology,ultra-large-scale parallel debugging technology,10-million-core parallel algorithm,and mixed-precision *** operating systems and I/O optimization technology mainly support largescale system scaling,while the ultra-large-scale parallel debugging technology,10-million-core parallel algorithm,and mixed-precision method mainly enhance the efficiency of large-scale ***,the contributions to various applications running on the Sunway exascale prototype system are introduced,verifying the effectiveness of the parallel supporting environment design.

关键词： Parallel computing Sunway Ultra-large-scale Supercomputer

MDDS:一种面向高性能计算的并行文件系统元数据性能提升方法

在线全文

学校读者我要写书评

暂无评论

计算机研究与发展 2014年第8期51卷 1663-1670页

作者：陈起陈左宁蒋金虎江南计算技术研究所江苏无锡214083

随着计算能力的增强、应用课题规模和复杂度的增加,高性能计算机对并行文件系统性能要求越来越高.在海量小文件和大规模并发I/O操作的应用场景中,文件系统元数据的吞吐率成为限制其性能的关键因素.设计并实现了元数据代理(meta data del... 详细信息

随着计算能力的增强、应用课题规模和复杂度的增加,高性能计算机对并行文件系统性能要求越来越高.在海量小文件和大规模并发I/O操作的应用场景中,文件系统元数据的吞吐率成为限制其性能的关键因素.设计并实现了元数据代理(meta data delegation service,MDDS),通过降低元数据服务间的耦合度,保证元数据集群的高可用性;使用目录子树方式管理元数据代理空间,避免跨节点目录引入的分布式原子操作的复杂性和低效性.并针对高性能计算中I/O转发架构,提出基于元数据代理的两种作业调度策略——单作业独占单元数据代理调度和多作业共享多元数据代理调度——实现作业间和作业内的负载均衡.在116台存储服务器上对MDDS进行评估,实验结果表明,元数据代理提供了拟线性的元数据性能,在大规模的环境中较Lustre CMD方案有较好的扩展性;两种调度方式有效分散了作业元数据的负载,改善了高性能计算中的元数据瓶颈问题.

关键词：高性能计算并行文件系统元数据代理 I O转发负载均衡

在线全文

学校读者我要写书评

暂无评论

基于统计数据的超级计算机内存故障分析

计算机工程 2019年第5期45卷 35-45页

作者：刘睿涛陈左宁数学工程与先进计算国家重点实验室江苏无锡214215 国家并行计算机工程技术研究中心北京100190

基于神威太湖之光和神威蓝光超级计算机的巨量内存故障统计数据,建立P级超级计算机的内存失效时间模型。采用序列规则挖掘方法,分析内存失效序列模式,得到CPU节点上内存失效序列与后续内存失效的关联关系。通过协同分析方法研究并行应... 详细信息

基于神威太湖之光和神威蓝光超级计算机的巨量内存故障统计数据,建立P级超级计算机的内存失效时间模型。采用序列规则挖掘方法,分析内存失效序列模式,得到CPU节点上内存失效序列与后续内存失效的关联关系。通过协同分析方法研究并行应用的内存故障与内存失效特征,结果表明计算-访存-I/O密集型应用对内存故障影响较大,而应用类型对内存失效的影响有限,内存失效可能与内存芯片自身的可靠性有关。

关键词：超级计算机内存故障内存失效统计数据失效模型关联关系协同分析

在线全文

学校读者我要写书评

暂无评论

针对多阶段调用的硬件资源调度方法及实现

计算机应用与软件 2013年第3期30卷 89-90,104页

作者：邓锐陈左宁江南计算技术研究所江苏无锡214083

多阶段调用,是指应用对硬件资源的一次完整的使用需要分为多个应用层到内核层的调用阶段,而各个阶段必须顺序地不被打断地完成,典型的例子就是对硬件实现的hash算法的调用。通过分析现有的相关调度方法,指出其中的不足,并提出一种新的... 详细信息

多阶段调用,是指应用对硬件资源的一次完整的使用需要分为多个应用层到内核层的调用阶段,而各个阶段必须顺序地不被打断地完成,典型的例子就是对硬件实现的hash算法的调用。通过分析现有的相关调度方法,指出其中的不足,并提出一种新的基于应用对象标定以及操作系统自身维护特性的调度方法,重点解决上层应用对象意外消亡的异常情况。进一步,分别在Linux和Windows下提出一种具体的实现方式,并通过测试验证了其正确性和有效性。

关键词：多阶段调用调度方法操作系统设备驱动

在线全文

学校读者我要写书评

暂无评论

面向用户的并行计算机系统可用性建模研究

计算机研究与发展 2008年第5期45卷 886-894页

作者：郑方郑霄李宏亮陈左宁江南计算技术研究所无锡214083

随着并行计算机系统规模的扩大,系统可用性面临很大的挑战,对大规模并行计算机系统可用性进行量化评估能为系统分析和设计提供有力的支持.根据任务和采用的容错策略,使用随机行为网建立了两个不同实例的并行计算机系统面向用户的可用性... 详细信息

随着并行计算机系统规模的扩大,系统可用性面临很大的挑战,对大规模并行计算机系统可用性进行量化评估能为系统分析和设计提供有力的支持.根据任务和采用的容错策略,使用随机行为网建立了两个不同实例的并行计算机系统面向用户的可用性模型,模型在节点模块和网络模块基础上描述了任务执行的具体情况,并以执行中的有用工作比率作为可用度指标.最后结合实际数据进行了求解和分析.同一个系统下不同应用可能会反映给用户有较大差异的可用性特征,使用面向用户的并行计算机系统可用性模型可以较为精确地量化这种差异.

关键词：可用性量化模型随机行为网容错面向用户

提高Linux桌面交互性能的主动页面换出算法

在线全文

学校读者我要写书评

暂无评论

计算机工程 2006年第17期32卷 112-114页

作者：吴邦欲陈左宁顾明孙家广清华大学计算机科学与技术系北京100084 江南计算技术研究所无锡214083

Linux系统正逐步由服务器领域步入桌面领域,由于Linux继承了传统的Unix的体系结构和算法,它能否为桌面应用提供好的交互性能是一个迫切需要研究的问题。该文分析了现有的Linux存储管理页面换出机制在交互式桌面应用中的不足,提出了符合... 详细信息

Linux系统正逐步由服务器领域步入桌面领域,由于Linux继承了传统的Unix的体系结构和算法,它能否为桌面应用提供好的交互性能是一个迫切需要研究的问题。该文分析了现有的Linux存储管理页面换出机制在交互式桌面应用中的不足,提出了符合交互式应用特点的主动页面换出算法。该算法基于页面状态等价关系优化了原系统中页面状态转换自动机模型,使得系统在内存压力大的情况下有条件紧急回收内存页面,从而提高桌面系统的交互性能。

关键词：桌而应用存储管理交互性能页面换出启动延迟

在线全文

学校读者我要写书评

暂无评论

图计算中基于一致性约束条件的迭代模型研究

计算机研究与发展 2019年第2期56卷 431-441页

作者：孙茹君张鲁飞郝子宇陈左宁数学工程与先进计算国家重点实验室江苏无锡214125 国家并行计算机工程技术研究中心北京100190

迭代计算是数值计算中有效的逼近方式,能够拟合多种计算模型.在大数据分析领域尤其是图计算中,迭代计算能够抽象描述大部分图算法,对结构化数据挖据和关联分析至关重要.随着数据规模的增长,很多精确算法的时空复杂度已经难以满足现实需... 详细信息

迭代计算是数值计算中有效的逼近方式,能够拟合多种计算模型.在大数据分析领域尤其是图计算中,迭代计算能够抽象描述大部分图算法,对结构化数据挖据和关联分析至关重要.随着数据规模的增长,很多精确算法的时空复杂度已经难以满足现实需求,迭代计算的算法越来越丰富.并行迭代是图计算的主要实现形式,已有的图并行策略大多数是同步模型,少量异步模型,对于一致性约束条件下的迭代研究较少.研究内容重点关注图计算模型中迭代执行技术,分析了同步迭代和异步迭代的适用性,以及不同一致性下的异步迭代方式,针对已有异步迭代方式的不足提出了自适应的弱一致异步执行模型,并进行了验证性实验.实验证明:该模型能有效提高部分图算法的执行效率,尤其是收敛速度和效果.

关键词：图迭代分布式计算同步迭代弱一致异步迭代

在线全文

学校读者我要写书评

暂无评论

数据驱动的自适应容错技术研究

计算机工程 2018年第12期44卷 46-55页

作者：刘睿涛陈左宁数学工程与先进计算国家重点实验室江苏无锡214215 国家并行计算机工程技术研究中心北京100190

基于系统故障数据建立层次化失效模型,有助于优化检查点,提升系统可用性水平,应对未来E级计算的可靠性挑战。以太湖之光系统为研究主体,介绍故障采集、分类与处理机制,基于实际故障数据建立细粒度失效分布模型及应用级失效模型的多层失... 详细信息

基于系统故障数据建立层次化失效模型,有助于优化检查点,提升系统可用性水平,应对未来E级计算的可靠性挑战。以太湖之光系统为研究主体,介绍故障采集、分类与处理机制,基于实际故障数据建立细粒度失效分布模型及应用级失效模型的多层失效模型,量化应用运行环境的可靠性。以该模型为基础,分析自适应的检查点容错优化模型,为检查点优化提供理论与工程依据。以太湖之光系统为例进行检查点的容错优化分析,结果表明,数据驱动的自适应容错模型可有效降低系统检查点开销。

关键词：超级计算机失效模型数据驱动自适应容错技术