检索结果-南通市图书馆

面向指-笔混合输入的交互原语和交互模型研究

在线全文

学校读者我要写书评

暂无评论

软件学报 2024年第4期35卷 2022-2038页

作者：仝青山康文惠付强黄进田丰戴国忠人机交互北京市重点实验室(中国科学院软件研究所) 北京100190 中国科学院大学计算机科学与技术学院北京100049

随着触摸设备的普及,指、笔输入已成为移动办公的一种主流输入方式.然而现有的应用主要以手指或笔通道中的一种作为输入,限制了用户的交互空间.同时,现有的指-笔混合研究主要关注串行的指-笔分工协作和特定交互任务的并行处理,并没有系... 详细信息

随着触摸设备的普及,指、笔输入已成为移动办公的一种主流输入方式.然而现有的应用主要以手指或笔通道中的一种作为输入,限制了用户的交互空间.同时,现有的指-笔混合研究主要关注串行的指-笔分工协作和特定交互任务的并行处理,并没有系统地考虑并行协作机制和不同通道输入之间的意图关联.为此,提出一种面向指-笔混合输入的交互模型;结合用户指-笔协作的行为习惯定义指-笔混合交互原语,拓展指、笔交互空间;继而利用部分可观察马尔可夫决策过程提出基于时序信息的指-笔混合输入意图提取方法,用以增量式地提取多义性交互原语的交互意图.最后通过一个用户实验说明指-笔混合输入的优势.

关键词：笔式交互指-笔混合输入交互空间交互模型

基于手绘草图的视觉内容生成深度学习方法综述

在线全文

学校读者我要写书评

暂无评论

软件学报 2024年第7期35卷 3497-3530页

作者：左然胡皓翔邓小明马翠霞王宏安人机交互北京市重点实验室(中国科学院软件研究所) 北京100190 中国科学院大学计算机科学与技术学院北京100049

手绘草图通过绘制简单的线条直观呈现用户的创作意图,支持用户采用手绘的方式快速表达思维过程及设计灵感,创作目标图像或视频.随着深度学习的发展,基于草图的视觉内容生成通过学习草图和视觉对象(即图像和视频)的特征分布进行跨领域特... 详细信息

手绘草图通过绘制简单的线条直观呈现用户的创作意图,支持用户采用手绘的方式快速表达思维过程及设计灵感,创作目标图像或视频.随着深度学习的发展,基于草图的视觉内容生成通过学习草图和视觉对象(即图像和视频)的特征分布进行跨领域特征映射,实现图像自动生成草图以及草图自动生成对应的图像或视频,与传统的人工创作方式相比有效地提高了生成的效率和多样性,成为计算机视觉、图形学领域的重要研究方向,并且在设计、视觉创作等领域具有重要作用.综述基于草图的视觉内容生成深度学习方法的研究现状和发展趋势,按照视觉对象的不同将现有工作分为基于草图的图像生成和基于草图的视频生成方法,并结合草图和视觉内容跨域生成、风格转化、视觉内容编辑等任务对生成模型进行详细分析,然后比较和总结常用的数据集、针对草图数据不足提出的扩充方法以及生成模型的评估方法,进一步通过草图在视觉内容生成应用中面临的挑战及生成模型未来发展方向对研究趋势进行展望.

关键词：人机交互手绘草图视觉内容生成深度学习

引入智能虚拟讲解员的云展厅构建与交互反馈研究

在线全文

学校读者我要写书评

暂无评论

软件学报 2024年第3期35卷 1534-1551页

作者：刘舫吕天刘心阁叶盛郭锐张烈马翠霞王庆伟刘永进清华大学计算机科学与技术系北京100084 普适计算教育部重点实验室(清华大学) 北京100084 清华大学美术学院交互媒体研究所北京100084 人机交互北京市重点实验室(中国科学院软件研究所) 北京100190 中国科学院大学北京100049 首都体育学院管理与传播学院北京100091

奥林匹克遗产是全人类的宝贵财富,利用科技与文化艺术相融合,对实现北京冬奥会及奥林匹克遗产和精神文化的多元呈现和高效传播至关重要.线上云展厅作为信息时代数字博物馆发展的重要趋势,虽然在单项数字博物馆与交互系统技术研究方面已... 详细信息

奥林匹克遗产是全人类的宝贵财富,利用科技与文化艺术相融合,对实现北京冬奥会及奥林匹克遗产和精神文化的多元呈现和高效传播至关重要.线上云展厅作为信息时代数字博物馆发展的重要趋势,虽然在单项数字博物馆与交互系统技术研究方面已具备较好的基础,但尚未形成体系化、智能化、交互友好的冬奥会奥林匹克数字博物馆系统.面向北京2022年冬季奥林匹克运动会,提出一种具有交互反馈的云展厅系统构建方式,通过构建具有虚拟讲解员的智能交互云展厅,进一步探索交互反馈在知识传播型的数字博物馆中对于非物质文化遗产的传播作用.为了探索视听交互反馈对云展厅的奥林匹克精神文化传播的影响,同时提升知识传播型云展厅中的用户体验,对32名参与者进行用户实验.研究结果表明,所构建的云展厅能够极大地促进奥林匹克文化与精神的传播;同时,在云展厅中引入视听交互反馈能够提高用户的感知控制,从而有效地提升用户体验.

关键词：奥林匹克云展厅交互反馈智能虚拟讲解员感知控制

在线全文

学校读者我要写书评

暂无评论

数字室内三维场景构建综述

中国图象图形学报 2024年第9期29卷 2471-2493页

作者：岳亮谈皓黄俊凯张少魁清华大学计算机系北京100084

在计算机图形学发展过程中,数字三维场景长期对于学术界和工业界都起着至关重要的作用。其作用体现在展示渲染效果、支持应用环境以及充当交互载体等多个方面。然而,三维场景本身作为一种数据形式,其结构复杂且没有统一的数据结构,故难... 详细信息

在计算机图形学发展过程中,数字三维场景长期对于学术界和工业界都起着至关重要的作用。其作用体现在展示渲染效果、支持应用环境以及充当交互载体等多个方面。然而,三维场景本身作为一种数据形式,其结构复杂且没有统一的数据结构,故难以像诸如图像、文本数据集一样被大量获取与应用。已有一些工作尝试让计算机自动构建场景或是让计算机辅助构建场景。而在众多场景之中,室内场景尤为重要。本文总结归纳了这些数字室内三维场景构建工作。提出从3个方面调研和总结场景构建的主要工作:场景自动构建、基于用户交互的场景辅助构建以及基于多通道与丰富输入的场景构建。自动构建在于让计算机直接基于当前三维内容给出场景构建结果;交互构建在于让用户控制计算机并辅助构建场景;多通道构建在于让构建的场景参考输入的图像、文本和点云。最后,本文总结了科研工作的应用场景和关键技术,并介绍了一些其他应用情景与未来面对的诸多挑战。数字室内三维场景构建的发展前景十分广阔,随着新算法的不断提出以及三维场景数据集日益完善,数字室内三维场景构建领域也将持续发展。

关键词：室内场景三维场景构建三维场景交互三维场景智能编辑计算机图形学

基于可见光逆反射通信的移动增强现实定向交互

在线全文

学校读者我要写书评

暂无评论

电子学报 2024年

作者：李景聿陈拓潮李明哲徐栩海张铖徐子晨刘譞哲黄罡冯云许辰人北京大学计算机学院华盛顿大学计算机科学与技术学院卡内基梅隆大学人机交互研究所康奈尔大学信息科学学院南昌大学数学与计算机学院北京大学第三医院

移动增强现实应用中，用户频繁地与环境中不同的智能物体交互完成任务，其完成效率和用户体验由所采用的定向交互技术决定.然而，从交互手段上来说，现阶段定向交互依赖于Wi-Fi、BLE等无线技术，其信号全向传播的特点使其不能利用用户... 详细信息

移动增强现实应用中，用户频繁地与环境中不同的智能物体交互完成任务，其完成效率和用户体验由所采用的定向交互技术决定.然而，从交互手段上来说，现阶段定向交互依赖于Wi-Fi、BLE等无线技术，其信号全向传播的特点使其不能利用用户的空间环境（即位置和方向）来缩短互动时间，带来了不必要的时间成本；从交互界面上来说，现阶段基于视觉的界面存在可靠性低、扩展性低等问题，进一步限制了系统的通用性.本文介绍了RetroAR——基于可见光逆反射通信的定向交互系统. RetroAR利用了光的定向传播特性来保留用户的空间环境，并依靠逆反射通信实现用户与目标设备之间无连接的快速定向交互.系统实验表明，RetroAR最远可在4 m距离支持100°视角的交互，同时实现厘米级的六自由度（6-Degrees Of Freedom,6-DoF）三维跟踪.用户研究表明，与基于Wi-Fi的解决方案相比，RetroAR将非接触式控制的交互时间减少了2倍，并且具有更好的用户体验. RetroAR借助可见光逆反射通信来利用用户空间环境，保持交互过程中的直观性.用户可以“所指即所控”的方式与多个目标进行互动，实现类似自然交互的快速定向交互.

关键词：移动增强现实定向交互所指即所控可见光逆反射通信聚合物分散液晶

在线全文

同方期刊数据库

学校读者我要写书评

暂无评论

光滑粒子流体动力学流体仿真技术综述

软件学报 2024年第1期35卷 481-512页

作者：刘树森何小伟王文成吴恩华计算机科学国家重点实验室(中国科学院软件研究所) 北京100190 中国科学院软件研究所人机交互技术与智能信息处理实验室北京100190 中国科学院大学北京100049 澳门大学中国澳门999078

光滑粒子流体动力学(smoothed particle hydrodynamics,SPH)是实现流体仿真的主要技术之一.随着生产实践中流体仿真应用需求的增加,近些年涌现了许多相关研究成果,改善了流体不可压缩性、粘性、表面张力等物理特性模拟的视觉真实性、效... 详细信息

光滑粒子流体动力学(smoothed particle hydrodynamics,SPH)是实现流体仿真的主要技术之一.随着生产实践中流体仿真应用需求的增加,近些年涌现了许多相关研究成果,改善了流体不可压缩性、粘性、表面张力等物理特性模拟的视觉真实性、效率与稳定性.同时,一些工作探讨了复杂场景的高质量模拟,以及多场景、多材料的统一仿真框架,增强了SPH流体仿真技术的应用效能.从以上几个方面对SPH流体仿真技术进行归纳、总结和讨论,并对其未来发展进行了展望.

关键词：计算机图形学计算物理光滑粒子流体动力学

基于虚拟纤维的各向异性超弹性材料本构模型设计

在线全文

学校读者我要写书评

暂无评论

计算机辅助设计与图形学学报 2024年第4期36卷 533-542页

作者：卢子璇何浩吴笛刘学慧中国科学院软件研究所计算机科学国家重点实验室北京100190 中国科学院大学计算机科学与技术学院北京100190 中国科学院软件研究所人机交互技术与智能信息处理实验室北京100190 中国科学院力学研究所微重力重点实验室北京100190

为了拓展图形学弹性体模拟中的各向异性超弹性虚拟材料种类,建立了基于虚拟纤维的本构模型.首先从能量可加性出发,将超弹性体应变能量密度函数分解为轴向、剪切、体积分量的纤维加和形式,然后建立单根纤维的轴向应变、剪切应变、体积应... 详细信息

为了拓展图形学弹性体模拟中的各向异性超弹性虚拟材料种类,建立了基于虚拟纤维的本构模型.首先从能量可加性出发,将超弹性体应变能量密度函数分解为轴向、剪切、体积分量的纤维加和形式,然后建立单根纤维的轴向应变、剪切应变、体积应变的应变度量,最后推导出各分量的应力表示.仿真实验使用基于四面体的非线性有限元法(finite element method,FEM),半隐式时间积分进行解算,并采用CPU串行算法,测试了不同场景下非线性能量函数以及纤维权重组合对虚拟纤维材料刚度、泊松效应、轴向特性的影响.结果表明,虚拟纤维本构模型具有大变形稳定性,材料参数设置可良好地展现上述物理特性,相比现有的横观各向同性模型具有更丰富的可调节能力.

关键词：各向异性材料有限元物理动画虚拟纤维

在线全文

学校读者我要写书评

暂无评论

基于时序图推理的设备剩余使用寿命预测

自动化学报 2024年第1期50卷 76-88页

作者：刘雨蒙郑旭田玲王宏安中国科学院软件研究所人机交互北京市重点实验室北京100190 中国科学院大学北京100049 中国科学院软件研究所天基综合信息系统重点实验室北京100190 电子科技大学计算机科学与工程学院成都611731

剩余使用寿命(Remaining useful life,RUL)预测是大型设备故障预测与健康管理(Prognostics and health management,PHM)的重要环节,对于降低设备维修成本和避免灾难性故障具有重要意义.针对RUL预测,首次提出一种基于多变量分析的时序图... 详细信息

剩余使用寿命(Remaining useful life,RUL)预测是大型设备故障预测与健康管理(Prognostics and health management,PHM)的重要环节,对于降低设备维修成本和避免灾难性故障具有重要意义.针对RUL预测,首次提出一种基于多变量分析的时序图推理模型(Multivariate similarity temporal knowledge graph,MSTKG),通过捕捉设备各部件的运行状态耦合关系及其变化趋势,挖掘其中蕴含的设备性能退化信息,为寿命预测提供有效依据.首先,设计时序图结构,形式化表达各部件不同工作周期的关联关系.其次,提出联合图卷积神经网络(Convolutional neural network,CNN)和门控循环单元(Gated recurrent unit,GRU)的深度推理网络,建模并学习设备各部件工作状态的时空演化过程,并结合回归分析,得到剩余使用寿命预测结果.最后,与现有预测方法相比,所提方法能够显式建模并利用设备部件耦合关系的变化信息,仿真实验结果验证了该方法的优越性.

关键词：剩余使用寿命时序图推理图神经网络深度推理网络

维普期刊数据库博看期刊

GT-4S:基于图Transformer的场景草图语义分割

在线全文

学校读者我要写书评

暂无评论

软件学报 2024年

作者：张拯明郭燕马翠霞邓小明王宏安中国科学院大学计算机科学与技术学院人机交互北京市重点实验室(中国科学院软件研究所)

场景草图由多个前、背景物体组成,能够直观、概括地表达复杂的语义信息,在现实生活中有着广泛的实际应用,逐渐成为计算机视觉和人机交互领域的研究热点之一.作为场景草图语义理解的基础任务,场景草图语义分割的相关研究相对较少,现有的... 详细信息

场景草图由多个前、背景物体组成,能够直观、概括地表达复杂的语义信息,在现实生活中有着广泛的实际应用,逐渐成为计算机视觉和人机交互领域的研究热点之一.作为场景草图语义理解的基础任务,场景草图语义分割的相关研究相对较少,现有的方法多是对自然图像语义分割的方法进行改进,不能克服草图自身的稀疏性和抽象性等特点.针对以上问题,直接从草图笔画入手,提出一种图Transformer模型结合草图笔画的时空信息来解决自由手绘场景草图语义分割任务.首先将矢量场景草图构建成图结构,笔画表示为图的节点,笔画在时序和空间上的关联表示为图的边.然后通过边增强的Transformer模块捕获笔画的时空全局上下文信息.最后将编码后的时空特征进行多分类优化学习.在SFSD场景草图数据集上的实验结果表明,所提方法可以利用笔画时空信息对场景草图进行有效的语义分割,实现优秀的性能.

关键词：场景草图语义分割图 Transformer