导读:本文包含了多通道交互论文开题报告文献综述及选题提纲参考文献，主要关键词:手术室,多模态信息融合,意图理解
多通道交互论文文献综述
陶建华,杨明浩,王志良,班晓娟,解仑[1]（2019）在《无菌条件非接触式多通道自然交互手术环境》一文中研究指出无菌和非接触环境是医疗手术室的基本要求,这使得计算机操作室和手术室需要在物理上隔离.同时,因为手术进行中,主治医生如果需要查看病灶图像,通常授意护士或者手术助理到计算机操作室操作病灶图像,由于手术室和计算机操作室间的隔离,以及主治医生和助理间可能存在的意图理解不准确,容易导致护士或者手术助理在手术室和计算机操作室往返多次,这增加了患者手术时间延长、失血增多、脏器暴露时间长等风险,尽量减少手术中定位到病灶图像的时间对于医生和病人都很重要.针对上述需求,借助遮挡环境下的深度图像人体骨架提取、手势跟踪与理解、手术室环境远场语音识别,多模态信息处理与融合技术,构建无菌条件下的非接触式多通道自然交互手术环境.该环境使得主治医生在手术中可通过语音命令、手势及上述交互方式相结合的方式快速定位到需要观察的病灶成像.在接近真实环境的实验环境中,建立的无菌条件的非接触式多通道自然交互手术环境在保证精度的情况下,可显着缩短病灶图像定位时间.无菌环境智能交互医疗手术室为未来下一代高效的手术提供了技术与方法验证.(本文来源于《软件学报》期刊2019年10期）
李小华[2]（2019）在《虚拟现实健身车系统的多通道交互设计及用户体验研究》一文中研究指出虚拟现实随着技术的不断发展成熟,正在与各个领域逐渐融合,在体育运动领域,虚拟现实沉浸式的运动体验越来越吸引着人们参与其中。而在虚拟现实环境下进行运动,多感官通道的设计与用户的沉浸感、眩晕感等用户体验因素紧密相关,需要对多感官通道进行合理分析和设计。针对虚拟现实运动情境下的多感官通道设计及其用户体验问题,研究了国内外学者对虚拟现实中的视觉、听觉和触觉设计的最新理论研究成果,重点对多感官通道在虚拟现实中的特性进行了梳理归纳,提出了视觉、听觉和触觉通道的设计原则,作为设计研究的理论依据。同时为了对虚拟现实运动情境下的用户体验进行评估,提出了适用于虚拟现实运动体验评估的模型框架,为分析多感官通道对运动体验的影响提供了新的评估方法。以虚拟现实健身车系统的多感官通道交互设计为例,展开课题的具体研究,采用数据挖掘、问卷调查和用户访谈方法,了解用户对传统健身车运动的情感倾向特征,发现用户在使用健身车过程中遇到的问题和体验上的不足,挖掘用户对虚拟现实健身车的功能需求,分析得出多感官通道在实现功能需求上的设计要点。根据功能需求建立虚拟现实健身车系统的信息架构,结合骑行行为分析对其中的交互流程进行了梳理,应用提出的多感官通道设计原则,对虚拟现实健身车系统的视觉、听觉和触觉通道进行了设计。应用Unity3D引擎和传感器技术设计和实现了虚拟现实健身车原型系统,重点实现了提出的多感官通道设计方法。基于原型系统展开了实验研究,采用生理反馈仪、脚踏式功率计实时记录被试心电图和功率数据,分析了视觉、听觉和气流触觉通道对用户体验的不同影响。实验结果表明,虚拟现实健身车原型系统的总体用户体验良好,具备视觉、听觉与气流触觉的多感官通道反馈方式,能够提升用户的存在感、提高情感沉浸和减少不安感。满足了虚拟现实健身车系统中对多感官通道的设计要求,也验证了所提出的多通道交互方式的可行性。(本文来源于《华南理工大学》期刊2019-04-26）
陈晓丹[3]（2019）在《基于多通道的人-群体机器人自然交互技术与系统研究》一文中研究指出近年来,关于群体机器人系统的研究越来越受到关注。群体机器人系统的机器人数量规模和部分智能性对人与机器人之间的交互提出了新的交互需求,如何通过自然的方式实现与群体机器人系统之间的高效交互是人-群体机器人交互研究需要解决的问题之一。针对这一问题,本文提出了基于多通道的人-群体机器人自然交互技术及系统,通过叁维手势交互通道和自然语言指令通道的协作和交互信息的互补,实现了人与群体机器人之间自然、高效的交互。主要研究内容包括以下叁个方面:(1)叁维手势交互技术:采用Leap Motion作为手势传感器捕捉控制者手部信息作为人-群体机器人人机交互输入数据;提出了叁维套索技术,实现了群体机器人的批量拾取选择交互;通过包围盒和碰撞检测算法,实现了坐标位置控制交互;利用虚拟手指尖的移动绘制机器人运动轨迹,并采用基于速度的自适应滤波算法对手势数据进行处理,实现了运动轨迹控制交互。(2)自然语言指令理解与多通道的整合技术:通过Speech Platform SDK实现了语音信号的识别;定义了面向群体机器人的控制指令库和指令标签,收集了对应的自然语言指令的语料库。通过基于最大熵模型的文本分类器,实现了对自然语言指令的理解;通过指令标签填充的方式将经过理解得到的指令标签与叁维手势交互的手势信息整合,实现手势交互通道与语音交互通道的多通道协作,提高了交互效率。(3)设计并完成了基于多通道的人-群体机器人自然交互系统。系统采用头戴式增强现实显示设备HoloLens作为视觉反馈通道,通过叁维手势交互技术和自然语言指令理解与多通道整合技术,实现了自然、高效、反馈直观、系统便携的人-群体机器人交互。本文通过群体机器人选择实验和群体机器人运动轨迹控制实验验证了技术和系统的可行性与可用性。(本文来源于《华南理工大学》期刊2019-04-15）
陈建华,崔东华,罗荣,肖玉杰,王亮[4]（2019）在《军事指控系统多通道人机交互技术》一文中研究指出在军事作战指挥过程中,人机交互是信息化装备与指挥人员之间的一种双向信息交流,自然高效的人机交互技术是保证战场态势准确感知和作战指令精确操作的重要手段。对多通道的军事指控人机交互技术发展与未来趋势进行了综述,从人机交互技术与军事指挥控制系统之间的重要联系出发,介绍了军事指挥控制系统的发展概况,指出了多通道人机交互技术是未来军事指挥控制系统的发展趋势。(本文来源于《指挥控制与仿真》期刊2019年04期）
王伟志,冯文琪,王聪[5]（2018）在《多通道交互的虚拟现实样板间》一文中研究指出旨在设计实现一种脱离鼠标、键盘等传统交互设备,实现对场景中家具和物品抓取和挪放的虚拟现实样板间。采用Oculus Rift虚拟现实眼镜获取样板间场景内容,使用户置身于虚拟环境;通过游戏手柄控制场景中人物的移动实现样板间场景内的无障碍漫游;利用Kinect体感设备的手势识别,实现对样板间中家居陈列的抓取、移动、放置。系统测试表明,达到了所设计的各项功能。(本文来源于《数字技术与应用》期刊2018年07期）
徐晓天[6]（2018）在《基于脑电与眼动的多通道交互控制技术研究》一文中研究指出近年来随着人工智能技术的快速发展,包括脑机接口技术和眼动追踪技术在内的新型人机交互技术对于大众来说已经变得不再陌生。科技的快速发展也为智能化人机交互技术带来了新的生命力。从最初的仅在医疗、科研领域的应用到后来军方的应用再到最近的民用,脑机接口技术、眼动追踪技术越来越深入人们生活的方方面面。本文首先在概念上介绍了脑电的TGAM开发套件,包括TGAM的硬件情况、其内置ASIC芯片的技术特性以及TGAM识别处理的一般步骤和其所处理的数据类型等并就本文眼动控制系统所使用的眼动仪的硬件和软件概况进行相关的介绍。最后就无人平台进行简要介绍,在本文由于使用的无人平台核心是Arduino开发平台,所以介绍的重点主要放在Arduino开发平台的介绍上面,主要包括Arduino开发板的硬件特性和Arduino IDE软件开发环境。基于脑电的无人平台运动控制系统包含了四个模块之间的关系。内容主要包括基于TGAM脑电识别模块在脑电数据的采集、识别并通过esense算法进行一系列的解析和数据处理进行对应的介绍,并就neurosky的TGAM模块的通信协议及相关通信模块进行深入研究,了解蓝牙串口连接及接收数据流的实际应用方法,并最终在Arduino端通过esense算法提取关注度参数来对PWM进行调节从而实现对于小型地面无人平台的基本运动控制。基于眼动的无人平台运动控制系统包含了眼动信息采集提取模块、眼动信息意图判断模块、通信模块和Arduino控制模块四个模块。其中重点介绍了眼动信息坐标点提取和眼动信息意图判断的具体实现。眼动信息注视点坐标的提取需要通过调用SDK软件开发工具包中的iViewNG API来对接口函数进行使用并完成信息交互。眼动信息意图判断的实现则依靠对基于位置信息(前后左右)的相关控制语义进行定义,最后在Arduino下对控制端相应的控制信号进行定义(控制信号参数需要与意图判断模块中定义的控制语义参数对应)并实现了对于小型地面无人平台的基本运动控制。最后,在前文基于脑电的运动控制系统和基于眼动的运动控制系统研究基础上进行两系统协同控制(一人多机)的实验验证。内容就多任务处理中并行处理与多串行处理的机制进行对比并基于相关的串行处理、并行处理模式设置了四个实验,每个实验的样本容量为30。实验的主要目的是通过对脑电控制系统与眼动控制系统在双任务处理下各自的响应时间进行统计并得出相应的响应时间差,分析验证相关的串行处理、并行处理模型并得出不同控制场景下如何对串行处理、并行处理模式进行选择会实现更加稳定高效控制的初步结论。(本文来源于《南京大学》期刊2018-04-28）
季天奇[7]（2018）在《基于多通道的人机交互智能界面技术》一文中研究指出随着人与计算机的联系日益紧密,人机交互技术面临着新的挑战。从传统的鼠标、键盘的交互方式到现在的触屏、手势、语音等交互方式,人机交互技术的主题既是自然性、高效性。在计算机表现形式的多样化和用户与计算机交互方式的多样化的今天,将多种交互方式结合起来的多通道人机交互技术得到了广泛的发展。另一方面,交互水平的提高对交互界面提出了新的要求。不同用户在交互过程中展现出不同的兴趣偏好和习惯,因此研究一种能满足用户的个性化需求的交互界面就显得尤为重要。本文以认知心理学、行为决策科学、计算机科学为理论指导,构建基于手势、眼动等的多通道人机交互模型和实现机制,结合对自适应交互的理论与技术问题的研究,研究基于多通道的自适应交互界面。本文首先对多通道交互框架进行了分析,结合眼动识别和手势识别的相关理论和技术,采用基于任务的多通道信息融合方法,对多通道交互方式进行了设计,并以虚拟键盘界面为例,研究了眼动和手势交互的特点,实现了比较高效的多通道交互。同时,本文提出了一种结合眼动的自适应界面框架,介绍了自适应界面技术主要的研究内容,建立了界面模型、交互模型以及眼动模型,针对界面元素和交互过程,提出了基于眼动的自适应算法,并通过实验验证了该算法的有效性。(本文来源于《南京大学》期刊2018-04-28）
杨明浩,陶建华[8]（2018）在《多通道人机交互信息融合的智能方法》一文中研究指出本文首先简要回顾了认知科学在单通道信息加工及多通道信息融合方面的假定;其次,介绍了计算机科学在多通道信息融合方面相对于单通道信息处理增强的理论模型及实验验证.在各通道特征能够同时获得并统一表示的前提下,多通道人机交互信息的融合可以转化为分类或者回归问题求解.对于实际的交互系统,目前的多通道信息融合技术除了依赖单通道信息识别的准确性外,还依赖于交互系统设计的合理性.最后通过一个多通道信息融合的人机交互的实例,讨论了目前多通道交互系统的缺陷,并给出多通道人机交互信息融合智能方法未来的一个突破方向.(本文来源于《中国科学:信息科学》期刊2018年04期）
张瑜[9]（2018）在《多通道虚拟现实人机交互系统中的产品设计研究》一文中研究指出本研究以虚拟现实和多通道人机交互作为产品设计切入点,采用归纳法以及类比法研究两者之间的联系,并进行有机整合,提出了基于多通道虚拟现实人机交互系统的产品设计流程,并从设计方法学的角度导入具体产品设计实践中。通过设计实践对该设计行程可行性进行了验证,证明在流程中可以有效节约时间、空间以及设计资源,同时提高产品中人机交互的自然性、高效性、兼容性。(本文来源于《科技创新与应用》期刊2018年10期）
杨洋[10]（2017）在《基于语音交互的手持移动端多通道交互研究》一文中研究指出随着移动互联网的主导地位不断强化,语音交互技术得到了市场化普及,优化了用户的人机交互体验。但是目前的手持移动端语音应用还存在很多交互问题,不仅对语音交互的便捷性有重大影响,同时也增加了人机交互的复杂程度。为了解决这些问题,本研究思考如何将语音交互分别与视觉交互和手势交互相结合实现多通道交互,以此来弥补语音交互的弊端,提高交互效率和用户满意度。具体完成了以下工作:1.分析了语音交互的技术原理和基本特征,包括语音交互的优势和不足、使用场景分类、应用类型分类、手持移动交互终端和唤醒方式。并且通过阅读大量文献,分析总结了语音交互设计过程中要遵循的主要原则。2.依托Siri语音助手,进行了手持移动端的语音交互和手势交互对比试验,主要测量两种方式的交互效率、用户满意度、任务尝试次数及成功率、交互步骤及语音交互用语等指标。3.根据实验数据和用户访谈,以Siri语音助手为例,总结了目前语音助手中存在的交互问题,归纳出适合使用语音操作的任务模式,并且调查了用户的现有使用情况和未来的使用意愿。结合这些分析,本文对现有的语音交互原则进行了补充。4.完成了手持移动端多通道语音交互设计表达。改进了语音交互的视觉界面,整理提出语音交互中自定义手势集合。本研究的创新点在于摒弃技术因素,从交互设计的角度出发,研究语音交互的特性,提出了多通道结合的交互方式。期望文中补充重构的设计原则会对未来的手持移动端语音交互设计起到一定的指导作用。(本文来源于《北京邮电大学》期刊2017-12-30）
多通道交互论文开题报告
（1）论文研究背景及目的
此处内容要求：
首先简单简介论文所研究问题的基本概念和背景，再而简单明了地指出论文所要研究解决的具体问题，并提出你的论文准备的观点或解决方法。
写法范例：
虚拟现实随着技术的不断发展成熟,正在与各个领域逐渐融合,在体育运动领域,虚拟现实沉浸式的运动体验越来越吸引着人们参与其中。而在虚拟现实环境下进行运动,多感官通道的设计与用户的沉浸感、眩晕感等用户体验因素紧密相关,需要对多感官通道进行合理分析和设计。针对虚拟现实运动情境下的多感官通道设计及其用户体验问题,研究了国内外学者对虚拟现实中的视觉、听觉和触觉设计的最新理论研究成果,重点对多感官通道在虚拟现实中的特性进行了梳理归纳,提出了视觉、听觉和触觉通道的设计原则,作为设计研究的理论依据。同时为了对虚拟现实运动情境下的用户体验进行评估,提出了适用于虚拟现实运动体验评估的模型框架,为分析多感官通道对运动体验的影响提供了新的评估方法。以虚拟现实健身车系统的多感官通道交互设计为例,展开课题的具体研究,采用数据挖掘、问卷调查和用户访谈方法,了解用户对传统健身车运动的情感倾向特征,发现用户在使用健身车过程中遇到的问题和体验上的不足,挖掘用户对虚拟现实健身车的功能需求,分析得出多感官通道在实现功能需求上的设计要点。根据功能需求建立虚拟现实健身车系统的信息架构,结合骑行行为分析对其中的交互流程进行了梳理,应用提出的多感官通道设计原则,对虚拟现实健身车系统的视觉、听觉和触觉通道进行了设计。应用Unity3D引擎和传感器技术设计和实现了虚拟现实健身车原型系统,重点实现了提出的多感官通道设计方法。基于原型系统展开了实验研究,采用生理反馈仪、脚踏式功率计实时记录被试心电图和功率数据,分析了视觉、听觉和气流触觉通道对用户体验的不同影响。实验结果表明,虚拟现实健身车原型系统的总体用户体验良好,具备视觉、听觉与气流触觉的多感官通道反馈方式,能够提升用户的存在感、提高情感沉浸和减少不安感。满足了虚拟现实健身车系统中对多感官通道的设计要求,也验证了所提出的多通道交互方式的可行性。
（2）本文研究方法
调查法：该方法是有目的、有系统的搜集有关研究对象的具体信息。
观察法：用自己的感官和辅助工具直接观察研究对象从而得到有关信息。
实验法：通过主支变革、控制研究对象来发现与确认事物间的因果关系。
文献研究法：通过调查文献来获得资料，从而全面的、正确的了解掌握研究方法。
实证研究法：依据现有的科学理论和实践的需要提出设计。
定性分析法：对研究对象进行“质”的方面的研究，这个方法需要计算的数据较少。
定量分析法：通过具体的数字，使人们对研究对象的认识进一步精确化。
跨学科研究法：运用多学科的理论、方法和成果从整体上对某一课题进行研究。
功能分析法：这是社会科学用来分析社会现象的一种方法，从某一功能出发研究多个方面的影响。
模拟法：通过创设一个与原型相似的模型来间接研究原型某种特性的一种形容方法。
多通道交互论文参考文献
[1].陶建华,杨明浩,王志良,班晓娟,解仑.无菌条件非接触式多通道自然交互手术环境[J].软件学报.2019
[2].李小华.虚拟现实健身车系统的多通道交互设计及用户体验研究[D].华南理工大学.2019
[3].陈晓丹.基于多通道的人-群体机器人自然交互技术与系统研究[D].华南理工大学.2019
[4].陈建华,崔东华,罗荣,肖玉杰,王亮.军事指控系统多通道人机交互技术[J].指挥控制与仿真.2019
[5].王伟志,冯文琪,王聪.多通道交互的虚拟现实样板间[J].数字技术与应用.2018
[6].徐晓天.基于脑电与眼动的多通道交互控制技术研究[D].南京大学.2018
[7].季天奇.基于多通道的人机交互智能界面技术[D].南京大学.2018
[8].杨明浩,陶建华.多通道人机交互信息融合的智能方法[J].中国科学:信息科学.2018
[9].张瑜.多通道虚拟现实人机交互系统中的产品设计研究[J].科技创新与应用.2018
[10].杨洋.基于语音交互的手持移动端多通道交互研究[D].北京邮电大学.2017