Hands vs. Controllers: Comparing User Interactions in Virtual Reality Shopping Environments
本研究通过40名参与者的虚拟超市购物实验,比较了VR中手部交互与控制器交互的优劣,发现手部交互更自然沉浸但存在触觉和抓取问题,而控制器交互更精确可靠,适合精细操作任务。
2025-02-07 cs.HC
Expanding Targets in Virtual Reality Environments: A Fitts' Law Study
本研究针对VR HMD场景下目标扩展研究不足的问题,采用ISO 9241-411多方向指向任务开展用户实验,发现移动中扩展目标宽度1.5/2.5倍可显著缩短选择时间,为VR交互设计提供参考。
2023-08-24 cs.HC
Steering Versus Teleporting in Mobile Virtual Reality
Carleton University(卡尔顿大学);Technical University of Denmark(丹麦技术大学);Monash University(蒙纳士大学)
本研究在移动虚拟现实中比较注视与控制器导向的转向和传送,发现注视适合传送、控制器指向利于转向,并为低成本窄视场硬件提出设计建议。
2026-09-28 cs.HC
Metrics for 3D Object Pointing and Manipulation in Virtual Reality
The University of Edinburgh(爱丁堡大学)
在遥操作和虚拟现实中评估人体运动的性能是一个具有挑战性的问题,特别是在三维空间中,由于复杂的空间设置。尽管存在多种指标,但仍缺少令人信服的标准化3D指标,这加剧了不同研究之间的研究间可比性。因此,评估人类在虚拟环境中的表现是一个长期的研究目标,一个性能指标,结合两个或两个以上的指标在一个公式仍然在很大程度上未被探索,特别是在更高的维度。缺乏这样的度量主要是由于指向和操纵之间的差异,3D中的复杂空间变量,以及平移和旋转运动的组合。在这项工作中,设计了四个实验,并进行了逐步提高空间复杂性的研究和比较现有的指标彻底。研究的目标是量化这些3D任务的难度,并在全3D近个人空间中充分模拟人类的表现。因此,一个新的模型扩展已被提出,其适用性已在所有的实验结果进行了验证,显示出改进的建模和表示的人的表现在组合运动的3D对象指向和操作任务比现有的工作。最后,讨论了该技术在虚拟现实中的三维交互、遥操作和目标任务设计等方面的应用。
2021-06-12 cs.HC cs.RO
Large Language Model-assisted Speech and Pointing Benefits Multiple 3D Object Selection in Virtual Reality
University of Cambridge(剑桥大学);Coburg University of Applied Sciences and Arts(科堡应用科学与艺术大学)
本文提出大语言模型辅助的多模态语音与射线投射技术 AssistVR,用于虚拟现实多3D对象选择,并通过24人用户研究证明其优于基于小地图的基线。
2024-10-28 cs.AI cs.HC
Self-Centering 3-DoF Feet Controller for Hands-Free Locomotion Control in Telepresence and Virtual Reality
University of Bonn(波恩大学)
本文提出一种用于远程呈现机器人和虚拟现实的自对中3自由度坐姿脚部控制器,通过双轴倾斜、垂直轴旋转及弹簧自对中实现移动控制,成功应用于竞赛且公开模型,助力免手持移动操控。
2024-11-26 cs.HC cs.RO
An In-Depth Exploration of the Effect of 2D/3D Views and Controller Types on First Person Shooter Games in Virtual Reality
在过去的几年里,无论是在学术界还是工业界,对虚拟现实(VR)研究的兴趣都显著增加。商业VR盔装显示器(HMD)的发布是一个主要的促成因素。然而,还有很多东西需要学习,特别是视图和输入技术以及它们的交互如何影响VR体验。在VR中对第一人称射击(FPS)游戏的研究很少,而且这些研究都集中在VR FPS的一个方面。他们要么专注于观点,例如,将VR与典型的2D显示器或控制器类型进行比较。据我们所知,没有研究调查HMD中2D/3D视图的变化、控制器类型及其相互作用。因此,区分与控制器类型相关的发现和与视图相关的发现具有挑战性。如果一项研究没有控制输入法,并且发现2D显示器比VR显示器的性能更高,那么由于混杂变量的存在,我们无法概括结果。为了理解它们的交互,我们建议更深入地分析,无论是视图(2D与3D)还是控制方式,都为平台提供了各自的优势。为了研究2D/3D视图的效果,我们创建了一种2D视觉技术PlaneFrame,并将其应用于VR头显中。我们的研究结果表明,控制器类型可以有一个显着的积极影响,性能,沉浸感和模拟器疾病时,与2D视图。它们进一步加深了我们对控制器和视图之间的交互的理解,并证明了比较高度依赖于这两个因素如何结合在一起。此外,通过一系列的三个实验,我们开发了一种技术,可以导致大量的性能,良好的沉浸水平,并可以尽量减少模拟器疾病的水平。
2020-10-07 cs.HC
LLM-Driven Augmented Reality Puppeteer: Controller-Free Voice-Commanded Robot Teleoperation
KTH Royal Institute of Technology(瑞典皇家理工学院)
针对机器人遥操作的控制器依赖问题,本研究提出LLM驱动的无控制器语音指令AR木偶操纵系统,通过操控虚拟对应物实现实体机器人遥操作,经初步演示验证其功能,可提升易用性并降低安全风险。
2025-02-13 cs.HC cs.RO
Accuracy Evaluation of Touch Tasks in Commodity Virtual and Augmented Reality Head-Mounted Displays
越来越多的用于增强现实和虚拟现实(AR/VR)的面向消费者的盔装显示器(HMD)能够进行手指和手跟踪。我们报告了现成的VR和AR HMD在用于基于触摸的任务(如指向或绘图)时的准确性。具体来说,我们报告了VR盔装显示器Oculus Quest、Vive Pro和Leap Motion控制器在连接到VR HMD时的手指跟踪精度,以及AR盔装显示器Microsoft HoloLens 2和Magic Leap的手指跟踪精度。我们提出了两个实验的结果,在其中,我们比较了使用人类参与者和机器人的绝对和相对指向任务的准确性。结果表明,HTC Vive的空间精度低于Oculus Quest和Leap Motion,而微软HoloLens 2的空间精度高于Magic Leap One。这些发现可以作为决策支持的研究人员和从业人员在选择哪些系统在未来使用。
2021-09-22 cs.HC
Enhancing immersion in Virtual Reality sports through Physical Interactions
Indian Institute of Technology, Bombay(孟买印度理工学院)
本文通过设计物理控制器原型,解决现有VR控制器在体育虚拟场景中的沉浸性问题,评估其在滑冰游戏中的表现,以提升沉浸感和现实感。
2026-04-22 cs.CY cs.HC
Assessing Augmented Reality Selection Techniques for Passengers in Moving Vehicles: A Real-World User Study
针对行驶车辆中乘客选择车外数字对象的需求,本文在真实道路条件下比较四种AR选择技术,发现眼部注视最受偏好且性能相当,手指指向则较慢且精度较低。
2023-07-12 cs.HC
GazePointAR: A Context-Aware Multimodal Voice Assistant for Pronoun Disambiguation in Wearable Augmented Reality
University of Washington(华盛顿大学);University of Illinois at Urbana-Champaign(伊利诺伊大学厄巴纳-香槟分校)
GazePointAR是一种基于情境的多模态语音助手,通过结合眼动、指向手势和对话历史来提升可穿戴增强现实中的代词消歧能力。
2024-04-12 cs.HC
User Interface for Volume Rendering in Virtual Reality Environments
体渲染应用程序需要复杂的用户交互来定义和细化传递函数。传统的2D桌面用户界面元素已经被开发来解决这个任务,但是这样的概念不能很好地映射到虚拟现实环境中可用的交互设备。在本文中,我们提出了一个直观的用户界面体渲染专门设计的虚拟现实环境。建议的接口允许传递函数设计和细化的基础上直观的双手操作的魔杖一样的控制器。还支持其他交互模式,如导航和剪裁平面操作。该系统使用Sony PlayStation Move控制器系统实现。此选择基于控制器设备能力以及应用和环境约束。初步结果证明了我们方法的潜力。
2013-02-08 cs.GR cs.HC
Stretch your reach: Studying Self-Avatar and Controller Misalignment in Virtual Reality Interaction
针对虚拟现实中自我化身与控制器错位影响交互的问题,提出五种交互模式并评估,发现伸展手臂方案在具身感、偏好、本体感觉和表现上最优,且渲染控制器无显著影响。
2024-07-10 cs.GR cs.HC
Divergent Perceptuomotor Recalibration in Virtual Reality and Video-Passthrough Mixed Reality on the Same Head-Mounted Display
University of Toronto(多伦多大学)
本研究对比同一设备上VR与MR-VPT的手动指向任务,发现二者感知运动重校准模式存在差异,需分别验证对应交互技术。
2026-08-07 cs.HC
Optimizing Robot Programming: Mixed Reality Gripper Control
Technical University of Munich(慕尼黑工业大学)
本文在混合现实场景中比较三种基于控制器的机器人编程方法,发现夹爪控制方法在效率、体验和性能上最优,具有应用潜力。
2025-03-26 cs.HC cs.RO
Head, Gaze, or Finger? Comparing Object Selection Techniques in Augmented Reality for People with Low Vision
University of Wisconsin-Madison(威斯康星大学麦迪逊分校);University of Rochester(罗切斯特大学)
研究低视力人群在增强现实中对象选择技术,通过混合方法研究,让20名低视力者和18名视力正常者用头部、注视、手指指向三种技术在两种场景选目标,发现不同技术优劣势及低视力者偏好,为其可访问AR交互技术提供见解。
2026-07-09 cs.HC
Say it or AI it: Evaluating Hands-Free Text Correction in Virtual Reality
EsieaLab(埃西亚实验室)
本文探讨了在虚拟现实中无手文本校正中AI相较于语音输入的可用性和效率。
2025-12-12 cs.HC
TanGi: Tangible Proxies for Embodied Object Exploration and Manipulation in Virtual Reality
由于传统控制器和徒手交互技术的限制,探索和操纵复杂的虚拟对象是具有挑战性的。我们提出的TanGi工具包,使新手能够快速构建物理代理对象使用可组合的形状原语。TanGi还提供了操纵器,允许用户构建包括可移动部件在内的对象,使其适用于VR中丰富的对象探索和操纵。通过一组不同的用例和应用程序,我们展示了TanGi工具包的功能,并评估了它的使用。在一项有16名参与者的研究中,我们证明了新手可以使用可组合形状原语快速构建物理代理对象,并探索不同层次的对象体现如何影响虚拟对象探索。在第二项研究中,12名参与者,我们评估TanGi的操纵器,并调查体现互动的有效性。这项研究的结果表明,TanGi的代理优于传统的控制器,并普遍受到参与者的青睐。
2020-01-09 cs.HC
From Interaction to Demonstration Quality in Virtual Reality: Effects of Interaction Modality and Visual Representation on Everyday Tasks
Medical School OWL, Bielefeld University(OWL医学院,比勒费尔德大学);AICOR Institute for Artificial Intelligence, University of Bremen(不来梅大学人工智能研究所)
本研究探讨了不同VR交互模式和视觉表示对日常任务执行效率和自然性的影响,发现控制器在效率上更优,而运动捕捉手套在自然性上更佳。
2026-02-11 cs.HC
A Tool for Estimating Success Rates of Raycasting-Based Object Selection in Virtual Reality
Meiji University(明治大学);LY Corporation(LY公司)
本文提出了一种基于Unity的工具,用于估计VR中基于射线追踪的对象选择成功率,以提升UI设计的可用性。
2026-01-07 cs.HC
Evaluation of Virtual Reality Interaction Techniques: the case of 3D Graph
虚拟现实(VR)和人机交互(HCI)的结合从根本上改变了用户接近虚拟环境的方式,增加了VR沉浸感,并改善了用户体验和可用性。这两种技术的发展导致了对VR运动和交互的关注。运动通常是基于手势的,但今天手势识别方法也用于此目的。然而,手势对于必须长时间保持手势激活以确保运动(尤其是连续地)的用户来说可能是有压力的。同样地,在基于盔装显示器(HMD)的虚拟环境或基于球体的系统中,与使用诸如\eg捏的手势来抓取3D对象相比,使用经典控制器进行3D场景交互对于用户而言可能是不自然的。为了解决这些问题,我们提出了一项用户研究,比较HMD和球形系统中经典控制器(六自由度(6-DOF)或轨迹球)的使用,以及两种VR沉浸式模式中的手部跟踪和手势。特别是,我们专注于球形系统和HMD之间可能存在的差异,用户感知的沉浸感水平,用户交互模式(控制器和手),用户对有用性,易用性和行为意图的反应。
2023-02-11 cs.GR cs.HC
Exploring Bi-Manual Teleportation in Virtual Reality
本研究通过用户实验评估了VR中双手传送技术,提出改进的菲茨定律模型,证明双手操作(优势手指向、非优势手选择)能提升传送速度与准确性,并为设计者提供优化指南。
2024-04-20 cs.HC
Direct vs. Score-based Selection: Understanding the Heisenberg Effect in Target Acquisition Across Input Modalities in Virtual Reality
The Hong Kong University of Science and Technology (Guangzhou)(香港科技大学(广州));The Hong Kong University of Science and Technology(香港科技大学)
本文研究了虚拟现实中不同输入模态下海森堡效应的影响,提出加权VOTE模型以提升目标选择准确性。
2026-02-01 cs.HC
Examination of Eye-Tracking, Head-Gaze, and Controller-Based Ray-casting in TMT-VR: Performance and Usability Across Adulthood
研究比较了VR连线测试中眼动追踪、头部注视和手柄控制器的性能,发现基于注视的射线投射优于手动指向,且最佳输入模态取决于任务需求与年龄分层。
2025-06-25 cs.HC
Influence of Hand Tracking as a way of Interaction in Virtual Reality on User Experience
TU Berlin(柏林工业大学);German Research Center for Artificial Intelligence (DFKI)(德国人工智能研究中心)
该研究对比VR中控制器与手部追踪交互在抓取、输入任务下的用户体验,发现交互类型显著影响情绪、偏好与可用性,为任务匹配交互模式提供参考。
2020-04-27 cs.HC cs.MM
FocusFlow: Leveraging Focal Depth for Gaze Interaction in Virtual Reality
FocusFlow将焦点深度纳入VR注视输入,通过焦点深度检测算法和分层UI实现免手层切换,提升头显设备上注视交互的直观性与效率。
2023-08-14 cs.HC
Experimental Analysis of Freehand Multi-Object Selection Techniques in Virtual Reality Head-Mounted Displays
针对VR头显中徒手多对象选择技术研究不足的问题,本文实证比较了三种模式切换手势与两种组选择技术组合而成的六种方案,揭示了各方案的性能与用户体验差异,并提出了三项设计启示。
2024-09-02 cs.HC
Designing Wearable Augmented Reality Concepts to Support Scalability in Autonomous Vehicle-Pedestrian Interaction
该研究提出支持多车场景下行人过街的可穿戴AR概念,经VR测试证实其能降低行人认知负荷,同时指出行人更倾向主动发送过街请求,为相关研究提供新方向。
2024-03-08 cs.HC
An Exploration of Hands-free Text Selection for Virtual Reality Head-Mounted Displays
诸如使用手持控制器或做出手势的基于手的交互已经被广泛采用作为用于与虚拟现实(VR)和增强现实(AR)盔装显示器(HMD)两者交互的主要方法。相比之下,免提交互避免了对用户的手的需要,尽管它可以提供额外的好处,但在探索和评估这些HMD的免提技术方面的研究有限。随着VR HMD变得无处不在,人们将需要进行文本编辑,这需要选择文本片段。与免提交互类似,文本选择也未得到充分研究。本研究的重点是通过免提交互进行文本选择。我们的探索涉及到一个用户研究,24名参与者调查的性能,用户体验,和三个免提选择机制(驻留,闪烁,语音)的工作量,以补充基于头的指向。结果表明,Blink在完成时间上优于Dwell和Voice。用户的主观反馈也表明,Blink是文本选择的首选技术。这项工作是第一个探索在VR HMD中进行文本选择的免提交互。我们的研究结果为这一重要领域的进一步研究提供了坚实的平台。
2022-10-15 cs.HC
Assessment of user-interaction strategies for neurosurgical data navigation and annotation in virtual reality
虽然虚拟现实(VR)在放射学任务中表现出了很大的希望,但有效的用户交互策略,可以提高效率和人体工程学仍然是探索不足,在复杂的解剖模型的背景下,VR交互技术的系统评价是罕见的。因此,我们的研究旨在确定最有效的交互技术,两个常见的神经外科规划任务,在VR(点注释和笔记)从最先进的,并提出了一种新的技术,有效的子体积选择必要的神经解剖导航。我们评估了七种用户交互方法,采用多种输入方式(凝视、头部运动、控制器和语音),用于在脑血管手术中注释脑动脉瘤的背景下进行点放置和记录。此外,我们提出并评估了一种新的技术,称为放大选择透视图(Maserama),用于在VR中轻松导航和选择复杂的3D解剖结构。定量和半定量(即,NASA任务负荷指数)的指标,通过用户研究,以揭示性能的准确性,效率和可用性方面的每一个交互方案。我们的评估表明,基于手势的交互优于基于眼动跟踪的点放置方法,而语音记录和虚拟键盘打字优于手写笔记。此外,我们新的Maserama子卷选择技术被证明是高效和易于使用的。我们的研究是第一个为神经外科数据导航和注释提供现有和新的VR交互方案的系统评估。它提供了有价值的见解和工具,以指导未来放射和外科应用的VR系统的设计。
2022-12-16 cs.HC
Application of Artificial Intelligence in Hand Gesture Recognition with Virtual Reality: Survey and Analysis of Hand Gesture Hardware Selection
本文综述了虚拟现实中手势识别硬件(控制器与头戴显示器)的优缺点及数据集,并指出未来研究方向,如噪声过滤、轻量网络、触觉反馈和眼手数据融合。
2024-05-25 cs.HC
Evaluation of Text Selection Techniques in Virtual Reality Head-Mounted Displays
文本选择是包括虚拟现实(VR)盔装显示器(HMD)在内的交互系统中的基本活动。它适用于:跨应用程序或平台共享信息,在阅读文章时突出显示和做笔记,以及文本编辑任务。尽管它很有用,但文本选择交互的空间在VR HMD中还没有得到充分的探索。在这项研究中,我们进行了一项用户研究,24名参与者调查的性能和用户偏好的六个文本选择技术(控制器+驻留,控制器+点击,头+驻留,头+点击,手+驻留,手+捏)。结果显示,Head+Click排名第一,因为它具有出色的速度-准确性性能(第二快的任务完成速度和第三低的总错误率),提供最佳的用户体验,并产生非常低的工作负载-其次是Controller+Click,它具有最快的速度和与Head+Click相当的体验,但总出错率要高得多。根据系统或用户的目标,其他方法也可能是有用的。作为第一个系统的评价指向 * 选择技术在VR中的文本选择,这项工作的结果提供了一个坚实的基础,在这个领域的进一步研究日益重要的VR的未来,以帮助它成为一个更普遍和普及的平台。
2022-10-15 cs.HC cs.MM
NeuroGaze: A Hybrid EEG and Eye-Tracking Brain-Computer Interface for Hands-Free Interaction in Virtual Reality
本研究提出NeuroGaze,一种结合脑电图与眼动追踪的混合脑机接口,用于VR免手动交互。实验表明其错误率更低但速度较慢,验证了可行性并凸显人体工程学优势与包容性潜力。
2025-09-09 cs.HC
Exploratory Design of a Hands-free Video Game Controller for a Quadriplegic Individual
从彩色像素到虚拟现实的超现实3D景观,视频游戏在过去的几十年里有了巨大的发展。然而,视频游戏输入仍然需要双手灵巧的手指操纵,以同时按下操纵杆和触发器或鼠标和键盘。在这项工作中,我们探索了一种免提游戏控制方法的设计,使用实时面部表情识别的神经和神经肌肉疾病的人谁是无法使用传统的游戏控制器。与其他辅助技术(AT)类似,我们的面部输入技术也是与患有脊髓性肌萎缩症的研究生合作设计和测试的。我们的初步评估显示了面部表情识别的潜力,通过使他们能够完成行走,跑步,飞行或其他冒险等事情来增强四肢瘫痪者的生活,这些事情可能无法以其他方式实现。
2021-09-02 cs.HC
Unlocking Mixed Reality for Medical Education: A See-Through Perspective on Head Anatomy
本文设计并验证一款头部解剖教学MR应用,通过手势/控制器交互、分层信息呈现和虚拟模型对真实头部的自动校准,提升解剖学习的交互性与沉浸感。
2025-08-30 cs.HC
Multicenter Assessment of Augmented Reality Registration Methods for Image-guided Interventions
Oregon Health & Science University School of Medicine(俄勒冈健康与科学大学医学院);Perelman School of Medicine at the University of Pennsylvania(宾夕法尼亚大学佩雷尔曼医学院)
目的:评估手动和自动配准时间以及在将全息三维(3D)模型与真实世界环境对齐期间增强现实的准确性。方法:在两个学术中心进行不同阶段临床培训的18名参与者连续3次使用HoloLens 2增强现实耳机将3D CT体模模型配准到CT网格上。比较了不同配准方法(手势、Xbox控制器和自动配准)、临床经验水平和连续尝试之间的配准时间和准确性。注册时间也与之前的HoloLens 1数据进行了比较。结果如下:单手手势、双手手势和Xbox控制器的平均总手动注册时间分别为27.7、24.3和72.8秒;平均自动注册时间为5.3秒(ANOVA p<0.0001)。主治医师、住院医师和研究员、医学生的挂号次数无显著性差异(P>0.05)。在使用手势的连续尝试中检测到注册时间的显著改善(p<0.01)。与之前报道的HoloLens 1体验相比,手势注册时间快了81.7%(p<0.05)。手动配准方法之间的配准精度没有显著差异,单手手势、双手手势和Xbox控制器分别测量为5.9、9.5和8.6 mm(p>0.05)。结论:与HoloLens 1相比,HoloLens 2上更新的手势操作显著减少了手动注册时间,接近自动注册的注册时间,并优于Xbox控制器介导的注册。这些结果将鼓励HoloLens 2在程序医疗中更广泛的临床整合。
2020-12-03 cs.CV cs.HC physics.med-ph
Auxilio and Beyond: Comparative Evaluation, Usability, and Design Guidelines for Head Movement-based Assistive Mouse Controllers
Queen's University(女王大学);Islamic University of Technology (IUT)(伊斯兰理工大学)
Auxilio通过结合低成本传感器实现头部运动和肌肉颤动控制,为上肢功能障碍者提供有效的计算机交互方案,并通过比较评估和可用性测试提出设计指导原则。
2026-01-11 cs.HC
Ageing, Digital Literacy, and Interaction Modality in Immer-sive Virtual Reality: Psychomotor Performance, Cognitive Flexibility, and Their Processing-Speed Association
National and Kapodistrian University of Athens(雅典国立卡波迪斯特里阿斯大学);The American College of Greece(希腊美国学院);University of Edinburgh(爱丁堡大学)
本研究探讨年龄、数字素养和交互模态对VR中精神运动及认知表现的影响,发现控制器直接触摸相对年龄梯度最陡但绝对速度最快,且处理速度部分中介年龄与认知关联。
2026-09-24 cs.CY cs.HC
Using Abstract Tangible Proxy Objects for Interaction in Optical See-through Augmented Reality
本文研究光学透视增强现实中物理代理对象形状可抽象的程度,通过对沙发模型不同抽象级别的实验发现,代理对象可适度抽象,但必须与虚拟对象保持基本相似的形状,以保证性能、可用性和临场感。
2023-08-10 cs.HC
Fast, Accurate, but Sometimes Too-Compelling Support: The Impact of Imperfectly Automated Cues in an Augmented Reality Head-Mounted Display on Visual Search Performance
虽然在复杂场景中对目标的视觉搜索可能会受益于使用增强现实(AR)盔装显示器(HMD)技术来帮助有效地引导人类注意力,但不完全可靠的自动化支持可能会在偶尔的错误中表现出来。目前的研究探讨了不同的HMD线索,可能支持视觉搜索性能和自动化错误后各自的后果的有效性。56名参与者在一个房间里搜索了一个包含48个物体的3D环境,以便在每次试验之前找到一个目标物体。他们在没有帮助的情况下进行搜索,或者在HMD的三种提示中的一种的帮助下进行搜索:指向目标的箭头,突出显示目标的平面视图小地图,以及描绘目标对象外观的持续可见图标。在一组参与者的17%的试验中,提示是不正确的,而在第二组中,提示是100%正确的。通过分析和建模的搜索速度和准确性,结果表明,箭头和小地图线索描绘的位置信息更有效的比图标线索描绘的视觉外观,无论是整体,当线索是正确的。然而,在暗示出错的罕见情况下,也有一个权衡。最有效的基于AR的提示导致了更大的自动化偏差,其中提示更经常被盲目地跟随,而没有仔细检查原始图像。结果表明了增强现实的好处,以及当AR传达的信息可能由于不完全可靠的系统而不正确时,需要检查潜在的成本。
2023-03-24 cs.HC
Quantifying Locomotion Differences Between Virtual Reality Users With and Without Motor Impairments
Hong Kong University of Science and Technology (Guangzhou)(香港科技大学(广州));University of Washington(华盛顿大学)
本研究通过实验比较有和无上半身障碍用户在六种VR移动技术下的表现,发现滑动观看适合作为默认技术,并识别出能揭示障碍及性能差异的交互指标。
2025-10-09 cs.HC
Exploring Head-based Mode-Switching in Virtual Reality
模式切换支持使用有限数量的输入方法的多级操作。在虚拟现实(VR)盔装显示器(HMD)中,用于模式切换的常见方法使用按钮、控制器和用户的手。然而,它们对于需要双手的任务(例如,当用户在绘图操作期间需要使用两只手时)。使用头部手势进行模式切换可能是一种高效且具有成本效益的方式,可以在模式之间进行更连续、更平滑的转换。在本文中,我们探讨了使用头部手势的模式切换,特别是在场景中,当用户的双手都在执行任务。我们提出了第一个用户研究,评估了八个头部姿势,这些姿势可能适合于具有双手线条绘制任务的VR HMD。结果表明,向前移动,向后移动,向左滚动,向右滚动导致更好的表现,并受到参与者的青睐。第二项研究将这四种手势集成在开源绘画VR应用程序WEBRush中,以进一步探索这些手势的适用性并获得见解。结果表明,带有头部手势的智能画笔允许用户轻松地更改模式,并改善了交互和用户体验。本文最后讨论了在VR HMD中使用基于头部的模式切换的一些设计建议。
2021-08-12 cs.HC
Comparing Controller With the Hand Gestures Pinch and Grab for Picking Up and Placing Virtual Objects
TU Kaiserslautern(凯泽斯劳滕工业大学);German Research Center for Artificial Intelligence(德国人工智能研究中心)
抓取虚拟对象是增强现实、虚拟现实和混合现实应用的基本任务之一。现代应用程序通常使用简单的捏手势来抓取和移动对象。然而,通过捏取来拾取物体具有缺点。拾取物体可能是不自然的手势,并且阻止了将用拇指和食指执行的其他手势的实现。因此,它不是许多应用的最佳选择。在这项工作中,不同的实现抓取和放置虚拟对象的建议和比较。所提出的技术的性能和精度进行测量和比较。
2022-02-22 cs.CV cs.HC
A Transferable Adaptive Domain Adversarial Neural Network for Virtual Reality Augmented EMG-Based Gesture Recognition
在基于肌电图(EMG)的手势识别领域内,文献中报道的离线准确性和分类器的实时可用性之间存在差异。这种差距主要源于两个因素:1)缺乏控制者,使得收集的数据与实际控制不一致。2)包括四个主要的动态因素(手势强度、肢体位置、电极移位和信号中的瞬时变化)的难度,如包括它们的排列,显著地增加了要记录的数据量。首先,在线数据集仅限于用于记录它们的精确的基于EMG的控制器,需要为待测试的每个控制方法或变体记录新的数据集。因此,本文提出了一种新型的数据集作为离线和在线数据集之间的中间,通过使用实时实验协议记录数据。该协议,在虚拟现实中执行,包括四个主要的动态因素,并使用肌电独立的控制器来指导运动。这种与EMG无关的反馈确保用户在记录过程中处于回路中,同时使生成的动态数据集能够用作基于EMG的基准。该数据集由20名身体健全的参与者组成,他们在14至21天的时间内完成了3至4次会议。动态数据集作为基准的能力被用来评估不同的重新校准技术对长期(跨天)手势识别的影响,包括一种名为TADANN的新算法。TADANN一致且显著(p<0.05)优于使用微调作为重新校准技术。
2021-02-14 cs.CV cs.HC cs.LG
Beyond LunAR: An augmented reality UI for deep-space exploration missions
随着太空探索工作转向深空任务,宇航员通信和任务完成方面出现了新的挑战。月球通信的往返传播延迟为2.6秒,而火星任务的时间延迟增加到近22分钟。这就需要航天员独立于地球上的援助,并使能够提供的有限通信具有更大的意义。为了解决这个问题,我们为新的xEMU宇航服制作了一个增强现实用户界面原型,用于行星表面任务。该用户界面帮助完成通常由任务控制中心的飞行控制员完成的功能,或者目前以不必要的困难的方式完成的功能。我们通过基于AR模型的任务指令、采样任务辅助、笔记记录以及遥测监控和显示等功能来实现这一点。
2020-11-30 cs.GR cs.HC
Point&Spawn: Mid-Air Reference-Free Object Instantiation Using Gaze and Hand Gestures in Extended Reality
KAIST(韩国科学技术院);Aarhus University(奥胡斯大学)
本文针对XR中无空间参考的空中物体实例化问题,提出Point&Spawn分阶段手势控制流程,通过用户研究对比不同方向与深度设定技术,为XR实例化交互设计提供实证指导。
2026-09-04 cs.HC
Low-cost Augmented Reality prototype for controlling network devices
随着移动设备,特别是智能手机的发展,我们有能力创造新的体验,增强我们在周围世界中观察、互动和操纵物体的方式。现在可以以多种方式混合来自我们的感官和设备的数据,这在使用增强现实技术之前是不可能的。在不久的将来,当所有的办公设备以及您的个人电子产品都在一个共同的无线网络上时,使用通用遥控器操作它们将成为可能。本文提出了一种现成的,低成本的原型,利用增强现实技术提供一种新颖的和互动的方式操作办公网络设备周围使用移动终端。我们相信,这种类型的系统可以为控制多个集成设备和可视化互连性或利用视觉元素将信息从一个设备传递到另一个设备提供益处,或者在与设备进行物理交互可能很困难或造成危险或伤害时对控制设备特别有益。
2014-06-12 cs.HC cs.MM
You Can't Hide Behind Your Headset: User Profiling in Augmented and Virtual Reality
虚拟和增强现实(VR、AR)由于技术进步和对远程连接的需求而日益受到关注,最近的疫情加剧了这种需求。远程手术、远程机器人和虚拟办公室只是他们成功的一些例子。当用户与VR/AR交互时,他们会生成大量的行为数据,这些数据通常用于衡量人类行为。然而,人们对这些数据如何用于其他目的知之甚少。在这项工作中,我们证明了用户分析的可行性,在两个不同的虚拟技术的用例:AR日常应用程序($N=34$)和VR机器人遥操作($N=35$)。具体来说,我们利用机器学习来识别用户并推断他们的个人属性(即,年龄、性别)。通过监控用户的头部、控制器和眼球运动,我们调查了几项任务(例如,走路、看东西、打字)。我们的贡献提供了重要的见解,在虚拟环境中的用户分析。
2022-09-22 cs.CR cs.HC
Towards Human-Robot Teaming through Augmented Reality and Gaze-Based Attention Control
Ritchie School of Engineering and Computer Science, University of Denver(丹佛大学工程与计算机科学学院)
本文提出一种结合地面机器人与增强现实技术的人机协同系统,通过AR头戴设备显示虚拟视觉标记来动态吸引和转移人类注意力,克服传统注意力控制方法在精确性与微妙性上的不足。
2024-08-23 cs.HC cs.RO
Augmenting Teleportation in Virtual Reality With Discrete Rotation Angles
运动是虚拟现实(VR)中最基本的交互任务之一,在撰写本文时,远距传送被广泛接受为最先进的运动技术。远距传送的一个主要缺点是伴随的物理旋转,这是在远距传送之前或之后调整用户方向所必需的。这是用于系留式盔装显示器(HMD)和静态身体姿势的限制因素,并且由于缺少视差提示,对于具有三个自由度(DOF)的HMD,可能引起额外的模拟器不适。为了避免物理旋转,以前的工作提出了离散旋转在固定的时间间隔(InPlace)作为一种基于生物的技术与低模拟器病,但不同的时间间隔对空间定向障碍,用户的存在和性能的影响仍有待探讨。在商业VR游戏中发现的一种未评估的技术是在传送过程中重新定向(TeleTurn),这可以防止物理旋转,但由于其连续的方向选择,可能会增加交互时间。在一项探索性用户研究中,参与者可以自由地应用这两种技术,我们评估了旋转参数对用户性能和偏好的影响。我们的结果表明,离散的原地旋转不会引起显着的空间迷失方向,而用户在场评分则有所增加。离散远距转弯和无旋转远距传送的排名更高,并且比连续远距转弯获得了更高的存在分数,这是目前VR游戏中最先进的技术。根据观察,参与者避免TeleTurn旋转时,离散原地旋转可用,我们提炼的指导方针,设计无物理旋转的隐形传态。
2021-06-08 cs.HC
The Trail Making Test in Virtual Reality (TMT-VR): The Effects of Interaction Modes and Gaming Skills on Cognitive Performance of Young Adults
本研究开发并评估了虚拟现实连线测验TMT-VR,探究交互模式与游戏技能对青年认知表现的影响,发现眼动追踪和头部运动模式表现优于控制器,游戏技能无显著影响,该测验可用性与接受度高。
2024-10-30 cs.CY cs.HC cs.MM
A High-Fidelity Robotic Manipulator Teleoperation Framework for Human-Centered Augmented Reality Evaluation
Worcester Polytechnic Institute(沃斯特理工学院)
ARBot是一种用于增强现实评估的高保真机器人机械臂远程操作框架,通过定制算法和安全控制器实现自然运动捕捉与回放,提供可控的AR评估数据集。
2026-02-06 cs.HC cs.RO
Investigating Input Modality and Task Geometry on Precision-first 3D Drawing in Virtual Reality
在沉浸式虚拟现实(VR)中精确绘制非平面三维曲线是许多精确三维任务不可或缺的。然而,由于缺乏物理支撑、有限的深度感知以及3D曲线的非平面性质,调整空中行程以实现高精度是具有挑战性的。而不是创建新的交互技术,我们研究了任务几何形状和输入方式如何影响精度第一的绘画表现在一个主题内的研究(n = 12)专注于3D目标跟踪在市售VR头显。我们发现,与徒手相比,VR控制器和笔的精度提高了近30%,并且具有大曲率、前后或左右方向的任务表现最好。最后,我们将讨论为精确的3D绘图设计新颖的交互技术的机会。我们相信,我们的工作将有利于未来的研究,旨在创建可用的工具箱,精确的3D绘图。
2022-10-21 cs.CY cs.HC