IRVO: an Interaction Model for designing Collaborative Mixed Reality systems
本文提出了一种适用于混合现实环境的交互模型IRVO(Interacting with Real and Virtual Objects)。IRVO旨在通过明确表示所涉及的对象和工具及其关系来建模一个或多个用户与混合现实系统之间的交互。IRVO涵盖了生存周期的设计阶段,并对系统的预期用途进行了建模。在第一部分中,我们提出了一个简短的回顾相关的人机交互模型。第二部分是专门的IRVO模型,它的符号和一些例子。在第三部分中,我们介绍了如何IRVO用于设计应用程序,特别是我们展示了如何将此模型集成到我们实验室目前设计的基于模型的方法(CoCSys)中。
2007-07-10 cs.HC
Blocks: Collaborative and Persistent Augmented Reality Experiences
我们介绍了Blocks,这是一个移动应用程序,使人们能够共同创建在物理环境中持久存在的AR结构。使用Blocks,终端用户可以同步或异步协作,无论他们是在同一地点还是在远程。此外,AR结构可以绑定到物理位置,或者可以从任何地方访问。我们通过一系列有160多名参与者的实验室和现场部署研究,评估了人们如何使用Blocks,并探讨了空间和时间两个协作维度之间的相互作用。我们发现,参与者更喜欢创建结构同步与同位合作者。此外,当他们创建不受时间或地点限制的结构时,他们最活跃。与当今大多数专注于内容消费的AR体验不同,这项工作概述了持久和协作AR体验的新设计机会,使任何人都能够协作和创建AR内容。
2019-08-14 cs.HC
Dataspace: A Reconfigurable Hybrid Reality Environment for Collaborative Information Analysis
沉浸式环境已经逐渐成为可视化和分析大型或复杂数据集的标准,否则通过较小规模的计算设备探索这些数据集将是繁琐的,如果不是不可能的话。然而,这种类型的工作空间往往被证明在交互、灵活性、成本和可扩展性方面具有局限性。在本文中,我们介绍了一种新的沉浸式环境,称为数据空间,其特点是一个新的组合的异构技术和方法的互动,以创造一个更好的团队工作空间。Dataspace提供了15个高分辨率显示器,可以通过机械臂在空间中动态重新配置,一个可以投射信息的中央桌子,以及与增强现实(AR)和虚拟现实(VR)耳机和其他移动设备的独特集成。特别是,我们贡献了新颖的交互方法,将物理环境与AR和VR技术相结合,实现复杂类型数据的可视化,并缓解现有沉浸式环境的可扩展性问题。我们通过四个用例演示了如何在不同的域中有效地使用该环境,并根据用户需求进行重新配置。最后,我们将Dataspace与现有技术进行了比较,总结了在尝试为未来构建更好的协作式数据库时应该考虑的权衡。
2019-03-08 cs.HC
Exploring Multiview UI Layouts and Placement Strategies for Collaborative Sensemaking in Virtual Reality
Shahjalal University of Science and Technology(贾拉勒巴德科技大学);BRAC University(布拉格大学)
研究探讨了虚拟现实中多视图界面布局与放置策略,通过用户研究发现半圆形布局在协作中常见,图像+文本文档降低比较任务负荷,图表降低分类任务负荷,并提出设计指南支持VR协作。
2025-11-22 cs.HC
Decoupled Hands: An Approach for Aligning Perspectives in Collaborative Mixed Reality
针对协作式混合现实中视角差异导致的遮挡与空间参照混乱问题,本文提出通过动态变换共享对象本地副本及协作者手部等虚拟元素来自动对齐视角,且无需虚拟移动并保留面对面交互。
2025-03-15 cs.HC
Just stop doing everything for now!: Understanding security attacks in remote collaborative mixed reality
本文研究了远程协作混合现实中的安全攻击,通过在Microsoft HoloLens 2上实施多种攻击发现用户对沉浸式攻击识别率较低,强调了培训用户和加强安全措施的重要性。
2025-01-27 cs.HC
XR Prototyping of Mixed Reality Visualizations: Compensating Interaction Latency for a Medical Imaging Robot
针对医学领域新型用户体验研究受限的问题,本文探究扩展现实原型设计(XRP)在控制移动式医学成像机器人中的优劣势,对比两种降低感知延迟的XR可视化技术,验证了XRP用于对比研究的潜力,同时指出其分析框架在人类行为建模上的不足。
2024-09-16 cs.HC
Unlocking Mixed Reality for Medical Education: A See-Through Perspective on Head Anatomy
本文设计并验证一款头部解剖教学MR应用,通过手势/控制器交互、分层信息呈现和虚拟模型对真实头部的自动校准,提升解剖学习的交互性与沉浸感。
2025-08-30 cs.HC
Investigating the impact of virtual element misalignment in collaborative Augmented Reality experiences
Immersive Reality Lab, Hamm-Lippstadt University of Applied Sciences(哈姆-利普施塔特应用科学大学沉浸式现实实验室);Quality and Usability Lab, Technische Universität Berlin(柏林工业大学质量与可用性实验室)
本研究针对共享AR空间协作研究不足的问题,通过24组共48名参与者的实验,发现虚拟物体感知差异不直接影响协作,位置同步性是提升协作体验的关键,化身作用相对较弱,为协作式AR/VR开发提供参考。
2024-04-25 cs.HC
A Collaborative Untethered Virtual Reality Environment for Interactive Social Network Visualization
随着虚拟现实技术作为游戏和视频播放平台的日益普及,需要研究如何最好地将当前技术水平应用于数据可视化的挑战。许多当前的VR系统是非协作的,而数据分析和可视化通常是一个多人的过程。我们在本文中的目标是解决技术和用户体验的挑战时,出现创建虚拟现实环境的协作数据可视化。我们专注于多个跟踪系统的集成和新的交互模式,这种集成可以使,随着视觉设计的考虑,特别适用于协作网络可视化在虚拟现实。我们展示了一个系统的协作互动与大型3D布局的Twitter朋友/跟随网络。该系统通过结合“Holojam”架构(OptiTrack运动捕捉平台内的多个GearVR头显)和Perception Neuron运动套装构建,提供不受束缚的全房间多人可视化体验。
2016-04-27 cs.GR cs.HC
Development of Head-Mounted Projection Displays for Distributed, Collaborative, Augmented Reality Applications
随着时间的推移,支持3D可视化和社交协作的分布式系统技术将在频率和类型上不断增加。最近开发了一种称为头戴式投影显示器(HMPD)的新兴类型的盔装显示器,其仅需要超轻光学器件(即,每只眼睛小于8 g),可实现沉浸式多用户、移动增强现实3D可视化以及远程3D协作。在本文中,轻量级HMPD技术的发展提供了一个审查,以及洞察是什么使这项技术及时,所以独特的。然后描述了两种新的新兴的基于HMPD的技术:远程门户HMPD(T-HMPD),使面对面的通信和共享的3D虚拟对象的可视化,和移动HMPD(M-HMPD)设计的户外可穿戴可视化和通信。最后,使用HMPD在医学可视化和培训,以及在infospaces,两个应用程序开发的ODA和MIND实验室分别进行了讨论。
2019-02-20 cs.HC
Exploring the Effects of Level of Control in the Initialization of Shared Whiteboarding Sessions in Collaborative Augmented Reality
通过VR模拟AR环境,研究比较了MANUAL、DISCRETE CHOICE和AUTOMATIC三种白板会话初始化方法的控制水平,发现多数用户尽管面临额外工作量仍偏好直接控制。
2025-02-02 cs.HC
Enabling Additive Manufacturing Part Inspection of Digital Twins via Collaborative Virtual Reality
针对增材制造数字孪生检测中存在的多模态大规模3D数据适配难、跨团队协作效率低等问题,提出一种新型VR框架,通过多模态数据可视化、体数据流式传输等功能实现协作式实时检测,提升数字孪生应用价值。
2024-05-21 cs.HC
Remote Virtual Showdown: A Collaborative Virtual Reality Game for People with Visual Impairments
许多研究人员通过使用各种音频反馈技术为视觉障碍者开发了VR系统。然而,对于视觉障碍者和身体健全者可以共同参与的协作VR系统的研究却少得多。因此,我们开发了一款类似于真实摊牌游戏的VR摊牌游戏,其中两名玩家可以在同一个虚拟环境中一起玩。我们将听觉距离感知使用HRTF(头部相关的变换函数)的基础上的空间位置在VR。我们在摊牌游戏中开发了两种模式。其中一种是PVA(Player vs. Agent)模式,视障人士可以单独玩,另一种是PVP(Player vs. Player)模式,视障人士可以在网络环境中与另一位玩家一起玩。我们通过比较视力障碍者和身体健全者的表现来进行用户研究。用户研究结果表明,视力障碍者在与健全人竞争时赢得了67.6%的游戏。本文报告了一个为视觉障碍者设计的协作式虚拟现实系统的实例,以及为视觉障碍者开发虚拟现实系统的设计指南。
2021-03-31 cs.HC
Immersive Insights: A Hybrid Analytics System for Collaborative Exploratory Data Analysis
在过去的几年里,增强现实(AR)和虚拟现实(VR)技术在可访问性和硬件能力方面都有了很大的改进,鼓励这些设备在各个领域的应用。虽然研究人员已经证明了AR和VR在某些数据科学任务中的可能优势,但目前还不清楚这些技术在探索性数据分析(EDA)中的表现。特别是,我们认为更好地了解哪种沉浸式EDA将具体受益,并量化AR和VR对标准分析工作流程的贡献非常重要。在这项工作中,我们利用Dataspace可重构混合现实环境来研究数据科学家如何在协同定位的协作环境中执行EDA。具体来说,我们提出了沉浸式洞察力的设计和实现,这是一个混合分析系统,结合了高分辨率显示,表格投影和数据的增强现实(AR)可视化。我们与12位数据科学家进行了一项由两部分组成的用户研究,评估了不同程度的数据沉浸感如何影响EDA过程,并将Immersive Insights的性能与最先进的非沉浸式数据分析系统进行了比较。
2019-10-27 cs.HC
Collaborative Software Modeling in Virtual Reality
建模是概念设计和系统设计的关键活动。通过协作建模,最终用户、利益相关者、专家和企业家能够创建对系统表示的共享理解。统一建模语言(UML)是面向对象软件工程中主要的概念建模语言之一,但UML的建模质量及其工具支持越来越受到人们的关注。其中,其符号的二维表示的限制和缺乏自然的协作建模工具被报道是显着的。在本文中,我们探讨了使用虚拟现实(VR)技术的协同UML软件设计的潜力,通过比较它与经典的协同软件设计使用传统的设备(台式PC,笔记本电脑)。为此,我们开发了一个VR建模环境,为UML类图提供自然的协作建模体验。基于24名参与者的用户研究,我们比较了协作VR建模与传统建模的效率,有效性和用户满意度。结果表明,VR的使用在效率和效果方面存在一些缺点,但用户的乐趣,与远程协作者在同一个房间的感觉,以及协作的自然性都有所增加。
2021-07-27 cs.HC cs.SE
A Collaborative Extended Reality Prototype for 3D Surgical Planning and Visualization
The Chinese University of Hong Kong(香港中文大学)
本文提出了一种协作扩展现实原型,用于3D手术规划和可视化,通过用户研究验证了其有效性并为未来医疗XR协作提供启示。
2026-01-27 cs.GR cs.HC cs.MM
Enhancing Medical Anatomy Education through Virtual Reality (VR): Design, Development, and Evaluation
本研究设计并开发了一个基于桌面的虚拟现实解剖实验室,利用视觉感知和交互界面增强医学解剖学习,并通过马来西亚医学生的评估验证了其有效性与可用性。
2024-11-07 cs.HC
MED1stMR: Mixed Reality to Enhance Training of Medical First Responder]{MED1stMR: Mixed Reality to Enhance the Training of Medical First Responders for Challenging Contexts
在全球范围内,人为或自然灾害造成大量人员受伤的大规模伤亡事件正在增加。在这种情况下,医疗急救人员需要进行诊断、基本生命支持或其他急救,以帮助稳定受害者并使他们活着等待进一步支持的到来。对情况的了解和有效应对急性应激源对于使第一反应者能够采取适当行动拯救生命至关重要。虚拟现实(VR)已在多个领域被证明是一种严肃的替代方案,在某些领域也是对传统学习和培训的重大改进。特别是对于MFR培训中的挑战,它对于培训背景不容易获得的实践和学习领域非常有用。VR训练提供了可控的、易于创建的环境,可以在相同的条件下重复创建和训练。作为VR的高级替代方案,混合现实(MR)环境有可能通过提供环境的动态模拟和对受伤受害者的实践来增强当前的VR培训。基于对MR的这种解释,MED 1stMR的主要目的是开发具有触觉反馈的新一代MR训练,以增强真实感。在这份工作坊文件中,我们会介绍计划的远景,并提出问题供讨论。
2023-01-30 cs.CY cs.HC
SecCityVR: Visualization and Collaborative Exploration of Software Vulnerabilities in Virtual Reality
本文提出SecCityVR,一种基于虚拟现实和代码城市隐喻的可视化工具,用于协同探索软件安全漏洞,通过调用图情境化漏洞,用户研究显示其可用性更高、挫败感更低,尽管任务时间较长。
2025-04-25 cs.HC
The Impact of Spatial Misalignment and Time Delay on Collaborative Presence in Augmented Reality
Hamm-Lippstadt University of Applied Sciences(哈姆-利普施塔特应用科学大学);Technische Universität Berlin(柏林工业大学)
本文研究了空间错位和时间延迟对增强现实协作体验的影响,发现空间错位显著增加工作负荷并降低用户满意度。
2025-12-08 cs.HC
Open Medical Gesture: An Open-Source Experiment in Naturalistic Physical Interactions for Mixed and Virtual Reality Simulations
本文介绍USC面向军事战斗医护训练开发的开源工具包Open Medical Gesture,通过传感器无关的直接手部交互操作虚拟智能物体,为MR/VR模拟提供直观、低挫败感的自然交互方案。
2023-08-14 cs.HC
Collaborative Remote Control of Unmanned Ground Vehicles in Virtual Reality
Xi’an Jiaotong-Liverpool University(西交利物浦大学)
虚拟现实(VR)技术通常用于娱乐应用;然而,它也被部署在我们生活中更重要方面的实际应用中,例如安全。为了支持在危险行业工作的人们,VR可以确保操作员操作标准化任务,并协同工作以应对潜在风险。令人惊讶的是,很少有研究关注人们如何在VR环境中协同工作。很少有研究关注操作员在协作任务中的认知负荷。一旦任务需求变得复杂,许多研究人员就专注于优化交互界面的设计,以减少操作员的认知负荷。这种方法可能是有价值的;然而,它实际上可能使操作员承受更大的认知负荷,并可能导致更多的错误和合作失败。在本文中,我们提出了一个新的协作VR系统,支持两个遥控器在VR环境中工作,远程控制无人驾驶的地面车辆。我们使用了一个比较实验来评估协作VR系统,重点是任务所花费的时间和操作的总数。我们的研究结果表明,在操作过程中的过程总数和认知负荷显着低于两人组比单人组。我们的研究揭示了设计VR系统,以支持协作工作的远程操作员的工作流程,而不是简单地优化设计结果。
2022-08-24 cs.HC cs.RO
TeamPortal: Exploring Virtual Reality Collaboration Through Shared and Manipulating Parallel Views
本文提出 TeamPortal 以支持 VR 协作中的平行视图共享与操纵,通过两项 72 人参与的用户研究证明其能显著提升协作效率、社交存在感,并进一步评估了三种变体,提出了未来 VR 协作系统的设计启示。
2025-01-29 cs.HC
SARA: A Microservice-Based Architecture for Cross-Platform Collaborative Augmented Reality
本文提出SARA,一种基于微服务的跨平台协作AR架构,通过可复用的协作模型组件屏蔽通信协议与设备异构性,使开发者专注应用逻辑,并以HoloLens与iOS体素游戏原型验证其有效性。
2025-01-02 cs.ET cs.HC
Exploring the Effects of Different Asymmetric Game Designs on User Experience in Collaborative Virtual Reality
Hamm-Lippstadt University of Applied Sciences(哈姆-利普施塔特应用科学大学)
本研究通过四个版本的VR实验,探讨非对称游戏设计中环境共享与玩家依赖对协作VR用户体验的影响,发现设计变化显著影响可用性、UX质量、沉浸控制及动机,且玩家依赖程度是关键因素。
2025-10-16 cs.HC
Virtual Reality for medical education and training of Diabetic Foot
糖尿病足是糖尿病最常见的并发症之一,也是世界范围内下肢截肢的主要非创伤性原因。这些并发症可以通过早期诊断和及时护理来预防。然而,即使在扩大初级卫生保健的背景下,这一问题继续增加,这表明初级卫生保健专业人员在诊断和治疗糖尿病足方面的培训存在差距。本项目提出了一个虚拟现实模拟器的开发,培训学生和专业人员在初级卫生保健,旨在合作,填补这一空白。该应用程序具有游戏化元素,以提高用户参与度。初级保健医疗护理的背景将模拟各种临床病例,包括与糖尿病足相关的不同阶段的几个虚拟患者,旨在为潜在用户提供可信和独特的体验。此外,我们的目标是验证可用性,有效性和任何副作用(晕电脑)。最后,我们计划与合格的学生和专业人士进行实地研究,以确定应用该技术的主要好处和障碍。
2023-02-06 cs.HC
Experiences with CAMRE: Single-Device Collaborative Adaptive Mixed Reality Environment
针对混合现实协作中3D重建慢、数据传输延迟高、需多设备部署的问题,提出单设备系统CAMRE,依托HoloLens 2的场景理解能力与领导者-追随者范式,实现低延迟的共享同步MR场景及导航、X射线视觉等扩展功能。
2023-10-08 cs.HC
Collaborative Problem Solving in Mixed Reality: A Study on Visual Graph Analysis
University of Konstanz(康斯坦茨大学);University of Perugia(佩鲁贾大学);Monash University(蒙纳士大学)
本研究探讨了混合现实环境中协作问题解决的有效性,通过比较不同协作模式在视觉图分析任务中的表现,发现名义小组作为基准更能评估协作虚拟环境的效果。
2026-03-09 cs.ET cs.GR cs.HC
Immersive Augmented Reality Training for Complex Manufacturing Scenarios
在复杂的制造业部门,大量资源集中用于开发新技能和培训工人。在这方面,提高这些进程的效力和减少所需投资是一个悬而未决的问题。在本文中,我们提出了一个实验,显示如何现代人机交互(HCI)的隐喻,如协作混合现实可以用来传输程序知识,并最终取代其他形式的面对面的培训。我们实现了一个实时沉浸式增强现实(IAR)设置与透视相机,允许协作交互,可以模拟传统形式的培训。结果表明,接受IAR训练的人与接受传统面对面训练的人相比,取得了相同的成绩。这些结果,其影响,为未来的培训和使用HCI范式在这方面进行了讨论。
2016-11-16 cs.HC
GroupBeaMR: Analyzing Collaborative Group Behavior in Mixed Reality Through Passive Sensing and Sociometry
本文提出GroupBeaMR框架,利用MR头显传感器分析对话、共享注意力和接近度以识别群体互动模式,通过社会网络分析量化群体动态,经48人12组研究验证其区分MR环境互动模式的能力。
2025-02-10 cs.ET cs.HC
Evaluating Augmented Reality Communication: How Can We Teach Procedural Skill in AR?
本研究分析AR通信系统用于教授超声引导下CVC置入操作的效果,对比其与视频会议教学的差异,考察AR组件的使用模式并提出AR设计建议。
2023-12-14 cs.HC
Decoding Decision Correctness from EEG Under High Cognitive Workload in Virtual Reality: Implications for Collaborative Brain-Computer Interface Teams
Queen's University Belfast(贝尔法斯特女王大学);Liverpool John Moores University(利物浦约翰摩尔斯大学);Defence Science Technology Laboratory(国防科学技术实验室)
该研究在虚拟现实高认知负荷下,利用空间协方差脑电图特征作为决策正确性的先发信号,发现其可提升团队争议试次的决策准确率,为协作脑机接口团队的部署提供了负荷条件相关的启示。
2026-09-03 cs.HC
Generative AI and Extended Reality in Collaborative Architectural Design Education: An Exploratory Studio Study
Worcester Polytechnic Institute(伍斯特理工学院);Western Connecticut State University(西康涅狄格州立大学)
本研究通过开发并部署GenARch流程,探索了生成式AI与扩展现实在协作式建筑设计教育中的应用,发现两者互补支持构思与空间评估,但存在控制、保真度等挑战。
2026-09-15 cs.AI cs.HC
Managing Information Overload in Large-Scale Distributed Mixed-Reality Meetings
本文探讨如何利用混合现实的独特适应性管理大规模分布式混合现实会议中的信息过载,以缓解感官过载、认知压力和社交疲劳等挑战。
2025-04-04 cs.HC
Evaluating the Effects of Situated and Embedded Visualisation in Augmented Reality Guidance for Isolated Medical Assistance
本文比较增强现实中的嵌入式与情境化投影两种可视化形式,通过23名潜在/新手医疗知识参与者的实验,发现嵌入式可视化在精度上更优,旨在为隔离医疗辅助提供合适指导格式,并计划与国家空间局合作在真实环境验证。
2025-02-13 cs.HC
Enabling Waypoint Generation for Collaborative Robots using LLMs and Mixed Reality
MIT Media Lab(麻省理工学院媒体实验室);University of Southern Denmark(南丹麦大学);Universal Robots A/S(优傲机器人公司)
提出一种利用大语言模型和增强现实实现自然语言控制机器人路径点生成的框架,并通过真实机器人上的拾放任务验证其有效性。
2024-07-17 cs.HC cs.RO
ClipGS-VR: Immersive and Interactive Cinematic Visualization of Volumetric Medical Data in Mobile Virtual Reality
Department of Computer Science and Engineering and Institute of Medical Intelligence and XR The Chinese University of Hong Kong(香港中文大学计算机科学与工程系及医疗智能与扩展现实研究所)
ClipGS-VR通过基于梯度的不透明度调节实现移动VR中的任意角度切片,提升体积医学数据的沉浸式交互可视化性能。
2026-01-27 cs.GR cs.HC
Effects of Human Avatar Representation in Virtual Reality on Inter-Brain Connection
本文通过八对参与者的超扫描实验,比较RL、FB和HH三种VR化身表征,发现越接近真实人类的化身越能增强EEG分析中的脑间显著连接。
2024-10-29 cs.HC
Co-Designing Dynamic Mixed Reality Drill Positioning Widgets: A Collaborative Approach with Dentists in a Realistic Setup
本研究联合牙医与MR专家协同设计4款MR牙钻定位组件,经35名牙医在仿真环境中测试,发现动态组件精度更高但更耗时间与精力,可拓展至多领域高精度场景。
2024-09-16 cs.HC
Augmented Reality in Higher Education: a Case Study in Medical Education
本文介绍了与爱丁堡大学医学院合作开发的The Anatomy Experience,该AR体验有效提升了医学生对解剖学复杂几何结构的理解,在远程医学教育中获得了师生的高度积极反馈。
2023-08-30 cs.ET cs.HC
The Value of Extended Reality Techniques to Improve Remote Collaborative Maintenance Operations: A User Study
本研究针对AEC领域远程维护协作受限的问题,提出结合MR、VR装置与共享数字模型的XR协同方案,经用户研究验证可显著提升巡检效率、减少操作错误。
2024-02-29 cs.GR cs.HC
Mixed Reality Communication for Medical Procedures: Teaching the Placement of a Central Venous Catheter
American University(美利坚大学);Graz University of Technology(格拉茨工业大学);George Washington University(乔治华盛顿大学)
针对医疗操作技能分布不均的问题,研发了一套混合现实实时通信系统,通过体三维场景捕捉与叠加实现远程专家的空间引导,经CVC置管教学模拟实验验证,其效果优于传统视频会议培训。
2023-12-14 cs.CV cs.HC
Mixed reality hologram slicer (mxdR-HS): a marker-less tangible user interface for interactive holographic volume visualization
混合现实盔装显示器(mxdR-HMD)具有在全息图中可视化体积医学成像数据以提供真正意义上的体积深度的潜力。然而,有效的用户界面还有待于深入研究。触觉用户界面(TUI)使得能够通过对象与全息图进行触觉交互。该对象具有物理属性,指示如何使用多个自由度。我们提出了一个TUI使用一个平面对象(PO)的全息医学体可视化和探索。我们称之为mxdR全息切片器(mxdR-HS)。用户可以对全息图进行切片,以检查特定的感兴趣区域(ROI),并混合互补数据和注释。mxdR-HS引入了一种新颖的实时ad-hoc无标记PO跟踪方法,可用于任何角落可见的PO。mxdR-HS的目标是保持最小的计算延迟,同时保持实际的跟踪精度,以实现商业mxdR-HMD中的无缝TUI集成,这具有有限的计算资源。我们在带有内置深度摄像头的商业Microsoft HoloLens上实现了mxdR-HS。我们的实验结果表明,我们的mxdR-HS具有优越的计算延迟,但跟踪精度略低于两个基于标记的跟踪方法,并导致增强的计算延迟和跟踪精度比10个无标记的跟踪方法。我们的mxdR-HS,在医疗环境中,可以建议作为一个视觉指南,以显示复杂的体积医学成像数据。
2022-01-26 cs.HC
A Distributed Augmented Reality System for Medical Training and Simulation
增强现实(AR)系统描述了使用计算机将虚拟信息叠加在现实世界上的一类系统。AR环境允许在几个应用领域开发有前途的工具。在医疗培训和模拟中,AR的学习潜力被系统在远程位置实时呈现3D医疗模型的能力显着放大。此外,通过使用实时可变形医学模型,拓宽了模拟的适用性。本文提出了一个分布式医疗训练原型,旨在训练医生在进行气管插管时的手眼协调。我们提出的系统在AR范例的帮助下完成了这一任务。通过采用可变形的医学模型,该原型扩展到医学模拟是可能的。通过一种新的自适应同步算法(ASA)来保证协作AR环境的共享状态维护,该算法增加了参与者之间的存在感,并促进了他们的交互性,尽管存在基础设施延迟。该系统将允许护理人员,院前人员和学生在不接触真实患者的情况下练习他们的技能,并为他们提供他们无法获得的视觉反馈。这样的分布式AR训练工具具有以下潜力:允许教练同时训练本地和远程定位的学生,并且允许学生实际上“看到”内部解剖结构,并且因此更好地理解他们在人类患者模拟器(HPS)上的动作。
2018-11-29 cs.DC cs.HC
ARCollab: Towards Multi-User Interactive Cardiovascular Surgical Planning in Mobile Augmented Reality
ARCollab是一款iOS AR应用,通过多用户共享环境交互患者特定3D心脏模型,实现无需物理模型的协作式心血管手术规划,利用iOS设备普及性推动实际应用。
2024-02-07 cs.HC
Human Interaction for Collaborative Semantic SLAM using Extended Reality
本文提出人在环路的语义SLAM框架HICS-SLAM,通过共享扩展现实环境将人工高层次语义干预与机器人感知进行图融合,在真实工地数据上提升了房间检测、地图精度和语义完整性。
2025-09-18 cs.HC cs.RO
ARCOR2: Framework for Collaborative End-User Management of Industrial Robotic Workplaces using Augmented Reality
Brno University of Technology(布尔诺理工大学)
本研究提出ARCOR2增强现实框架,支持终端用户跨供应商协作管理工业机器人工作场所,结合力觉示教与图形工具实现高精度编程,经印刷电路板测试场景验证及专家评估,展现出高应用潜力。
2023-06-14 cs.HC cs.RO
Integrating Large Language Models with Multimodal Virtual Reality Interfaces to Support Collaborative Human-Robot Construction Work
University of Michigan(密歇根大学)
本文提出融合语音、控制器、ROS、BIM、游戏引擎与LLM聊天界面的多模态VR系统,并通过12名工人的石膏板安装实验验证其低负荷、高可用的人机协作价值。
2024-04-04 cs.HC cs.RO
Semi-automated labelling of medical images: benefits of a collaborative work in the evaluation of prostate cancer in MRI
目的:本研究的目的是显示与常用的双盲评价相比,在T2加权MRI中注释和评价前列腺癌组织的协作工作的优势。研究方法:首先评价了两位独立专家针对前列腺(中央腺、外周和肿瘤区)的医学发现的变异性,其次与这两位专家的共识进行了比较。使用前列腺MRI数据库,专家使用半自动工具绘制了与健康前列腺(外周和中心区域)和癌症相对应的感兴趣区域(ROI)。然后,其中一个专家利用另一个专家的ROI的知识绘制ROI。结果如下:以第二位专家的图纸为参考,在不同实验之间评估每个ROI的表面积作为每个轮廓的Hausdorff距离和Dice系数。结果表明,随着合作的进行,两人的显著性差异变得不显著。结论:这项研究表明,与使用双盲评估相比,使用专用工具进行协作可以在专业知识之间达成更好的共识。虽然我们在T2加权MRI中显示了这一点,但这项研究的结果可以外推到其他疾病和医学图像中。
2017-08-29 cs.HC physics.med-ph
Deep Connection: Making Virtual Reality Artworks with Medical Scan Data
Deep Connection是一个装置和虚拟现实艺术品,使用全身3D和4D磁共振扫描数据集制作。当用户进入深度连接时,他们会看到一个被扫描的身体趴在半空中。使用者可以在身体周围走动并检查它。使用者可以潜入身体内部并观察它的内部运作,它的肺,脊柱,大脑。用户可以握住人物伸出的手:握住手会触发4D数据集,使心脏跳动和肺部呼吸。当使用者放开手时,心脏停止跳动,肺部停止呼吸。深度连接创造了一个场景,在这个场景中,一个具身的人成为一个虚拟身体的伴侣。本文绘制了深度连接的概念和理论框架,如虚拟亲密关系和数字中介陪伴。它还反映了在虚拟现实中更普遍地使用扫描身体的工作,讨论了透明度,网络身体与数据身体,以及数据隐私和数据伦理。本文还解释了技术和程序方面的深度连接项目获取扫描数据创建的虚拟现实艺术品。
2021-10-01 cs.HC cs.MM
Multi-User Mobile Augmented Reality for Cardiovascular Surgical Planning
本文提出开源iOS多用户移动AR应用ARCollab,支持外科医生与心脏病专家在共享环境中协作操作患者3D心脏模型,替代3D打印物理模型,并完成首次针对手术规划的多用户移动AR工具人体评估。
2024-08-08 cs.HC
Collaborative software design and modeling in virtual reality
本文通过设计科学研究方法开发并评估虚拟现实协同软件设计工具,发现其协作效率与信息回忆相比非VR环境无显著差异,但开发者满意度更高,并指出需改进VR交互界面。
2023-11-29 cs.HC cs.SE
Enhancing Patient Acceptance of Robotic Ultrasound through Conversational Virtual Agent and Immersive Visualizations
本文提出将大语言模型驱动的对话式虚拟代理与三种混合现实可视化结合,用于引导机器人超声操作,并通过用户研究验证其能显著提升患者的信任与接受度。
2025-02-14 cs.HC