Million.js: A Fast Compiler-Augmented Virtual DOM for the Web
使用声明性JavaScript用户界面(UI)库创建的交互式Web应用程序越来越多地主导了现代互联网。然而,现有的库主要用于运行时执行,并依赖于用户加载和呈现Web应用程序。这促使我们创建了Million.js,这是一个用于Web的快速编译器增强的虚拟文档对象模型(DOM)。Million.js通过创建一个编译器来在用户访问页面之前计算Web应用程序的交互区域,从而减少了加载时间和交互时间。虚拟DOM运行时通过编译器标志、计算优先级、调度和反应数据原语来优化交互式内容,以实现最佳性能。当与最流行的虚拟DOM库进行基准测试时,Million.js的渲染速度提高了133%到300%,加载速度提高了2347%。在具有比较基准和非正式用户研究的真实Web应用程序中,Million.js在从React迁移后加载速度提高了35.11%。研究结果表明,通过使用Million.js的JavaScript UI库,Web应用程序有可能快几个数量级。
2023-01-01 cs.HC
Interactive Augmented Reality-enabled Outdoor Scene Visualization For Enhanced Real-time Disaster Response
Harokopio University of Athens(哈罗基皮奥雅典大学);Archimedes, Athena Research Center(阿基米德,雅典研究中心);Kingston University(金斯顿大学);University of Western Macedonia(西马其顿大学)
本文提出了一种基于3DGS的交互式AR界面,用于提升实时灾害响应中的场景可视化与决策效率。
2026-02-25 cs.HC
ARCollab: Towards Multi-User Interactive Cardiovascular Surgical Planning in Mobile Augmented Reality
ARCollab是一款iOS AR应用,通过多用户共享环境交互患者特定3D心脏模型,实现无需物理模型的协作式心血管手术规划,利用iOS设备普及性推动实际应用。
2024-02-07 cs.HC
SelectVisAR: Selective Visualisation of Virtual Environments in Augmented Reality
当在虚拟现实用户和增强现实用户之间建立视觉连接时,重要的是考虑增强现实用户是否面临信息过剩。与虚拟现实相比,增强现实涉及两个而不是一个信息平面:物理和虚拟。我们提出了选择VisAR,选择性可视化系统的虚拟环境中的增强现实。我们的系统使一个增强现实观众感知协同定位的虚拟现实用户在四个不同的可视化条件的上下文中:互动,接近,一切,和玩偶之家。我们在后续研究中探索了另外两个条件,上下文和聚光灯。我们的设计使用以人为中心的方法来进行信息过滤,选择性地只可视化与虚拟现实用户的交互可能性相关的虚拟环境的一部分。本研究探讨如何选择性的可视化可以是有益的或微不足道的增强现实用户观察时,虚拟现实用户。
2021-05-04 cs.HC
Personal Augmented Reality for Information Visualization on Large Interactive Displays
在这项工作中,我们提出了结合大型交互式显示器与个人头戴式增强现实(AR)的信息可视化,以促进数据的探索和分析。尽管大型显示器提供了更多的显示空间,但它们在感知、有效的多用户支持以及管理数据密度和复杂性方面具有挑战性。为了解决这些问题并说明我们提出的设置,我们贡献了一个广泛的设计空间,首先包括AR空间中显示,可视化和对象的空间对齐。接下来,我们讨论可视化的哪些部分可以增强。最后,我们分析了如何使用AR来显示个人视图,以显示额外的信息,并最大限度地减少数据分析师的相互干扰。基于这个概念的基础上,我们提出了一些示例性的技术扩展与AR可视化,并讨论他们的关系,我们的设计空间。我们进一步描述了这些技术如何解决典型的可视化问题,我们已经确定在我们的文献研究。为了研究我们的概念,我们介绍了一个通用的AR可视化框架以及实现几个示例技术的原型。为了展示它们的潜力,我们进一步提出了一个用例演练,在其中我们分析了一个电影数据集。从这些经验中,我们得出结论,贡献的技术可以是有用的,在探索和理解多元数据。我们相信,使用AR扩展大型显示器以实现信息可视化,在数据分析和意义构建方面具有巨大的潜力。
2020-10-19 cs.HC
Augmented Physics: Creating Interactive and Embedded Physics Simulations from Static Textbook Diagrams
University of Calgary(卡尔加里大学);Texas A&M University(德克萨斯农工大学);Adobe Research(奥多比研究院);University of Colorado Boulder(科罗拉多大学博尔德分校)
本文提出增强物理(Augmented Physics)工具,利用计算机视觉和多模态大语言模型从静态物理教科书图表半自动生成嵌入式交互模拟,并通过教师研究、可用性测试和专家访谈验证其在物理教育中的有效性。
2024-08-10 cs.CV cs.HC cs.LG
SPICA: Interactive Video Content Exploration through Augmented Audio Descriptions for Blind or Low-Vision Viewers
SPICA是一个AI驱动的系统,通过交互式帧字幕导航、空间音效和物体描述增强音频描述,使盲人或低视力用户能够更灵活、沉浸地探索视频内容,无需额外人工标注。
2024-02-27 cs.HC cs.MM
Substituting Restorative Benefits of Being Outdoors through Interactive Augmented Spatial Soundscapes
Indiana University Bloomington(印第安纳大学伯明顿分校);University of Denver(丹佛大学)
老年抑郁症是一种常见的心理健康状况,影响美国大多数老年人。根据注意力恢复理论(ART),参与户外活动可以减少抑郁症并提供恢复性益处。然而,许多患有抑郁症的老年人,特别是那些在组织环境中接受护理的老年人,对户外自然环境的感官体验较少。这通常是由于他们的身体或认知能力有限,以及缺乏支持户外活动的组织资源。为了解决这个问题,我们计划研究技术如何通过增强空间自然音景将户外的恢复效益带到室内环境中。因此,我们提出了一个采访和观察为基础的研究,在辅助生活设施,以评估如何增强声景替代户外恢复,社会和体验的好处。我们的目标是将这些研究结果整合到一个最低限度的侵入性和直观的设计的交互式增强音景,室内组织护理设置。
2020-07-28 cs.CY cs.HC cs.RO
Teachable Reality: Prototyping Tangible Augmented Reality with Everyday Objects by Leveraging Interactive Machine Teaching
IIIT-Delhi(德里英迪拉甘地信息技术学院);University of Calgary(卡尔加里大学)
本文介绍了可教现实,一个增强现实(AR)的原型工具,用于创建交互式的有形AR应用程序与任意的日常对象。Teachable Reality利用基于视觉的交互式机器教学(例如,Teachable Machine),它可以捕捉真实世界的交互,用于AR原型设计。它使用按需计算机视觉模型识别用户定义的有形和手势交互。在此基础上,用户可以轻松创建功能性AR原型,而无需编程,并通过一个用户操作创作界面实现。因此,我们的方法允许有形AR应用程序的灵活性,可定制性和通用性,可以解决当前基于标记的方法的局限性。我们探索设计空间并展示各种AR原型,其中包括有形和可变形的界面,上下文感知助手和身体驱动的AR应用程序。我们的用户研究和专家访谈的结果证实,我们的方法可以降低创建功能性AR原型的障碍,同时还可以实现灵活和通用的原型设计体验。
2023-02-21 cs.CV cs.HC cs.LG
ARAIDA: Analogical Reasoning-Augmented Interactive Data Annotation
Pompeu Fabra University(庞培法布拉大学);National University of Singapore(新加坡国立大学);Sichuan University(四川大学)
本文提出Araida,一种基于类比推理的交互式数据标注方法,通过错误感知策略动态协调标注模型与KNN模型,有效提升自动标注准确率,平均减少11.02%的人工修改负担。
2024-06-01 cs.CL cs.HC
CoAug-MR: An MR-based Interactive Office Workstation Design System via Augmented Multi-Person Collaboration
使用3D建模和数字人体模型的数字原型设计和评估对于根据用户偏好定制产品变得越来越实用。然而,3D建模对于普通用户来说不太容易获得,并且数字人体模型遭受身体数据不足以及人们如何使用产品或产品如何适应他们身体的不直观说明。近年来,基于虚拟现实技术的“Do It Yourself”设计通过捕捉用户的姿势,实现了实时的人机工程学评估,但缺乏可靠性和设计质量。在本文中,我们探讨了一种多人交互式设计方法,使设计师,用户,甚至人体工学家合作,以实现有效和可靠的设计和原型任务。利用Hololens和运动跟踪设备的混合现实已经开发出来,以提供即时的设计反馈和评估,并在物理空间中体验原型设计。我们评估系统的可用性研究的基础上,休闲用户和设计师从事的互动过程中的设计项目的身体信息,偏好和环境。
2020-05-22 cs.GR cs.HC
SketchMeHow: Interactive Projection Guided Task Instruction with User Sketches
在这项工作中,我们提出了一个交互式通用教学框架SketchMeHow指导普通用户实时完成日常任务。与传统的基于增强现实的教学系统相比,该框架利用用户草图作为系统输入,从绘图界面获取用户的生产意图。给定用户草图,可以基于每个任务的子任务划分和空间定位来分析指定的任务指令。采用投影仪-摄像机系统,利用空间增强现实技术对终端用户进行投影引导。为了验证所提出的框架,我们进行了多米诺骨牌安排和便当生产的两个案例研究。从我们的用户研究,建议的系统可以帮助新手用户完成任务,有效地与用户满意度。我们相信所提出的SketchMeHow可以拓宽基于草图的现实世界应用在人机交互的研究课题。
2021-09-07 cs.HC
RAG Without the Lag: Interactive Debugging for Retrieval-Augmented Generation Pipelines
University of Pittsburgh(匹兹堡大学);UC Berkeley(加州大学伯克利分校)
针对RAG管道开发中组件交织难定位错误、参数更改预处理慢的问题,提出结合可组合RAG原语Python库与实时调试界面的RAGGY工具,贡献其设计实现、专家调试模式见解及未来RAG工具设计启示。
2025-04-18 cs.AI cs.HC
GesPlayer: Using Augmented Gestures to Empower Video Players
在本文中,我们介绍了GesPlayer,一个基于手势的授权视频播放器,探讨用户如何通过手势体验他们的手作为一个界面。我们提供了三种基于计算机或其他智能设备的摄像头的语义手势,分别用于检测和调整视频播放进度、音量和屏幕亮度。我们的目标是使用户能够通过他们在空中的手势来控制视频播放,而不需要使用鼠标或键盘,特别是当这样做不方便时。最终,我们希望通过理解将手设计为交互界面的包容性来扩展我们对基于手势的交互的理解,并通过计算交互方法进一步拓宽交互环境中语义手势的状态。
2022-10-21 cs.HC
Changing the Optics: Comparing Traditional and Retrieval-Augmented GenAI E-Tutorials in Interdisciplinary Learning
Temple University(天普大学);Rutgers University–New Brunswick(罗格斯大学新不伦瑞克分校)
本文比较了传统和检索增强型生成式AI e教程在跨学科学习中的信息寻求行为差异,发现生成式AI教程能降低认知负荷并促进探索性学习。
2026-02-24 cs.HC
Meta-Objects: Interactive and Multisensory Virtual Objects Learned from the Real World for Use in Augmented Reality
本研究提出meta-object新一代虚拟对象概念,整合三大核心组件,通过可穿戴AR/VR设备实现后元宇宙中跨时空的虚实无缝交互,推动变革性虚实融合发展。
2025-03-25 cs.ET cs.HC
Procedural animations in interactive art experiences -- A state of the art review
艺术评论的状态广泛地监督使用的新的研究,用于创建应用于交互式艺术体验的虚拟环境,特别关注程序动画在空间增强现实(SAR)展览的应用。这些艺术展览经常结合感官展示,吸引,取代和增强视觉,听觉和触觉或触觉。我们分析和分解了过去三年中与艺术技术相关的创新,并在回顾众多装置应用、研究和活动时,彻底确定了互动艺术体验的最新和最具活力的应用。虚拟现实、增强现实、混合现实和机器人技术等显示媒体在视觉艺术博物馆、公园或历史遗址游览、现场音乐会和剧院等艺术体验的背景下进行了概述。我们探索研究,并推断最近的创新如何导致未来将看到的不同应用。
2021-05-16 cs.HC cs.MM
User Guidance for Interactive Camera Calibration
对于构建增强现实(AR)流水线,最关键的一步是摄像机校准,因为整体质量在很大程度上取决于它。而摄像机校准本身受摄像机到图案姿势选择的影响最大-但目前只有很少的研究引导用户到特定的姿势。我们建立在我们的新的相机校准框架,能够实时生成校准姿势,并提出了一个用户研究评估不同的可视化方法,以指导用户的目标姿势。使用所提出的方法,即使是新用户也能够在大约2分钟内执行精确的相机校准。
2019-07-09 cs.HC
Interactive Multi-User 3D Visual Analytics in Augmented Reality
本出版物报告了一个研究项目,在该项目中,我们着手探索增强现实(AR)技术对视觉数据分析的优势和劣势。我们开发了一个AR数据分析应用程序的原型,它为用户提供了一个交互式3D界面,基于手势的控制和多用户支持的共享体验,使多个人能够协同可视化,分析和操纵数据与3D空间中的高维特征。我们的软件原型名为DataCube,运行在Microsoft HoloLens上-这是第一款真正的独立AR耳机之一,通过它,用户可以看到计算机生成的图像覆盖在用户物理环境中的真实物体上。使用手势,用户可以选择菜单选项,通过各种过滤和可视化功能控制3D数据可视化,并在其环境中自由安排各种菜单和虚拟显示。共享的多用户体验允许所有参与的用户看到虚拟环境并与虚拟环境交互,一个用户做出的改变将立即对其他用户可见。当用户一起参与时,他们不受限制地同时观察物理世界,因此他们也可以看到非语言线索,例如物理环境中其他用户的手势或面部反应。该研究项目的主要目标是找出AR接口和协作分析是否可以为数据分析任务提供有效的解决方案,我们的原型系统的经验证实了这一点。
2020-02-13 cs.HC cs.MM
FluxLab: Creating 3D Printable Shape-Changing Devices with Integrated Deformation Sensing
University of Texas at Dallas(达拉斯大学);Purdue University(普渡大学);Florida State University(佛罗里达州立大学)
FluxLab通过集成变形传感的3D打印结构,实现可变形设备的设计与打印,支持自定义模型和消费级打印机应用。
2026-02-02 cs.HC
ProgrammableGrass: A Shape-Changing Artificial Grass Display Adapted for Dynamic and Interactive Display Features
针对现有草皮显示技术无法实现8位流畅动画、分辨率不可调的问题,提出可拼接的ProgrammableGrass人造草皮显示器,通过比例微分控制与校准系统实现8位色阶线性调控,可显示流畅动画,为绿色交互式景观显示提供新方案。
2024-03-19 cs.GR cs.HC
Augmented Library: Toward Enriching Physical Library Experience Using HMD-Based Augmented Reality
本文提出基于 HMD 的 AR 系统 Augmented Library,通过图书发现、社区参与和个性化交互功能融合数字便利与实体图书馆体验,并依据初步用户反馈评估其对学生参与的影响。
2024-08-12 cs.HC
Eliot: Interactively $\underline{E}$xploring Fast-Changing Scientific $\underline{Li}$terature Trends with $\underline{O}$nline Da$\underline{t}$a and Learning
University of South Carolina(南卡罗来纳大学)
提出Eliot系统,通过查询时聚类和时间可视化,帮助研究人员可追溯地探索快速变化的科学文献趋势。
2026-05-26 cs.AI cs.HC cs.IR
Understanding User Needs for Injury Recovery with Augmented Reality
本文通过访谈六名物理治疗患者,提出了整合增强现实与身体运动数据的设计考量,以解决居家物理治疗依从性与准确性问题,并识别关键挑战及未来可视化设计变量。
2024-10-09 cs.HC
Introspectibles: Tangible Interaction to Foster Introspection
数字设备现在无处不在,有可能被用来支持人类生活的积极变化和促进心理健康。本文介绍了三个互动系统,我们创建专注于内省活动,利用有形的互动和空间增强现实。更具体地说,我们描述了拟人增强化身,显示用户的内部状态使用生理传感器。我们还提出了一个增强沙箱的第一个原型,专门用于促进正念活动。
2016-03-15 cs.HC
A True AR Authoring Tool for Interactive Virtual Museums
在这项工作中,一个新的和创新的空间计算的方式,最近出现在书目称为真正的增强现实(AR),在文化遗产保护。未来的虚拟博物馆可以采用这种创新来提高体验质量。它强调了这样一个事实,即参观者第一眼无法判断他/她正在看的人工制品是否真实,并期望引起参观者的兴趣。真正的AR不仅限于人工制品,甚至还扩展到建筑物或真人大小的雕像角色模拟。它提供了最好的视觉质量,使用户无法区分真实的物体和增强的物体。这样的应用对未来的博物馆是有益的,因为使用True AR,可以重建各种展品、纪念碑、雕像、人物和建筑物的3D模型,并以逼真和创新的方式呈现给游客。我们还提出了我们的虚拟现实示例应用程序,一个真正的AR游乐场,具有基本组件和工具,用于生成交互式虚拟博物馆应用程序,以及一个3D重建的字符(阿西努教堂的牧师),方便讲故事的增强体验。
2019-10-21 cs.GR cs.HC
Towards Commodity, Web-Based Augmented Reality Applications for Research and Education in Chemistry and Structural Biology
这篇文章报告了原型网络应用程序,使用商品,开源技术的增强和虚拟现实提供沉浸式,交互式人机界面的化学,结构生物学和相关学科。这些示例可以在任何标准的Web浏览器中运行,并可以在https://lucianoabriata.altervista.org/jsinscience/arjs/armodeling/上与演示视频一起访问,展示了可以远远超出教学的应用程序,即在研究环境中推进实际效用:在交互式沉浸式3D中的原子和粗粒度级别的分子可视化,分子物理和化学的粗粒度建模,以及实验观测值的实时计算和实验数据的叠加。从这个操场上,我描绘了这些新兴技术在未来如何与基于神经网络的量子力学计算、高级形式的人机交互(如基于语音的通信)以及通过互联网进行并发协作的套接字(所有这些技术今天都在Web浏览器中成熟)相结合的前景,以提供下一代真正交互的工具,沉浸式分子建模,可以用计算机的数字处理能力来简化人类的思想和意图。
2018-08-10 cs.ET cs.HC cs.MM
Implementation of Augmented Reality as an Educational Tool for Practice in Early Childhood
UIN Sunan Gunung Djati Bandung(乌因·苏南·贡多迪蒂帕蒂万隆大学)
本研究通过增强现实技术开发洗手学习应用,提升幼儿对礼拜程序的理解和学习兴趣。
2025-12-19 cs.HC q-fin.CP
Forte: An Interactive Visual Analytic Tool for Trust-Augmented Net Load Forecasting
New Jersey Institute of Technology(新泽西理工学院);Pacific Northwest National Laboratory(西北太平洋国家实验室);Lawrence Livermore National Laboratory(劳伦斯利弗莫尔国家实验室)
针对净负荷预测模型性能评估难、用户信任度不足的问题,本文提出可视分析工具Forte,支持探索深度概率预测模型在不同输入下的表现,通过可视化模拟场景提供洞见,提升预测信任度与电网能力。
2023-11-10 cs.AI cs.HC cs.LG
Exploring Text Selection in Augmented Reality Systems
文本选择是所有交互系统中文本交互过程中的一项基本活动。随着增强现实(AR)盔装显示器(HMD)变得越来越普遍,它们将需要为文本选择提供有效的交互技术,以确保用户可以完成一系列文本操作任务(例如,突出显示、复制和粘贴文本、发送即时消息以及浏览web)。作为一个相对较新的平台,AR中的文本选择在很大程度上尚未被探索,并且当前AR HMD支持的交互技术对于文本选择任务的适用性尚不清楚。本研究旨在填补这一空白,并报告了一项有12名参与者的实验,该实验比较了四种可能的技术(手+捏,手+驻留,头+捏和头+驻留)的性能和可用性(用户体验和工作负载)。我们的研究结果表明,头+住应该是默认的选择技术,因为它是相对较快的,具有最低的出错率和工作量,并具有最高的用户体验和社会接受度。
2022-12-29 cs.HC
Investigating the Design Considerations for Integrating Text-to-Image Generative AI within Augmented Reality Environments
本文基于十位专家焦点小组访谈的设计见解,提出一个包含系列标准和原型流程的设计空间,以帮助从业者评估在增强现实环境中集成文本到图像生成式人工智能的适宜性,并描绘其潜在应用。
2024-07-22 cs.HC
An Augmented Reality Interaction Interface for Autonomous Drone
Hong Kong University of Science and Technology(香港科技大学)
自主导航中的人机交互包括空间交互任务,包括从无人机和人类期望的目标位置重建3D地图。增强现实(AR)设备可以是用于处理这些空间交互的强大交互工具。在这项工作中,我们构建了一个AR界面,可以在操作员面前的物理表面上显示无人机重建的3D地图。通过直观的头部凝视和手势,可以在3D地图上进一步设置空间目标位置。AR界面被部署为与自主无人机进行交互,以探索未知的环境。进一步进行用户研究,以评估整体交互性能。
2020-08-05 cs.HC cs.RO
Interactive digital storytelling: bringing cultural heritage in a classroom
交互式数字讲故事在许多领域成为信息呈现的流行选择。它的应用范围从媒体行业和商业信息可视化,到数字文化遗产,严肃游戏,教育,到当代戏剧和视觉艺术。这种形式的多媒体演示在教育中的好处是公认的,并进行了一些研究探索和支持的意见。除了讨论好处之外,我们还想解决在课堂上引入交互式数字讲故事和严肃游戏的挑战。由于教育和娱乐的对立特征,寓教于乐的固有模糊性的挑战随着多学科团队成员的不同观点而增强。我们特别讨论了艺术自由的对立观点,一方面,技术限制和历史事实,另一方面。在本文中,我们提出了与这些问题有关的第一个调查结果,并在这方面展开进一步的讨论。
2020-10-14 cs.GR cs.HC
Factually: Exploring Wearable Fact-Checking for Augmented Truth Discernment
本文提出Factually,一种集成于可穿戴设备的主动式事实核查系统,通过振动反馈实时提醒错误信息,以增强用户的批判性思维和真相辨别能力。
2025-04-24 cs.ET cs.HC
Using technology of augmented reality in a mobile-based learning environment of the higher educational institution
增强现实概念的定义是基于对科学出版物的分析。值得注意的是,增强现实的在线实验为学生提供了通过改变参数来观察和描述真实系统的操作的机会,并且还部分地用增强现实的对象替换实验装置。考虑了增强现实的实现方案。强调了在物理教学中使用增强现实对象的可能性。它表明,增强现实工具的使用可以增加研究的真实性;提供情感和认知体验,有助于吸引学生进行系统的培训;在实验过程中提供有关安装的正确信息;在学习过程中创建表示真实对象的新方法。
2018-07-23 cs.CY cs.HC physics.ed-ph
Physical and Augmented Reality based Playful Activities for Refresher Training of ASHA Workers in India
Indian Institute of Technology Bombay(印度理工学院孟买分校)
本文开发了两种复习培训工具,通过物理和增强现实卡牌游戏提升ASHA工作者对儿童免疫接种计划的理解和记忆,发现增强现实游戏在学习效果和知识保留方面更优。
2026-04-21 cs.CY cs.HC
Investigating the Ways in Which Mobile Phone Images with Open-Source Data Can Be Used to Create an Augmented Virtual Environment (AVE)
本文提出一种融合手机图像与开源地理空间数据构建增强虚拟环境的交互系统,利用Python与Unity实现数据处理与3D可视化,初步评估表明其能准确还原真实场景并提升用户的情境理解能力。
2025-09-17 cs.CY cs.GR cs.HC
Augmented Reality and Robotics: A Survey and Taxonomy for AR-enhanced Human-Robot Interaction and Robotic Interfaces
University of Calgary(卡尔加里大学);University College London(伦敦大学学院)
本文基于对460篇研究论文的调查,对增强现实和机器人技术进行了分类。增强和混合现实(AR/MR)已经成为增强人机交互(HRI)和机器人接口(例如,致动的和形状改变的界面)。最近,越来越多的HCI、HRI和机器人研究已经证明了AR如何实现人与机器人之间更好的交互。然而,研究往往仍然集中在个人的探索和关键的设计策略,研究问题很少进行系统的分析。在本文中,我们综合和分类这一研究领域在以下方面:1)增强现实的方法; 2)机器人的特点; 3)目的和好处; 4)分类的信息; 5)设计组件和策略的视觉增强; 6)交互技术和方式; 7)应用领域;和8)评估策略。我们制定了关键的挑战和机遇,以指导和通知未来的研究在AR和机器人。
2022-03-07 cs.CV cs.HC cs.RO