Human Factors in Immersive Analytics
TU Wien(维也纳工业大学);Monash University(蒙纳士大学);Simon Fraser University(西蒙菲莎大学);HKUST (Guangzhou)(香港科技大学(广州));University of New South Wales(新南威尔士大学)
本文探讨沉浸式分析中的人因因素,旨在建立评估标准实践,提升系统在无处不在应用中的接受度。
2026-01-16 cs.HC
DP-LENS: A Density-Aware Polyfocal Lens with Topology-Driven Auto-Routing for Occlusion Management in Immersive 3D Analytics
The Hong Kong Polytechnic University(香港理工大学)
该研究针对沉浸式3D分析中数据遮挡导致的高认知负荷问题,提出带拓扑驱动自动路由的DP-LENS系统,结合LLM语音交互,经用户验证可降低负荷、提升效率,为相关系统设计提供启示。
2026-07-31 cs.HC
Ambient Analytics: Calm Technology for Immersive Visualization and Sensemaking
Aarhus University(奥胡斯大学);University of Stuttgart(斯图加特大学);Graz University of Technology(格拉茨工业大学)
本文探讨了通过增强现实将数据可视化无缝融入日常生活的可能性,从视觉分析发展到环境分析,强调减少认知负荷的平静技术。
2026-02-23 cs.HC
I Did Not Notice: A Comparison of Immersive Analytics with Augmented and Virtual Reality
本研究比较 AR 与 VR 对定量沉浸式分析意义建构的影响,发现两者性能相当,但 VR 认知负荷容忍度更高、AR 移动更远,建议支持环境切换。
2024-04-04 cs.HC
Towards Anatomy Education with Generative AI-based Virtual Assistants in Immersive Virtual Reality Environments
本文构建集成生成式AI具身虚拟助手的VR解剖学习环境,并通过16人被试内试点研究比较化身与屏幕配置在不同认知复杂度问题中的效果。
2024-01-24 cs.HC
What elements should we focus when designing immersive virtual nature? A preliminary user study
本研究通过在线调查和设计实验识别沉浸式虚拟自然中促进放松的关键元素,提出设计策略并开发场景验证,旨在为HCI设计师创建恢复性虚拟场景提供指导。
2025-03-28 cs.HC
Just stop doing everything for now!: Understanding security attacks in remote collaborative mixed reality
本文研究了远程协作混合现实中的安全攻击,通过在Microsoft HoloLens 2上实施多种攻击发现用户对沉浸式攻击识别率较低,强调了培训用户和加强安全措施的重要性。
2025-01-27 cs.HC
Predicting cognitive load in immersive driving scenarios with a hybrid CNN-RNN model
Institute for Intelligent Systems Research and Innovation(智能系统研究与创新研究所);Faculty of Computing and Information Technology (FoCIT)(计算与信息科技学院);Swinburne University of Technology(斯威丁大学)
本文提出混合CNN-RNN模型,通过融合fNIRS、眼动追踪和驾驶行为数据,准确预测三种认知负荷水平,提升预测精度。
2026-06-23 cs.HC cs.LG
Immersion for AI: Immersive Learning with Artificial Intelligence
LEAD, CIAC, CEG, Deleg. Coimbra, Universidade Aberta(葡萄牙开放大学);INESC TEC(INESC TEC 研究所)
本研究从AI视角反思沉浸感内涵,基于沉浸式学习理论的系统、叙事、能动性三维度重新解读AI,梳理AI作为参与者的学习环境设计启示,为开发可进化的AI及理解其在人机认知生态中的角色奠定基础。
2025-02-05 cs.AI cs.HC q-bio.NC
Guidelines for the Development of Immersive Virtual Reality Software for Cognitive Neuroscience and Neuropsychology: The Development of Virtual Reality Everyday Assessment Lab (VR-EAL)
虚拟现实(VR)盔装显示器(HMD)是一种有效的研究工具,可以解决神经心理测试中的生态效度问题。然而,它们的广泛实施受到VR诱导症状和影响(VRISE)以及缺乏VR软件开发技能的阻碍。本研究通过描述和讨论沉浸式VR中的第一个神经心理电池虚拟现实日常评估实验室(VR-EAL)的发展阶段,为认知神经科学和神经心理学中的VR软件的开发提供了指导方针。在一个现实的故事情节的认知功能评估技术进行了讨论。Unity中各种资产的实用性,软件开发工具包和其他软件被描述,以便认知科学家可以克服与VRISE和VR软件质量相关的挑战。此外,本试点研究试图根据研究目的的VR软件的必要标准评估VR-EAL。VR神经科学问卷(VRNQ; Kourtesis等人,2019年b),从用户体验、游戏机制、游戏内辅助和VRISE方面对VR-EAL的三个版本进行了质量评估。25名年龄在20至45岁之间,接受过12-16年全日制教育的参与者评估了各种版本的VR-EAL。VR-EAL的最终版本在VRNQ的每个分项得分中都获得了高分,并超过了其吝啬的截止值。它似乎也有更好的游戏内辅助和游戏机制,而其改进的图形大大提高了用户体验的质量,几乎根除了VRISE。结果基本上支持了在60分钟VR会话期间不存在VRISE的情况下开发有效的VR研究和临床软件的可行性。
2021-01-20 cs.CY cs.HC cs.MM
Behavioral analysis in immersive learning environments: A systematic literature review and research agenda
本文提出整合学习需求、规格、评估与迭代的概念框架,并基于40篇文献进行系统综述,揭示沉浸式学习环境中行为分析的教学需求、实施维度、模式差异及挑战,并提出未来研究议程。
2024-05-06 cs.HC
From 2D Document Interactions into Immersive Information Experience: An Example-Based Design by Augmenting Content, Spatializing Placement, Enriching Long-Term Interactions, and Simplifying Content Creations
本研究针对平面界面下文档处理的认知局限,提出利用 VR、MR、语音助手和生成式 AI 等新兴技术,通过增强内容、空间化放置、丰富长期交互与简化创作,将 2D 文档交互转化为沉浸式信息体验。
2024-11-17 cs.HC
Actionable Guidance Outperforms Map and Compass Cues in Demanding Immersive VR Wayfinding
University of California, Santa Barbara(加州大学圣塔芭芭拉分校)
本文比较了三种VR导航技术:方向箭头、迷你地图和指南针,发现箭头指导在导航性能上最佳,提示在沉浸式导航中直接转化为行动提示的界面更有效。
2026-07-22 cs.HC
LitForager: Exploring Multimodal Literature Foraging Strategies in Immersive Sensemaking
针对沉浸式环境中文献信息搜寻阶段研究不足的问题,本文提出 LitForager 工具,利用 WebXR、网络可视化和多模态交互在三维文献网络中支持探索引导与空间组织,并通过用户研究验证其有效性。
2025-08-20 cs.HC
Predictors of the Sense of Presence in an Immersive Audio Storytelling Experience, a Mixed Methods Study. PREPRINT
本研究通过混合方法考察沉浸式音频叙事中临场感的预测因素,发现音频质量、认知投入和叙事是主要预测变量,情感投入获得部分支持,而环境、沉浸技术及个人特征影响有限或未获支持。
2024-06-09 cs.ET cs.HC
Epistemological approach in immersive virtual environments and the neurophysiology learning process
目前,虚拟现实(VR)在培训过程中的使用正在增加,因为它们在基于视觉信息的学习过程中非常有用。虚拟环境中的信息是通过视觉、听觉和触觉来感知的,但是这些刺激对大脑的振荡活动(例如信息的处理、传播和同步)的关系或影响仍然需要建立与注意力的认知负荷的关系。因此,本研究旨在通过文献回顾和当前的研究议程,通过视觉信息的分析,沉浸式虚拟环境和学习过程的神经生理学之间存在的关系,确定建议的认识论基础。本研究建议的维度模型由信息处理理论和Kolb学习模型组成,信息处理理论允许通过信息管理将刺激与注意力、感知和存储的使用结合起来,Kolb学习模型将信息的感知和处理定义为学习维度。关于学习的神经生理学,文献已经建立了信息处理过程中前额叶皮层和工作记忆之间的联系。在这项研究中讨论的挑战和进展是基于确定的结构(收入刺激,信息管理和认知处理)和建立一个研究议程,如何确定必要的指标来衡量记忆和注意力在虚拟沉浸环境之间的关系。
2019-08-04 cs.HC q-bio.NC
To Slide or Not to Slide: Exploring Techniques for Comparing Immersive Videos
University of Waterloo(滑铁卢大学);Georgia Institute of Technology(佐治亚理工学院)
本文提出了一种基于滑动的沉浸式视频比较技术,通过在VR和2D环境中实现多种比较方法,探索了不同交互技术对用户感知和工作流程的影响,并发现滑动方法在灵活性和用户偏好上表现最佳。
2026-02-22 cs.HC
Holoview: An Immersive Mixed-Reality Visualization System for Anatomical Education
本文提出Holoview,一个支持沉浸式交互学习的AR系统,通过手势探索体积解剖数据并采用轻量级架构优化HoloLens实时性能,用户研究表明其在解剖学教育中显著提升知识水平和理解信心。
2025-07-14 cs.GR cs.HC
The Impact of Navigation on Proxemics in an Immersive Virtual Environment with Conversational Agents
Trinity College Dublin(都柏林三一学院);University of Utah(犹他大学);Roblox Corp.(罗布乐思公司)
研究探讨了在沉浸式虚拟环境中,导航方式对人际距离的影响,发现 teleportation 使参与者与对话代理保持更近的距离,且女性与男性在距离上存在差异,自然行走则带来更高的自主感和身体所有权。
2026-04-30 cs.HC
Immersive Technologies in Training and Healthcare: From Space Missions to Psychophysiological Research
本文探讨了VR/AR/XR等沉浸式技术在临床心理学、太空探索和医学教育等高风险领域的应用,展示了其在提升人类表现、训练效果及治疗依从性方面的作用。
2025-06-30 cs.CE cs.HC
Using cognitive agent-based simulation for the evaluation of indoor wayfinding systems
本文提出了一种新的方法来模拟人类的寻路行为,结合视觉认知到一个软件代理的计算机辅助评估的大型基础设施的寻路系统。所提出的方法如下的感官计划法的范例组成的视觉注意力,导航行为和行人运动的模型。感知的随机特征被纳入,以提高开发的寻路模拟的通用性和多样性,以反映各种行为。所提出的方法的有效性进行了评估的基础上收集的经验数据,通过寻路实验与20名参与者在沉浸式虚拟现实环境中使用真人大小的3D复制维也纳的新中央火车站。结果表明,开发的认知代理为基础的模拟提供了进一步的贡献,人类寻路的模拟,随后进一步的步骤,有效的评估工具,规划寻路和标志。
2016-11-08 cs.HC
When Human cognitive modeling meets PINs: User-independent inter-keystroke timing attacks
本文提出了第一个独立于用户的PIN码间定时攻击。我们的攻击方法是基于从人类认知模型,其参数可以由少量的训练数据的任何用户(不一定是目标受害者)的内置定时字典。因此,我们的攻击可能会在现实世界中大规模发起。我们研究了不同在线攻击环境下的跨节点定时攻击,并评估了它们在不同强度水平下对PIN的性能。我们的实验结果表明,所提出的攻击性能显着优于随机猜测攻击。我们进一步证明了我们的攻击对现实世界的应用程序构成了严重的威胁,并提出了各种方法来减轻威胁。
2018-10-17 cs.CR cs.HC
Navigating and Retrieving Information in Immersive Model-Based Design Reviews: An Exploratory Study
Univ. Grenoble Alpes, CNRS, Grenoble INP, G-SCOP(格勒诺布尔阿尔卑斯大学、法国国家科学研究中心、格勒诺布尔理工学院、G-SCOP)
本研究开发了虚拟环境GraphXplore,通过VR分层3D图实现设计评审的信息整合,实验显示其在认知负荷、可用性上优于传统幻灯片设置,为基于模型的设计评审提供了新方案。
2026-08-21 cs.HC
Emotion Based Prediction in the Context of Optimized Trajectory Planning for Immersive Learning
Alliance University(联盟大学)
研究结合 Google Expedition 与触摸屏情绪识别,通过教学应用、可供性和认知负荷评估,证明情绪元素能显著提升沉浸式学习效果并改善 VR/AR 体验。
2024-02-28 cs.CV cs.HC cs.MM
Immersive Technologies in Virtual Companions: A Systematic Literature Review
本综述系统调查了VR、AR和MR沉浸式技术在虚拟伴侣中的应用,从644篇论文中筛选出28篇,发现这些技术尤其在解决社会孤立、认知增强和痴呆护理等方面发挥重要作用,并为未来研究奠定基础。
2023-09-03 cs.HC
Using a Nature-based Virtual Reality Environment for Improving Mood States and Cognitive Engagement in Older Adults: A Mixed-method Feasibility Study
参与自然环境和自然的表征已被证明可以改善老年人的情绪状态并减少认知能力下降。目前的研究评估了使用虚拟现实(VR)呈现沉浸式360度的自然视频和数字设计的互动花园,为此目的。招募了50名具有不同认知和身体能力的参与者(年龄60岁以上)。通过干预前/后调查,干预期间的标准化观察,干预后半结构化访谈收集数据。结果表明,对VR的态度以及情绪和参与的某些方面都有显着改善。不同认知能力的参与者对环境的反应没有显着差异;然而,与无残疾的参与者相比,身体残疾的参与者在某些指标上表现出更强的积极反应。几乎没有负面影响(晕电脑,任务挫折)被发现。在采访中,一些参与者表示抵制技术,特别是数字花园,表示它感觉卡通或没有吸引力,它不能代替真实的自然。然而,大多数人认为,在现实世界中与自然接触并不立即可行的情况下,VR体验可能是一种有益的活动。
2022-01-09 cs.HC
Immersive Virtual Reality Assessments of Working Memory and Psychomotor Skills: A Comparison between Immersive and Non-Immersive Assessments
本研究比较了沉浸式VR与PC在记忆和心理运动技能评估中的表现,发现VR评估具有良好聚合效度、更高用户体验,且较少受年龄和信息技术经验影响,为认知评估提供了更公平的替代平台。
2025-04-10 cs.CY cs.HC
A Perception-Driven Approach To Immersive Remote Telerobotics
Istituto Italiano di Tecnologia (IIT)(意大利理工学院);University of Verona(维罗纳大学);Istituto Nazionale per l’Assicurazione contro gli Infortuni sul Lavoro (INAIL)(意大利国家工伤事故保险局)
虚拟现实(VR)界面越来越多地用作遥操作机器人的远程可视化媒体。通过RGB-D摄像头捕获的远程环境并使用VR界面进行可视化,可以增强操作员的态势感知和存在感。然而,这种方法对可视化3D数据的速度、吞吐量和质量有严格的要求。此外,遥操作机器人要求操作员完全专注于他们的任务,需要很高的感知和认知技能。本文展示了一个正在进行的框架,以解决这些挑战,以人类视觉系统(HVS)为灵感。人眼使用注意力机制从动态环境中选择并吸引用户参与到特定位置。受此启发,该框架实现了将用户的参与吸引到特定位置的功能,同时降低了延迟和带宽要求。
2022-10-11 cs.HC cs.RO
Towards Proactive Defense Against Cyber Cognitive Attacks
本文提出一种预测颠覆性创新及其恶意用途的新方法,以应对网络认知攻击,并制定主动防御策略。
2025-10-17 cs.CR cs.CY cs.HC
Predicting Human Performance in Vertical Hierarchical Menu Selection in Immersive AR Using Hand-gesture and Head-gaze
Concordia University(康考迪亚大学)
当前存在关于设计用于沉浸式增强现实(AR)应用的用户界面(UI)的有限指南。设计师必须反思他们为桌面和移动应用程序设计UI的经验,并推测UI将如何影响AR用户的性能。在这项工作中,我们引入了一个预测模型,用于确定用户的性能为目标UI,而无需随后参与用户研究。该模型使用分层下拉菜单根据参与者对客观性能指标(如消耗的耐力(CE)和指向时间(PT))的反应进行训练。菜单的深度和上下文的大的可变性是通过随机和动态地从词汇数据库WordNet中包含的单词创建分层下拉菜单和相关的用户任务来确保的。在模型训练过程中加入用户的非言语标准成绩WAIS-IV,减少了主观成绩偏差。使用通用语句编码器对菜单的语义信息进行编码。我们提出了一个用户研究的结果表明,所提出的预测模型实现了高精度的预测CE的层次菜单上的用户具有各种认知能力。据我们所知,这是第一个在沉浸式AR应用程序的UI设计中预测CE的工作。
2022-06-19 cs.HC cs.LG
Measuring Cognitive Conflict in Virtual Reality with Feedback-Related Negativity
随着虚拟现实(VR)成为主流平台,设计师们开始尝试新的交互技术来增强用户体验。这是一项具有挑战性的任务,因为设计师不仅要努力提供具有良好性能的设计,还要仔细确保不会破坏用户的沉浸式体验。迫切需要一种新的评估工具,超越传统的定量测量,以帮助设计师在设计过程中。我们提出了一个基于EEG的实验框架,通过测量有意引发的认知冲突来评估VR中的交互技术。通过对反馈相关负性(FRN)以及其他定量测量的分析,该框架允许设计人员评估感兴趣的变量的影响。我们通过将其应用于使用直接3D输入的3D对象选择的基本任务来研究该框架,即在VR中跟踪手。认知冲突是通过操纵目标物体的选择半径来有意引发的。我们的第一个行为实验验证了该框架,与其他经典心理学实验范式中报告的冲突诱导行为调整的发现一致。我们的第二个基于EEG的实验研究了虚拟手出现的影响。我们发现FRN的幅度与虚拟手的真实感水平相关,这与恐怖谷理论一致。
2017-03-16 cs.HC
Perspective-Aware AI in Extended Reality
Flybits Labs(Flybits实验室);Creative Ai Hub(创意人工智能中心);Toronto Metropolitan University(多伦多 Metropolitan 大学);MIT Media Lab(MIT媒体实验室)
针对扩展现实中用户建模浅薄和认知上下文受限的问题,提出PAiR框架,通过集成基于多模态数字足迹的推理型身份模型Chronicles,在闭环系统中连接动态用户状态与沉浸环境,为人机交互开辟新方向。
2025-05-05 cs.AI cs.GR cs.HC
Risk Psychology & Cyber-Attack Tactics
Institute for Creative Technologies, University of Southern California(南加州大学创意技术研究所);Marshall School of Business, University of Southern California(南加州大学马歇尔商学院);Raytheon Technologies(雷神技术公司);Khoury College of Computer Sciences, Northeastern University(东北大学科利计算机学院)
研究发现个体认知差异影响网络攻击行为,认知过程比经验和训练更能驱动技术选择。
2025-10-23 cs.CR cs.HC
Quantifying the Engagement Effectiveness of Cyber Cognitive Attacks: A Behavioral Metric for Disinformation Campaigns
University of Colorado Colorado Springs(科罗拉多大学科罗拉多斯普林斯分校)
本文提出一种加权交互度量框架,量化虚假信息认知攻击的参与有效性,捕捉用户参与的行为深度,为评估和对抗恶意影响提供工具。
2025-10-17 cs.CY cs.HC cs.IT
AI-Powered Immersive Assistance for Interactive Task Execution in Industrial Environments
本研究提出一套基于大语言模型和语音转文本模型的AI驱动沉浸式VR辅助系统,通过提取专家操作的音视频信息提供分步指导,可降低工业场景下的认知负荷、提升效率与安全性。
2024-07-12 cs.HC cs.IR
Quantum-Like Spatial Decision Dynamics: A Falsifiable Model of Cue-Order Effects in Immersive Navigation with Implications for Human-Quantum Computer Interaction
University of Arkansas at Little Rock(阿肯色大学小石城分校)
提出类量子空间决策动力学(QSDD)可证伪模型,用量子映射和测量解释空间线索顺序效应,模拟验证其优于经典模型,并拓展至人-量子计算机交互。
2026-10-07 cs.HC
The Interplay of Attention and Memory in Visual Enumeration
Indian Institute of Science (IISc)(印度科学学院)
本研究通过虚拟现实眼动实验揭示,视觉枚举中任务意图主导表现,语义加工负荷显著影响准确率与记忆,空间布局影响次要。
2025-10-07 cs.HC
Privacy-Preserving Gaze Data Streaming in Immersive Interactive Virtual Reality: Robustness and User Experience
本文针对沉浸式VR中眼动数据隐私问题,提出融合用户体验与任务表现的实时隐私机制评估方法,证明可将重识别准确率降至14%并保持高可用性,同时评估了多种威胁场景下的鲁棒性。
2024-02-21 cs.CR cs.HC
Immersive Virtual Reality Environments for Embodied Learning of Engineering Students
San Jose State University(圣何塞州立大学)
本文提出一种基于Unity 3D和C#的虚拟实验室框架,通过具身学习提升机械和材料工程学生的理解与记忆,实验结果显示比传统VR方法有显著提升。
2025-03-17 cs.CY cs.HC
Towards Effective Human Performance in XR Space Framework based on Real-time Eye Tracking Biofeedback
本文面向 XR Space Framework 设计实时眼动追踪模块,构建融合多模态数据的生物反馈回路,以支持自适应训练、筛查与远程操作应用。
2025-07-28 cs.HC
Exploiting Behavioral Side-Channels in Observation Resilient Cognitive Authentication Schemes
观察弹性认证方案(ORAS)是一类共享秘密的挑战-响应识别方案,其中用户通过认知功能在脑海中计算响应以认证自己,使得窃听者不能轻易地提取秘密。ORAS的安全评估通常涉及量化通过观察到的挑战-响应对泄露的信息。然而,很少有工作评估通过人类行为泄露的信息,而与这些计划进行交互。实现观察弹性的一种常见方法是在认知功能中包含模运算。这最小化了由于从可能的秘密集合到给定响应的多对一映射而泄漏的关于秘密的信息。在这项工作中,我们表明,用户行为可以被用作侧通道,以获得这样的ORAS的秘密。具体地,用户的眼睛运动模式和相关联的定时信息可以推断出是否执行了模数运算(基本设计元素),以泄露关于秘密的信息。我们进一步表明,秘密仍然可以检索,如果演绎是错误的,在实践中更有可能的情况下。我们对待的脆弱性分析,并提出了一个通用的攻击算法,迭代获得的秘密,尽管“错误”的模数信息。我们演示了对五个ORAS的攻击,并表明可以用比非侧信道攻击少得多的挑战-响应对来检索秘密(例如,代数/统计攻击)。特别是,我们的攻击是适用于Mod 10,一次一密的方案,不存在非侧信道攻击。我们通过一个小规模的眼动追踪用户研究来现场测试我们的攻击。
2020-07-22 cs.CR cs.HC
Evaluating Preattentive Features for Detecting Changes in Virtual Environments
Utah State University(犹他州立大学)
该研究探讨了预注意特征在虚拟环境中检测变化中的作用,发现孤立物体更易被检测,而感知分组会阻碍识别。
2026-01-21 cs.HC
Two Explorative Studies on Tangible Augmented Reality for Neurodevelopmental Disorders
University of Applied Sciences Hamm-Lippstadt(哈姆-利普施塔特应用科学大学);Politecnico di Milano(米兰理工大学)
本文通过两项探索性研究评估两个实体增强现实应用(Holomarket和ATOF)在神经发育障碍个体中的可用性与喜爱度,结果表明其具有作为治疗工具的潜力。
2025-10-16 cs.HC
ORCLSim: A System Architecture for Studying Bicyclist and Pedestrian Physiological Behavior Through Immersive Virtual Environments
易受伤害的道路使用者,特别是骑自行车者和行人的伤亡人数正在上升。为了更好地为弱势道路使用者提供设计信息,我们需要进行更多的研究,以评估骑自行车和行人的行为和生理状态在不同的道路设计和环境设置中如何变化。以往的研究突出了沉浸式虚拟环境(IVE)在进行骑自行车和行人的研究的优势。这些环境不会使参与者面临受伤的风险,与道路或自然主义研究相比成本低,并允许研究人员完全控制感兴趣的变量。在本文中,我们提出了一个框架ORCLSim,以支持人类感知技术在IVE评估骑自行车和行人的生理和行为的变化,在不同的背景设置。为了展示这个框架,我们提出了两个案例研究,我们收集和分析试点数据,从五个参与者的生理和行为反应在IVE设置,代表现实世界的路段和交通状况。这些案例研究的结果表明,生理数据对道路环境变化和实时事件敏感,特别是心率和凝视行为的变化。此外,我们的初步数据表明,参与者可能会对各种道路设置做出不同的反应(例如,有或没有交通信号的十字路口)。通过分析这些变化,我们可以确定参与者的压力水平和认知负荷如何受到模拟周围环境的影响。ORCLSim系统架构可进一步用于未来研究用户在不同虚拟现实设置中的行为和生理反应。
2021-12-06 cs.HC cs.MM
Exploring Context-aware and LLM-driven Locomotion for Immersive Virtual Reality
Technical University of Munich(慕尼黑技术大学);Munich Center for Machine Learning(慕尼黑机器学习中心);Human-Centered Technologies for Learning(以人为本的学习技术)
研究提出由大语言模型驱动的移动技术,让用户用自然语言在虚拟环境中导航。通过评估三种移动方法,结合眼动追踪数据分析和标准化问卷,发现该方法有潜力成为可行的免手持替代方案,能促进虚拟空间免手持移动。
2026-07-07 cs.AI cs.HC
Assessment of Human Behavior in Virtual Reality by Eye Tracking
虚拟现实(VR)不是一项新技术,但在计算机技术进步的推动下,它已经发展了几十年。目前,VR技术越来越多地用于实现沉浸式但可控的研究环境的应用程序中。教育和娱乐是两个重要的应用领域,VR被认为是沉浸式体验及其进一步发展的关键推动因素。与此同时,在这种创新环境中对人类行为的研究有望有助于更好地设计VR应用程序。因此,现代VR设备始终配备了眼动追踪技术,从而通过收集过程数据进一步研究人类行为。特别是,眼动跟踪技术与机器学习技术和可解释模型相结合,可以提供新的见解,以便更深入地了解沉浸在虚拟环境中的人类行为。在这项工作中,提出了一个系统的计算框架,基于眼动跟踪和行为用户数据和最先进的机器学习方法,以了解VR环境中的人类行为和个体差异。这个计算框架,然后在两个不同的领域的三个用户研究。在教育领域,创建了两个不同的沉浸式VR教室,学生可以在那里学习,教师可以进行训练。在VR娱乐方面,眼动为从用户认知负荷和用户体验的角度评价VR运动技术开辟了新的途径。这项工作为评估VR场景中的人类行为铺平了道路,并为设计,评估和改进交互式VR系统的方式提供了深刻的见解。特别地,可以创建更有效和可定制的虚拟环境,以向用户提供定制的体验。
2022-11-23 cs.HC
Recognition of Cyber-Intrusion patterns in user cognitive behavioural characteristics for remote identification
本文提出一种基于认知心理学与人工智能的多学科远程认知观察技术,通过在线连接远程获取入侵者认知行为参数以识别网络威胁,旨在为下一代安全在线金融系统开发补充性认知网络安全工具。
2023-12-11 cs.HC
Three-Way Dissection of a Game-CAPTCHA: Automated Attacks, Relay Attacks, and Usability
互联网上现有的验证码解决方案是用户沮丧的主要来源。游戏验证码是一种有趣的,迄今为止,很少有人研究的方法,声称使验证码解决用户的一个有趣的活动。这种验证码的一种广泛形式-称为动态认知游戏(DCG)验证码-挑战用户执行与一系列动态图像交互的类似游戏的认知任务。我们追求的DCG验证码的代表性类别的全面分析。我们正式化,设计和实现这样的验证码,并将它们分解为:(1)全自动攻击,(2)人工求解器中继攻击,以及(3)可用性。我们的研究结果表明,所研究的DCG验证码具有很高的可用性,并且与其他已知的验证码不同,它们对中继攻击具有一定的抵抗力,但它们也容易受到我们新的基于字典的自动攻击。
2013-10-06 cs.CR cs.HC
What is Beyond Presence? Dimensionality, Control, and Information Spaces
Beijing Normal University-Hong Kong Baptist University(北京师范大学-香港浸会大学联合国际学院);BNBU Centre for Computational Culture and Heritage(BNBU计算文化与遗产中心);NVIDIA DLI(英伟达深度学习研究所)
本文提出超越技术维度的沉浸环境框架,通过空间、场所感等维度提升用户体验设计与评估。
2025-12-04 cs.HC cs.MM
TempoCave: Visualizing Dynamic Connectome Datasets to Support Cognitive Behavioral Therapy
我们介绍TempoCave,一种用于分析动态大脑网络或连接体的新型可视化应用程序。TempoCave提供了一系列功能来探索与大脑不同区域的活动模式和模块关联相关的指标。这些模式是通过处理原始数据检索功能性磁共振成像(fMRI)扫描计算的,它在每个大脑区域之间创建了一个加权边缘网络,其中权重表示这些区域同步激活的可能性。特别是,我们支持临床心理学家的分析需求,他们检查这些模块化的联系和加权边缘及其时间动态,利用它们来了解神经系统疾病和大脑活动之间的关系,这可能对患者的诊断和治疗方式产生重大影响。我们总结了TempoCave的核心功能,它支持一系列比较任务,并在桌面模式和沉浸式模式下运行。此外,我们提出了一个真实的用例,分析了一项临床研究中27名受试者的治疗前和治疗后连接组数据集,该研究调查了使用认知行为疗法治疗重度抑郁症,表明TempoCave可以为人类大脑的动态行为提供新的见解。
2019-08-06 cs.HC q-bio.NC
Securing Virtual Reality Experiences: Unveiling and Tackling Cybersickness Attacks with Explainable AI
本文提出针对VR深度学习晕动症检测模型的对抗攻击,并构建XAI引导的检测框架,经数据集、定制仿真测试平台和用户研究验证其攻击危害与防御有效性。
2025-03-17 cs.AI cs.CR cs.ET
The Social and Psychological Impact of Cyber-Attacks
网络攻击已经变得像互联网本身一样普遍。每年,行业报告、媒体和学术文章都会强调这种日益普遍的情况,涵盖攻击和网络犯罪的数量和种类。在这篇文章中,我们试图通过对与网络攻击相关的社会和心理方面的批判性反思,进一步推进关于网络威胁、认知脆弱性和网络心理学的讨论。特别是,我们有兴趣了解公众如何看待和参与风险,以及他们在网络攻击发生期间和之后如何受到影响。这项研究的重点是与理解公众对恶意网络事件的反应相关的关键认知问题,包括风险感知、保护动机、文化和攻击者特征(例如,攻击者身份、目标身份和攻击规模)。为了考虑我们研究结果的适用性,我们调查了过去几年中的两次重大网络攻击,即2017年的WannaCry攻击和同年的WannaCry银行集团攻击。
2019-09-29 cs.CR cs.CY cs.HC
Physics Playground: Insights from a Qualitative-Quantitative Study about VR-Based Learning
本研究评估了沉浸式VR教育应用Physics Playground的设计与教学效果,通过定量与定性结合的实验发现,尽管VR在提升用户满意度上具沉浸优势,但幻灯片在知识提升上略优,为VR融入课堂提供了依据。
2024-12-17 cs.HC physics.ed-ph
Human Brains Can't Detect Fake News: A Neuro-Cognitive Study of Textual Disinformation Susceptibility
Texas A&M University(德州农工大学);The University of Alabama at Birmingham(阿拉巴马大学伯明翰分校)
数字虚假信息(又称“假新闻”)的传播可以说是互联网上最严重的威胁之一,可能会造成大规模的个人和社会伤害。假新闻攻击的易感性取决于互联网用户在阅读后是否认为假新闻文章/片段是合法的。在本文中,我们试图通过神经认知方法深入了解用户对以文本为中心的假新闻攻击的易感性。我们通过EEG研究与假/真新闻相关的神经基础。我们对人类用户进行了一项实验,以彻底调查用户对假/真新闻的感知和认知处理。我们分析了与不同类别的新闻文章的假/真新闻检测任务相关的神经活动。我们的研究结果表明,人类大脑处理假新闻与真新闻的方式可能没有统计学上的显著差异或自动推断的差异,而当人们受到(真实/假)新闻与休息状态,甚至在一些不同类别的假新闻之间观察到显着差异。这一神经认知发现可能有助于证明用户对假新闻攻击的易感性,行为分析也证实了这一点。换句话说,在行为和神经领域,假新闻文章似乎与真实新闻文章几乎无法区分。我们的工作旨在剖析假新闻攻击背后的基本神经现象,并通过人类生物学的限制来解释用户对这些攻击的易感性。我们认为,对于研究人员和从业人员来说,这可能是一个值得注意的见解,表明人工检测假新闻可能是无效的,这也可能对自动检测方法的设计产生不利影响,这些方法主要依赖于人工标记文本文章来构建训练模型。
2022-07-18 cs.CL cs.CR cs.CY