Accessible Data Access and Analysis by People who are Blind or Have Low Vision
本研究旨在开发结合可刷新触觉显示器和对话代理的创新辅助系统,帮助盲人或低视力人群无障碍地探索和分析数据,以解决信息获取与就业机会的公平差距,并推动辅助技术、多模态界面及自然语言处理领域的创新。
2025-06-30 cs.HC
Making Videos Accessible for Blind and Low Vision Users Using a Multimodal Agent Video Player
GOOGLE(谷歌);PARADIGMS OF INTELLIGENCE(智能范式);GOOGLE RESEARCH(谷歌研究院);COMPUTER SCIENCE DEPARTMENT, STANFORD UNIVERSITY(斯坦福大学计算机科学系)
本文提出一种多模态代理视频播放器,通过多层提示编排为视障和低视力用户带来交互式、可访问的视频体验,增强用户自主性和信任感。
2026-02-04 cs.HC
Rethinking Accessible Prototyping Methods for Blind and Visually Impaired Passengers in Highly Automated Vehicles
本文通过两次采用不同原型方式的参与式设计工作坊,探究盲人和视障乘客在高度自动驾驶车辆中的信息需求与非视觉界面设计,并总结可改进的无障碍原型方法。
2025-06-05 cs.HC
TADA: Making Node-link Diagrams Accessible to Blind and Low-Vision People
本文提出基于触摸和音频的平板交互系统TADA,通过音乐音调和语音支持盲人及低视力用户探索节点-链接图,并在25人评估中验证其可用性。
2024-05-06 cs.HC
ADCanvas: Accessible and Conversational Audio Description Authoring for Blind and Low Vision Creators
Carnegie Mellon University(卡内基梅隆大学);Google Research(谷歌研究);Google DeepMind(谷歌DeepMind)
ADCanvas为视障和低视力创作者提供可访问且对话式的音频描述创作工具,通过多模态交互支持端到端的AD创作和视觉问答。
2026-02-06 cs.HC
Iterative Design of An Accessible Crypto Wallet for Blind Users
本研究针对加密钱包的无障碍障碍问题,通过用户研究发现MetaMask的相关问题,经两轮迭代设计和44名用户评估显著提升了其对视障用户的无障碍性,并提出设计启示。
2023-06-09 cs.CR cs.HC
Designing Conversational Multimodal 3D Printed Models with People who are Blind
本研究与视障人士共同设计融合对话界面、触觉振动与触摸的交互式3D打印太阳系模型,经用户评估后提出适配视障用户需求的多模态3D打印模型设计建议。
2023-06-12 cs.HC
Conversational Tactile Data Interfaces: Co-Designing Accessible Data Experiences with Blind Users Using Refreshable Tactile Displays and Conversational AI
Monash University(蒙纳士大学);Yonsei University(延世大学)
研究针对盲人或视力低下者数据可视化问题,通过与盲人共同设计师协同设计,创建结合可刷新触觉显示器与对话代理的CTDI(Graphy系统),贡献设计知识与建议,得出分层展示等关键发现。
2026-07-17 cs.HC
SeeChart: Enabling Accessible Visualizations Through Interactive Natural Language Interface For People with Visual Impairments
基于Web的数据可视化在探索数据和交流见解方面已经变得非常流行。报纸、期刊和报告定期发布可视化内容,用数据讲述引人入胜的故事。不幸的是,大多数可视化是无法访问的读者与视觉障碍。对于网络上的许多图表,没有附带的替代(alt)文本,即使存在这样的文本,它们也不能充分描述图表的重要见解。为了解决这个问题,我们首先采访了15位盲人用户,以了解他们在阅读数据可视化方面的挑战和需求。基于这些采访的见解,我们开发了SeeChart,这是一种交互式工具,可以自动从网页上解构图表,然后将其转换为盲人可访问的可视化,使他们能够听到图表摘要,并使用键盘通过数据点进行交互。我们对14名盲人参与者的评估表明,SeeChart在理解图表中的关键见解和满足他们的信息需求方面具有有效性,同时减少了他们所需的时间和认知负担。
2023-02-15 cs.HC
HoldLight: Making Indoor Climbing More Accessible for Blind and Low-Vision Climbers through Layered Route Preview and Real-Time Next-Hold Guidance
Xi’an Jiaotong-Liverpool University(西交利物浦大学);University of Liverpool(利物浦大学)
HoldLight是一款结合分层路线预览、实时支点提示与不确定性弃权机制的室内攀岩可及性系统,经评估可改善盲人和低视力攀岩者的路线理解,减少对人工支持的依赖。
2026-10-12 cs.HC
FetchAid: Making Parcel Lockers More Accessible to Blind and Low Vision People With Deep-learning Enhanced Touchscreen Guidance, Error-Recovery Mechanism, and AR-based Search Support
FetchAid通过深度学习触摸屏引导、AR音频反馈和错误恢复机制,帮助盲人和低视力人群更高效、更低挫败地使用包裹储物柜,并在12名BLV参与者研究中验证了其有效性。
2024-02-24 cs.HC
Are We There Yet? Assessing Computer-Use Agents for Blind Users' Accessible Interaction with Desktop Applications
Stony Brook University(石溪大学);Old Dominion University(奥多明尼昂大学)
该研究通过三周日记研究评估了OLLA原型及GPT-5等模型对盲用户桌面应用交互的有效性,发现GPT-5成功率达52.5%,同时揭示了CUAs的不足及用户的额外需求。
2026-09-02 cs.AI cs.HC
Making Mobile Augmented Reality Applications Accessible
增强现实(AR)技术在娱乐、游戏、教育、零售和社交媒体领域创造了全新的沉浸式体验。AR内容通常主要是视觉的,并且由于虚拟和现实世界内容的混合,使得能够非视觉地访问它是具有挑战性的。在本文中,我们通过分析现有的iOS移动AR应用程序来识别AR中的常见组成任务,并描述需要可访问替代方案的任务的设计空间。对于每一个主要的任务类别,我们创建了原型无障碍替代品,我们在一项研究中评估了10名盲人参与者,以探索他们对无障碍AR的看法。我们的研究表明,这些原型使AR可以用于盲人用户,并揭示了一些向前发展的见解。我们相信我们的工作不仅为开发人员创建可访问的AR应用程序提供了范例,而且还为未来的研究提供了路线图,使AR全面可用。
2020-10-12 cs.HC
Revamp: Enhancing Accessible Information Seeking Experience of Online Shopping for Blind or Low Vision Users
在线购物已经成为一种有价值的现代便利,但盲人或低视力(BLV)用户仍然面临着使用它的重大挑战,因为:1)不充分的图像描述和2)无法使用屏幕阅读器过滤大量信息。为了应对这些挑战,我们提出了Revamp,一个利用客户评论进行交互式信息检索的系统。Revamp是一个浏览器集成,支持在重建的产品页面上进行基于评论的问答交互。从我们的采访中,我们确定了四个主要方面(颜色,徽标,形状和大小),这些方面对于BLV用户了解产品的视觉外观至关重要。基于这些发现,我们制定了句法规则来提取评论片段,这些评论片段用于生成图像描述和对用户查询的响应。对8名BLV用户的评估表明,Revamp 1)提供了有用的描述性信息,用于理解产品外观,2)帮助参与者有效地定位关键信息。
2021-02-01 cs.HC cs.IR
Toucha11y: Making Inaccessible Public Touchscreens Accessible
University of Maryland(马里兰大学)
Toucha11y 通过机械机器人与手机应用结合,使盲人用户独立操作公共触摸屏信息亭,经技术评估和用户研究验证其有效性。
2023-05-06 cs.HC cs.RO
Dude, Where's My (Autonomous) Car? Defining an Accessible Description Logic for Blind and Low Vision Travelers Using Autonomous Vehicles
The University of Maine(缅因大学);Grand Valley State University(大急流城州立大学);General Motors Global Research & Development(通用汽车全球研发)
本研究通过调查和访谈明确盲人与低视力乘客在自动驾驶汽车行程各阶段的信息需求,提出按导航、进入、退出顺序呈现自然语言描述的结构化框架,以提升其出行独立性与安全性。
2025-10-16 cs.HC
AI for Accessible Education: Personalized Audio-Based Learning for Blind Students
本文提出 Audemy 音频学习平台,利用自适应学习技术为视障学生提供个性化教育,服务超 2000 名学生,并探讨了 AI 教育的伦理与包容性。
2025-04-23 cs.CY cs.HC
Refreshable Tactile Displays for Accessible Data Visualisation
本研究分享四类关键利益相关者的观点,探讨可刷新触觉显示器(RTDs)在盲人及低视力人群无障碍图形应用中的潜在用途、优势与需求,并为数据可视化社区助力平价RTDs惠及BLV人群提供建议。
2024-01-29 cs.HC
Surveyor: Facilitating Discovery Within Video Games for Blind and Low Vision Players
针对盲人和低视力玩家在游戏中缺乏探索发现乐趣的问题,提出探索辅助概念并设计Surveyor工具,通过跟踪视线和突出未探索区域来增强发现体验,与现有方法比较显示其有效性。
2024-03-15 cs.HC
StateLens: A Reverse Engineering Solution for Making Existing Dynamic Touchscreens Accessible
Carnegie Mellon University(卡内基梅隆大学)
盲人在日常生活中经常遇到难以接近的动态触摸屏,这些触摸屏很困难,令人沮丧,并且通常不可能独立使用。触摸屏通常是控制从咖啡机和支付终端到地铁售票机和机上娱乐系统的唯一方式。与动态触摸屏进行非视觉交互是困难的,因为视觉用户界面会改变,交互通常发生在多个不同的屏幕上,并且在探索屏幕时很容易意外触发界面动作。为了解决这些问题,我们引入了StateLens -一个由三部分组成的逆向工程解决方案,使现有的动态触摸屏可访问。首先,StateLens使用在线找到的或用户使用混合人群-计算机视觉管道拍摄的视点视频对现有界面的底层状态图进行逆向工程。其次,使用状态图,StateLens自动生成会话代理,通过指定界面可以执行的任务来指导盲人用户,允许StateLens iOS应用程序提供交互式指导和反馈,以便盲人用户可以访问界面。最后,一组3D打印配件使盲人能够探索电容式触摸屏,而不会引发意外触摸界面的风险。我们的技术评估表明,StateLens可以准确地从固定,手持和网络视频中重建界面;并且,对整个系统的用户研究表明,StateLens成功地使盲人用户能够访问否则无法访问的动态触摸屏。
2019-08-20 cs.CV cs.HC
Branch Explorer: Leveraging Branching Narratives to Support Interactive 360° Video Viewing for Blind and Low Vision Users
本文提出Branch Explorer系统,通过将360°视频转化为分支叙事并利用多模态机器学习管道生成叙事路径,结合沉浸式音频引导,显著提升了盲与低视力用户在360°视频观看中的自主性与参与度。
2025-07-14 cs.HC
StreetReaderAI: Making Street View Accessible Using Context-Aware Multimodal AI
Google Research(谷歌研究);Google DeepMind(谷歌DeepMind);Google(谷歌)
本文提出首个无障碍街景工具StreetReaderAI,结合上下文感知多模态AI与对话语音,使盲人用户能虚拟探索街景,经11名盲人用户评估,验证了其在POI调查和远程路线规划中的价值。
2025-09-26 cs.AI cs.HC
An Extension-Based Accessibility Framework for Making Blockly Accessible to Blind and Low-Vision Users
University of North Texas(北德克萨斯大学)
本文提出了一种基于扩展的可访问性框架,通过模块化架构和三维层次导航模型,提升Blockly对视障和低视力用户的可访问性。
2026-01-15 cs.HC cs.SE
"I didn't know how to read a map, but now I can": TouchingSpace, an Audio-Haptic Map for Blind and Low-Vision Readers
University of California Santa Cruz(加州大学圣克鲁兹分校);Amazon(亚马逊)
TouchingSpace利用触控板将地图渲染为有界区域,结合音频、触觉与对话代理,帮助盲人和低视力用户自主探索空间,提升出行前理解。
2026-09-30 cs.HC
Understanding the Use of a Large Language Model-Powered Guide to Make Virtual Reality Accessible for Blind and Low Vision People
Cornell University(康奈尔大学)
研究探讨了利用大型语言模型驱动的指南提升视障和低视力用户虚拟现实可访问性的问题,通过实验发现用户在不同情境下对指南的不同反应,提出未来设计建议。
2026-03-30 cs.AI cs.ET cs.HC
MAIDR: Making Statistical Visualizations Accessible with Multimodal Data Representation
本文提出 MAIDR 系统,通过声音化、文本、盲文和审阅等多模态表示及自主交互,帮助盲人用户准确理解条形图、热力图等统计可视化。
2024-03-01 cs.GR cs.HC
PunchPulse: A Physically Demanding Virtual Reality Boxing Game Designed with, for and by Blind and Low-Vision Players
本研究提出PunchPulse,一款与盲人和低视力玩家共同设计的VR拳击运动游戏,通过多阶段迭代评估,证明其能有效帮助该群体达到中等至剧烈运动强度,并促进包容性身体活动。
2025-08-04 cs.HC
LLM-Guided Agentic Floor Plan Parsing for Accessible Indoor Navigation of Blind and Low-Vision People
University of Maryland, Baltimore County(马里兰大学巴尔的摩分校)
本文提出一种基于代理的框架,将单张楼层平面图转换为结构化的知识库,生成安全的无障碍导航指令。系统通过多代理模块生成空间知识图谱,并通过路径规划器生成导航指令,实验结果显示在真实场景和基准数据集上均优于单次调用基线。
2026-04-27 cs.AI cs.CV cs.HC
Describe Now: User-Driven Audio Description for Blind and Low Vision Individuals
针对专业音频描述耗时且缺乏用户控制的问题,本研究提出用户驱动的AI生成描述方法,让20名盲及低视力参与者能自主控制7类视频的描述时机与细节级别,揭示了不同视频的偏好差异及用户控制感,为未来AD工具开发提供启示。
2025-05-27 cs.HC
SoundShift: Exploring Sound Manipulations for Accessible Mixed-Reality Awareness
University of Michigan(密歇根大学);National Taiwan University(台湾大学)
SoundShift提出六种声音操控方法,通过用户研究验证其能增强混合现实中盲人用户的声音感知并降低认知负荷,且开发了实际应用示例。
2024-05-26 cs.HC cs.SD eess.AS
AVscript: Accessible Video Editing with Audio-Visual Scripts
有视力和盲人和低视力(BLV)的创作者都使用视频与广大观众交流。然而,视频编辑仍然无法访问BLV创作者。我们的形成性研究表明,目前的视频编辑工具很难访问视觉内容,评估视觉质量,并有效地导航时间轴。我们提出AVscript,一个可访问的基于文本的视频编辑器。AVscript使BLV创作者能够使用嵌入视频的视觉内容、视觉错误(例如,黑暗或模糊的镜头)和演讲。BLV创建者可以使用AVscript在场景和视觉错误之间高效导航,或者定位帧中的对象或感兴趣的口语。一项比较研究(N=12)表明,AVscript显着降低了BLV创作者的心理需求,同时增加了视频编辑的信心和独立性。我们通过一项探索性研究(N=3)进一步证明了AVscript的潜力,其中BLV创作者编辑了他们自己的镜头。
2023-02-27 cs.HC
"It's Kind of Context Dependent": Understanding Blind and Low Vision People's Video Accessibility Preferences Across Viewing Scenarios
本研究通过调查和访谈,揭示盲人与低视力人群在不同观看场景下的视频无障碍偏好差异,提出六维设计空间以推动从通用方案转向场景化定制。
2024-03-16 cs.HC
Co-Designing Multimodal Systems for Accessible Asynchronous Dance Instruction
University of Texas, Austin(德克萨斯大学奥斯汀分校);University of California, Berkeley(加州大学伯克利分校)
本文通过协同设计研讨会,探讨了如何通过多模态系统为盲人和低视力学习者提供无障碍异步舞蹈教学。
2026-02-27 cs.HC
Making Urban Art Accessible: Current Art Access Techniques, Design Considerations, and the Role of AI
本文界定公共艺术及其与馆内策展艺术的差异,梳理现有艺术可及性技术向城市空间迁移的可行性,并展望 AI 提升 BLV 人群艺术可及性的研究方向。
2024-10-27 cs.HC
Sonic Stage: Auto-Generating Interactive Spatial Soundscapes to Facilitate Dialogue Video Comprehension for Blind Viewers
Hong Kong University of Science and Technology(香港科技大学);Columbia University(哥伦比亚大学);University of Rochester(罗切斯特大学)
研究针对盲人观众在对话场景中理解视频困难的问题,提出Sonic Stage系统,运用空间化对话、环境音效和交互式描述三种听觉技术,将对话视频转换为交互式空间音景,显著提升了盲人观众的视频理解等能力。
2026-07-31 cs.HC
Designing for Collective Access: In Search of a Solution to Accessible Communication in a Mixed-Ability Non-Profit
University of California, Irvine(加州大学尔湾分校)
本文通过分析非营利组织在成长过程中如何应对不同成员的访问需求冲突,探讨了无障碍设计中如何平衡技术限制与多样化需求,强调冲突作为揭示权力结构和促进责任的机会。
2026-05-11 cs.HC
"Customization is Key": Reconfigurable Content Tokens for Accessible Data Visualizations
本文将屏幕阅读器可视化定制建模为可配置内容令牌序列,扩展 Olli 支持持久与临时定制,并通过 13 名 BLV 用户研究验证其收益与复杂性。
2024-02-29 cs.HC
Explainable AI for Blind and Low-Vision Users: Navigating Trust, Modality, and Interpretability in the Agentic Era
University of Texas at San Antonio(德克萨斯大学圣安东尼奥分校)
本文探讨了盲人和低视力用户在智能体时代对可解释AI的独特需求,指出需多模态界面和责任意识设计以提升可解释性与信任度。
2026-05-02 cs.AI cs.ET cs.HC
GenAssist: Making Image Generation Accessible
针对盲人和低视力创作者难以评估文本生成图像内容与质量的问题,研究提出GenAssist系统,结合大语言模型与视觉-语言模型提供图像验证、细节查询和异同总结功能,经12名BLV创作者测试,提升了视觉创作的可及性。
2023-07-14 cs.HC
Broken News: Making Newspapers Accessible to Print-Impaired
Microsoft Research(微软研究院)
由于印刷内容的不透明性和在线来源的阻碍,每日新闻内容仍然是印刷障碍(包括盲人和低视力)人群的一大挑战。在本文中,我们提出了我们的方法,数字化印刷报纸成一个可访问的文件格式,如HTML。我们使用一个集成的实例分割和检测框架的报纸版面分析,然后OCR识别文本元素,如标题和文章文本。此外,我们为Mask-RCNN框架提出了EdgeMask损失函数,以改善分割掩码边界,从而提高下游OCR任务的准确性。实证上,我们表明,我们提出的损失函数减少了32.5%的新闻文章文本的字出错率(WER)。
2022-06-23 cs.CV cs.HC
Making Short-Form Videos Accessible with Hierarchical Video Summaries
针对盲人和低视力观众难以访问短视频的问题,提出提供三个细节层次分层视觉摘要的系统ShortScribe,用户研究证明其能显著提升BLV观众对短视频的理解与内容摘要准确性。
2024-02-16 cs.HC
Accessibility and Social Inclusivity: A Literature Review of Music Technology for Blind and Low Vision People
The Hong Kong University of Science and Technology (Guangzhou)(香港科学与技术大学(广州));Newcastle University(新castle大学)
本文系统综述了面向盲人和低视力人群的音乐技术,识别出六类技术和四个设计趋势,提出协作式音乐技术与真实世界测试两大缺失方向,推动从无障碍技术向包容性技术转变。
2025-07-30 cs.CY cs.HC cs.SD
The Concept of the Tactile Signature System for Individuals with Visual Impairments
本文提出触觉签名系统,通过触觉交互、语音算法引导和AI实时反馈,帮助视力障碍者在受监督环境中独立创建个性化手写签名,从而促进其法律、金融、教育及社会参与的包容性与平等机会。
2024-01-11 cs.AI cs.HC
VideoA11y: Method and Dataset for Accessible Video Description
Arizona State University(亚利桑那州立大学)
提出VideoA11y方法,利用多模态大语言模型和视频无障碍指南生成面向盲人及低视力用户的高质量视频描述,并构建了最大的40K视频数据集,实验证明其描述优于新手标注、媲美专业标注。
2025-02-27 cs.CV cs.HC
SweeperBot: Making 3D Browsing Accessible through View Analysis and Visual Question Answering
Florida International University(佛罗里达国际大学);Adobe Research(Adobe研究);University of California San Diego(加州大学圣地亚哥分校)
SweeperBot通过视图分析和视觉问答技术,帮助屏幕阅读器用户更有效地探索和比较3D模型。
2025-11-21 cs.AI cs.HC
How Users Who are Blind or Low Vision Play Mobile Games: Perceptions, Challenges, and Strategies
Communication University of China(中国传媒大学);Human-Computer Interaction Institute, Carnegie Mellon University(卡内基梅隆大学人机交互学院);Tsinghua University(清华大学);College of Media, Communication and Information, University of Colorado Boulder(科罗拉多大学博尔德分校媒体、传播与信息学院);Department of Computer Science, George Mason University(乔治梅森大学计算机科学系)
针对盲人和低视力(BLV)玩家移动游戏体验研究不足的问题,本研究通过访谈32名有经验的BLV移动玩家,探究其对不同无障碍水平移动游戏的感知、挑战及策略,为无障碍移动游戏设计提供见解。
2025-02-14 cs.AI cs.CY cs.HC