Improving outdoor navigation for people with blindness using an AI-driven smartphone application and personalized audio guidance
John A. Paulson School of Engineering and Applied Sciences, Harvard University（哈佛大学约翰·A·保尔森工程与应用科学学院）；Kempner Institute for the Study of Artificial and Natural Intelligence, Harvard University（哈佛大学生物与人工智能研究所）
本文提出Mobilio智能手机应用，结合机器学习、传感器融合和个性化音频反馈，实现逐向导航、路径引导和障碍物检测，实验表明其能显著提升盲人户外导航效率并减少环境接触。
2026-05-27 cs.HC
WanderGuide: Indoor Map-less Robotic Guide for Exploration by Blind People
针对现有导航系统需预建地图、可扩展性受限的问题，本研究通过用户需求调研开发WanderGuide无地图机器人向导，支持细节层级调整与语音交互，为视障人士提供自由探索的愉悦体验。
2025-02-13 cs.HC
Designing Conversational Multimodal 3D Printed Models with People who are Blind
本研究与视障人士共同设计融合对话界面、触觉振动与触摸的交互式3D打印太阳系模型，经用户评估后提出适配视障用户需求的多模态3D打印模型设计建议。
2023-06-12 cs.HC
Misfitting With AI: How Blind People Verify and Contest AI Errors
该研究通过对26名盲人的定性研究，探究其验证AI视觉辅助技术错误的方式与需求，基于残疾研究框架剖析相关问题，提出无障碍可解释AI的设计方向与负责任AI实践建议。
2024-08-13 cs.HC
TactIcons: Designing 3D Printed Map Icons for People who are Blind or have Low Vision
针对盲人或低视力人群触觉感知保真度低的问题，提出3D打印触觉地图图标TactIcons，经测试筛选出67个图标并制定了设计指南与测试方法，推动触觉地图的包容性。
2024-07-30 cs.HC
What Social Media Use Do People Regret? An Analysis of 34K Smartphone Screenshots with Multimodal LLM
通过多模态大语言模型分析34K智能手机屏幕截图，发现用户的后悔感因意图和社交媒体活动类型而异，为改善用户体验和自主权提供了设计指导。
2025-03-05 cs.HC
Smartphone Sensing for the Well-being of Young Adults: A Review
多年来，手机已经成为具有多种功能的多功能设备，这是由于过多的嵌入式传感器使它们能够不引人注目地捕获丰富的数据。在一个人们对自己的健康和福祉更加关注的世界里，智能手机的普及使研究人员能够构建应用程序，帮助人们过上更健康的生活方式，并诊断和监测各种健康状况。受年轻人中智能手机的高覆盖率以及他们面临的独特问题的影响，在这篇综述论文中，我们重点关注了使用智能手机感知年轻人福祉的研究。我们从数据视角和系统视角两个角度分析了该领域的现有工作。对于这两个角度，我们提出了人类科学文献，使识别重要的研究领域的动机分类。此外，我们强调智能手机传感的多样性意识的重要性，并提供见解和未来的方向，研究人员在无处不在和移动计算，特别是新的研究人员谁想要了解的基础知识智能手机传感研究针对年轻人的福祉。
2021-01-04 cs.HC
Understanding Challenges and Opportunities in Body Movement Education of People who are Blind or have Low Vision
本文通过调查、访谈和焦点小组收集盲人或低视力者及其教师的需求，识别身体运动教育的十大主题与四项设计挑战，并提出辅助技术共同设计方案以促进包容性教育。
2024-09-30 cs.HC
SenseFlow: An Experimental Study for Tracking People
大规模人员跟踪的主要挑战是识别特定区域的人员密度和跟踪人员流动路径。为了解决这些挑战，我们提出了一个轻量级的人员跟踪系统SenseFlow。SenseFlow利用现成的设备，这些设备以被动方式嗅探由用户的智能手机定期轮询的探测请求。我们通过构建一个概念验证原型并在现实环境中进行广泛的评估来证明SenseFlow的可行性。我们将系统部署在一个实验室中，以研究研究人员的办公时间，在城市拥挤的公共区域，以评估“在野外”的可扩展性和性能，并在大学的四个教室，以监控学生人数。我们还评估了SenseFlow与不同的步行速度和不同型号的智能手机，以调查人流跟踪性能。
2016-06-17 cs.HC
Touching Movement: 3D Tactile Poses for Supporting Blind People in Learning Body Movements
University of Tsukuba（筑波大学）；Miraikan – The National Museum of Emerging Science and Innovation（未来科学馆——国立新兴科学与创新博物馆）；IBM Research - Tokyo（IBM 东京研究中心）；IBM Research（IBM 研究院）
本研究通过3D打印人体模型帮助视障人士更有效地学习身体运动，实验显示该方法在理解速度、准确性及学习动机方面优于传统教学方法。
2026-02-16 cs.HC
"The Guide Has Your Back": Exploring How Sighted Guides Can Enhance Accessibility in Social Virtual Reality for Blind and Low Vision People
本研究针对社交VR中盲人和低视力用户的可及性障碍，基于实体明眼向导模式设计辅助框架，经16名用户测试发现偏好多元，提出动态调整环境等新方向，开辟VR可及性设计新空间。
2024-10-29 cs.HC
Accessible Nonverbal Cues to Support Conversations in VR for Blind and Low Vision People
本文设计音频与触觉线索呈现眼神接触、摇头和点头，并通过 16 名盲及低视力参与者的 VR 实时对话实验验证其可提升注意力检测准确性与信心。
2024-10-29 cs.HC
Accessible Data Access and Analysis by People who are Blind or Have Low Vision
本研究旨在开发结合可刷新触觉显示器和对话代理的创新辅助系统，帮助盲人或低视力人群无障碍地探索和分析数据，以解决信息获取与就业机会的公平差距，并推动辅助技术、多模态界面及自然语言处理领域的创新。
2025-06-30 cs.HC
"Because Some Sighted People, They Don't Know What the Heck You're Talking About:" A Study of Blind TikTokers' Infrastructuring Work to Build Independence
该研究通过对30名盲人TikTok用户的访谈，探究其在平台上的活动与体验，指出用户将TikTok视为活动基础设施，需通过基础设施化工作解决可访问性故障，并探讨了用户对平台介导的独立性的认知与相关实践。
2023-12-11 cs.HC
As Content and Layout Co-Evolve: TangibleSite for Scaffolding Blind People's Webpage Design through Multimodal Interaction
University of Maryland（马里兰大学）
TangibleSite通过多模态交互帮助视障人士共同进化内容与布局，实现独立网页设计。
2026-02-22 cs.HC
Assistive technology use in domestic activities by people who are blind
本研究通过对16名失明人士的半结构化访谈，梳理了盲人家庭工具性日常生活活动中的辅助技术使用现状、现存挑战及需求，为优化辅助技术适配、提升盲人生活质量提供依据。
2025-02-24 cs.HC
"I Shake The Package To Check If It's Mine": A Study of Package Fetching Practices and Challenges of Blind and Low Vision People in China
2020年，每天约有2.3亿件包裹被投递，取包裹已经成为中国许多城市居民的日常生活。取包裹时，人们通常需要去他们公寓楼的收集点或快速柜，这是一种越来越受欢迎的自助取包裹机。然而，很少有人知道这些过程是否对盲人和低视力（BLV）城市居民有帮助。我们采访了生活在中国大都市区的BLV人群（N=20），以了解他们取包裹的做法和挑战。我们的研究结果表明，参与者遇到了困难，在寻找收集网站和本地化，并认识到他们的包。从快递柜取包裹时，他们很难识别正确的快递柜，与其触摸屏交互，导航复杂的屏幕工作流程，打开目标隔间。我们讨论的设计考虑，使包提取过程更容易访问的BLV社区。
2022-02-06 cs.HC
From the Lab to People's Home: Lessons from Accessing Blind Participants' Interactions via Smart Glasses in Remote Studies
研究人员已经采用了远程方法，如在线调查和视频会议，以克服在进行面对面的可用性测试，如参与，用户代表性和安全性的挑战。然而，硬件测试平台上的远程用户评估是有限的，特别是对于盲人参与者，因为这种方法限制了对用户交互的观察。我们在盲人的可用性测试中使用智能眼镜，并分享我们在盲人参与者家中（N=12）进行的案例研究中的经验教训，实验者可以通过双视频会议访问参与者的活动：通过笔记本电脑摄像头的第三人称视图和通过参与者佩戴的智能眼镜的第一人称视图。我们发现，智能眼镜具有远程观察参与者与智能手机测试台互动的潜力;平均58.7%的互动是通过第一人称视角完全捕获的，而通过第三人称视角捕获的只有3.7%。然而，这种增益在参与者之间并不均匀，因为它容易受到头部运动的影响，使耳朵朝向声源，这突出了对更具包容性的相机形状因子的需求。我们还分享了我们在处理智能眼镜中缺乏屏幕阅读器支持、电池快速耗尽以及盲人参与者远程研究中的互联网连接方面的经验教训。
2022-03-08 cs.HC
What do Blind and Low-Vision People Really Want from Assistive Smart Devices? Comparison of the Literature with a Focus Study
本研究通过分析646篇文献和访谈24名BLV人士，发现研究者的关注点与BLV用户的实际需求存在微弱相关，且用户更偏好对话式代理和头戴式设备，为辅助智能设备的设计提供了方向。
2025-05-25 cs.HC
"It's Kind of Context Dependent": Understanding Blind and Low Vision People's Video Accessibility Preferences Across Viewing Scenarios
本研究通过调查和访谈，揭示盲人与低视力人群在不同观看场景下的视频无障碍偏好差异，提出六维设计空间以推动从通用方案转向场景化定制。
2024-03-16 cs.HC
"Sighted People Have Their Pick Of The Litter": Unpacking The Need For Digital Mental Health (DMH) Tracking Services With And For The Blind Community
本研究通过调查93名美国盲人用户，揭示DMH追踪服务在导航、内容解读和用户体验上的可访问性障碍，并提出自适应界面、可访问追踪策略和语音引导交互等包容性设计建议。
2025-03-10 cs.HC
Toucha11y: Making Inaccessible Public Touchscreens Accessible
University of Maryland（马里兰大学）
Toucha11y 通过机械机器人与手机应用结合，使盲人用户独立操作公共触摸屏信息亭，经技术评估和用户研究验证其有效性。
2023-05-06 cs.HC cs.RO
Accessing Passersby Proxemic Signals through a Head-Worn Camera: Opportunities and Limitations for the Blind
在大流行期间，路人的空间行为对于盲人启动互动、保持个人空间或练习社交距离至关重要。在其他用例中，采用计算机视觉的可穿戴相机可以用于提取他人的空间信号，从而增加盲人对路人空间行为的访问。通过分析盲人（N=10）和视力正常者（N=40）参与者的研究中收集的数据，我们探索了：（i）由头戴式摄像机捕获的关于接近路人的视觉信息;（ii）用于提取行人存在、相对位置、距离和头部姿势等情绪信号的行人检测算法;以及（iii）使用可穿戴摄像机帮助盲人访问与附近人相关的电子数据的机会和限制。我们的观察和研究结果提供了对辅助行人检测的二元行为的见解，并对未来头戴式摄像头和交互的设计产生影响。
2021-09-13 cs.HC
How Can Haptic Feedback Assist People with Blind and Low Vision (BLV): A Systematic Literature Review
本文通过系统性文献综述（2004-2024）评估了HCI社区触觉辅助工具在盲人与低视力人群中的应用，发现其主要用于图形理解、导航与教育培训，并指出硬件、功能及用户体验评估三大局限，为未来技术改进提供方向。
2024-12-26 cs.HC
VRSight: An AI-Driven Scene Description System to Improve Virtual Reality Accessibility for Blind People
VRSight通过AI模型事后识别VR场景并生成空间音频反馈，无需开发者干预即可帮助盲人完成社交任务，并贡献了DISCOVR数据集以支持虚拟元素检测。
2025-08-04 cs.HC
UCAT: Ubiquitous Context Awareness Tools for The Blind
视障人士经常面对新的环境，面对这些环境时，他们发现自己面对无数的困难。我们可以帮助他们克服和处理这些因他们的状况而产生的困难。当他们试图了解周围的环境并收集关于周围发生的事情的信息时，他们的感觉下降了。如今，移动设备呈现出显著的计算和技术能力，其已经增加到对于大多数人来说访问具有蓝牙、GPS、Wi-Fi以及高处理和存储能力的设备是非常常见的程度。这让我们想到可以做很多事情来帮助有困难的人的应用程序。在盲人的特定情况下，视觉信息的缺乏可以通过他们自己的个人设备检索的其他上下文信息来绕过。我们的目标是为盲人用户提供信息，能够为他们提供有关他们周围环境的信息。我们希望为盲人用户提供创建信息的工具，并能够在彼此之间共享这些信息，关于人，位置或物体的信息。我们的方法是将该项目分为数据和信息收集阶段，在此阶段我们进行了实地搜索，并进行了访谈，详细说明了盲人用户的环境感知情况，然后是技术阶段，我们在第一阶段的基础上实现了一个系统。我们从收集阶段和实施阶段收集的结果表明，在盲人社区使用这些工具是有潜力的，他们欢迎它打开他们的可能性和视野。
2014-02-06 cs.HC
Unseen City Canvases: Exploring Blind and Low Vision People's Perspectives on Urban and Public Art Accessibility
University of Washington（华盛顿大学）
研究探讨视障人士对城市公共艺术的可及性需求，通过访谈发现他们偏好自发探索、多感官互动及详细描述，提出七维设计框架和HCI研究扩展方向。
2026-03-27 cs.HC
TADA: Making Node-link Diagrams Accessible to Blind and Low-Vision People
本文提出基于触摸和音频的平板交互系统TADA，通过音乐音调和语音支持盲人及低视力用户探索节点-链接图，并在25人评估中验证其可用性。
2024-05-06 cs.HC
RAVEN: Realtime Accessibility in Virtual ENvironments for Blind and Low-Vision People
University of Michigan（密歇根大学）
RAVEN通过自然语言交互提升盲人和低视力用户在虚拟3D环境中的实时可访问性，结合对话编程实现个性化支持。
2026-02-08 cs.HC
"It Brought the Model to Life": Exploring the Embodiment of Multimodal I3Ms for People who are Blind or have Low Vision
本文首次研究面向 BLV 人群的具身交互式 3D 打印模型，并通过 12 人对照实验发现振动与拟人声音可提升生动感、具身感和参与度，但对信任影响不一。
2025-02-20 cs.HC
Data@Hand: Fostering Visual Exploration of Personal Data on Smartphones Leveraging Speech and Touch Interaction
大多数移动健康应用程序使用数据可视化来帮助人们查看他们的健康和活动数据，但这些应用程序对可视化数据探索的支持有限。此外，尽管有巨大的潜在好处，但在个人数据环境中的移动可视化研究很少。这项工作旨在通过语音实现灵活的时间操作，使人们能够在智能手机上轻松导航和比较他们的个人健康数据。我们设计并开发了Data@Hand，这是一款移动应用程序，利用了两种互补模式的协同作用：语音和触摸。通过对13名Fitbit长期用户的探索性研究，我们研究了多模态交互如何帮助参与者探索自己的健康数据。参与者成功地采用了多模式互动（即，语音和触摸），以方便和流畅的数据探索。基于定量和定性的研究结果，我们讨论了多模态交互的设计意义和机会，以更好地支持移动设备上的视觉数据探索。
2021-01-15 cs.HC
TapNav: Adaptive Spatiotactile Screen Readers for Tactually Guided Touchscreen Interactions for Blind and Low Vision People
本文提出TapNav，一种结合触觉覆盖层和自适应音频反馈的空间触觉屏幕阅读器，通过触摸点与空间导航帮助盲人用户更快探索界面并减轻认知负荷，并提供设计指南。
2025-10-17 cs.HC
An LSTM Recurrent Network for Step Counting
带有加速计和陀螺仪等传感器的智能手机可以用作计步器和导航仪。在本文中，我们提出使用LSTM递归网络来计算盲人和视力正常的用户所走的步数，基于带注释的智能手机传感器数据集WeAllWork。模型分别为有视力的人，盲人与长手杖或导盲犬进行Leave-One-Out训练模式。它实现了5%的多计数和少计数率。
2018-02-10 cs.HC cs.LG
Perceptions of Smartphone Users Acceptance and Adoption of Mobile Commerce (MC) The Case of Jordan
本研究基于扩展的技术接受模型（TAM 2）和创新扩散理论（IDT），通过提供移动商务领域的研究结构，考察了智能手机用户对移动商务的采用和接受感知。同时，对它们进行信度和效度检验，并通过假设检验证明它们的独特性。研究结果表明，消费者在智能手机上采用多媒体技术的意愿主要受到不确定性规避（UA）、用户体验（UX）、感知易用性（PEEEE）、感知易用性（PU）和兼容性（CMP）以及其他积极决定智能手机使用态度的构念的影响。对于研究人员来说，这项研究显示了在智能手机上将TAM结构适应MC接受的好处。本研究基于对特定人群的调查，探讨了智能手机对MC采用的看法。为了更可靠，需要一项全面的研究来显示来自不同环境的人的态度。
2021-01-05 cs.CR cs.HC
NaviNote: Enabling In-situ Spatial Annotation Authoring to Support Exploration and Navigation for Blind and Low Vision People
University of Wisconsin-Madison（威斯康星大学麦迪逊分校）；Niantic Spatial, Inc.（Niantic Spatial公司）
NaviNote通过结合高精度视觉定位与代理架构，为盲人和低视力人群提供语音驱动的注释创作与导航支持，显著提升导航性能。
2026-03-09 cs.HC
Robot-Assisted Group Tours for Blind People
Department of Computer Sciences\ of Wisconsin--Madison Department of Computer Sciences, University of Wisconsin--Madison Madison Wisconsin USA；Waseda University Tokyo Japan；IBM Research - Tokyo Tokyo Japan；Robotics Institute Carnegie Mellon University Pittsburgh Pennsylvania USA；IBM Research\ Yorktown Heights New York USA；Department of Computer Sciences\ of Wisconsin--Madison；Waseda University；IBM Research - Tokyo；Robotics Institute Carnegie Mellon University；IBM Research\
本文提出一种机器人辅助系统，帮助盲人参与混合视觉团体游览，通过实地研究验证了机器人导航对提升盲人安全性和环境信息获取的帮助。
2026-02-19 cs.HC cs.RO
FetchAid: Making Parcel Lockers More Accessible to Blind and Low Vision People With Deep-learning Enhanced Touchscreen Guidance, Error-Recovery Mechanism, and AR-based Search Support
FetchAid通过深度学习触摸屏引导、AR音频反馈和错误恢复机制，帮助盲人和低视力人群更高效、更低挫败地使用包裹储物柜，并在12名BLV参与者研究中验证了其有效性。
2024-02-24 cs.HC
Pardon? An Overview of the Current State and Requirements of Voice User Interfaces for Blind and Visually Impaired Users
有特殊需求的人，如盲人和视障人士（BVI），可以在日常生活中使用语音助手提供语音信息输入和输出。然而，至关重要的是要了解他们的需要，并将其纳入可获得和有用的援助系统的发展。通过对145名英属维尔京群岛人进行在线调查，本文显示，大多数英属维尔京群岛人都使用苹果Siri或亚马逊Alexa等常见语音助手，并且认为它们也很有用。特别是，音频娱乐、互联网接入和日常生活中的实用功能，如天气查询、与时间相关的信息（例如设置闹钟）、检查日历条目和做笔记等，都是经常使用和欣赏的。与会者还表示，灵巧家庭设备的集成、现有功能的优化和语音输入很重要，但数据隐私和数据安全等潜在的负面影响也很重要。因此，尽可能实现在线数据处理似乎特别有趣。我们的研究结果有助于这一发展提供了一个概述的经验收集的功能和实施相关方面的要求。
2022-03-11 cs.HC
Help Supporters: Exploring the Design Space of Assistive Technologies to Support Face-to-Face Help Between Blind and Sighted Strangers
本研究通过混合能力设计探索辅助技术作为帮助支持者，连接盲人与视力正常陌生人，促进面对面帮助，并提出设计启示。
2024-03-13 cs.HC
Sensing Movement: Contemporary Dance Workshops with People who are Blind or have Low Vision and Dance Teachers
本研究通过设计工作坊探索技术在支持盲人或低视力学生舞蹈教学与即兴互动中的作用，利用多模态探针生成创意，并提出了支持当代舞学习目标的技术设计考量。
2025-03-05 cs.HC
Analysis of the relation between smartphone usage changes during the COVID-19 pandemic and usage preferences on apps
University of Tsukuba（筑波大学）；Graduate School of Science and Technology（科学与技术研究生院）；Faculty of Engineering, Information and Systems（工程、信息与系统学院）
自世界卫生组织于二零二零年三月宣布COVID-19大流行以来，遏制病毒传播已成为国际优先事项。它极大地影响了人们的生活方式。在本文中，我们通过智能手机应用程序使用的变化来观察和分析疫情对人们生活的影响。一是通过观察疫情期间所有用户的日常使用变化趋势，了解和分析疫情期间限制性措施和政策对人们生活的影响。此外，在未来大流行的情况下，政府和卫生部门采取更适当的限制措施也是有帮助的。其次，我们定义了使用变化特征，并根据用户集群发现了9种不同的使用变化模式，显示了日常使用变化的多样性。这有助于更详细地了解和分析疫情和限制措施对不同类型人群的不同影响。最后，根据预测模型，从用户偏好和人口统计学信息中发现了每种使用变化类型的主要相关因素。它有助于预测未来大流行期间或实施其他限制性措施时智能手机活动的变化，这可能成为判断和管理措施或事件风险的新指标。
2021-10-05 cs.HC cs.LG
Helping Blind People Grasp: Enhancing a Tactile Bracelet with an Automated Hand Navigation System
本研究开发了一种基于触觉手环的自动手部导航系统，通过振动指令引导盲人抓取目标物体，并在多种任务及真实环境中验证了其有效性。
2025-04-23 cs.HC
"My Brother Is a School Principal, Earns About $80,000 Per Year... But When the Kids See Me, 'Wow, Uncle, You Have 1500 Followers on TikTok!'": A Study of Blind TikTokers' Alternative Professional Development Experiences
University of Michigan（密歇根大学）；Pennsylvania State University（宾夕法尼亚州立大学）
本研究探讨视力障碍者通过TikTok平台实现职业发展的替代路径，分析其目标策略与挑战，揭示更灵活包容的职业发展模式。
2026-01-16 cs.HC
Obstacle avoidance for blind people using a 3D camera and a haptic feedback sleeve
导航和避障是视障人士最难完成的任务之一。最近的研究项目提出了解决这一问题的技术解决方案。到目前为止，大多数系统无法提供多维反馈，而在各种照明条件下工作。我们提出了一种新的避障系统相结合的三维摄像头与触觉反馈套筒。我们的系统使用相机的距离信息，并将其映射到前臂上的2D振动阵列上。在我们对触觉反馈套筒的功能测试中，用户能够正确识别和定位98.6%的单电机振动模式和70%的多向和多电机振动模式。在黑暗中的测试路线上评估了组合避障系统，模拟导航任务。所有用户都能够完成任务，并在多次运行中显示出性能改善。该系统独立于照明条件，可在室内和室外使用。因此，避障系统展示了一种很有前途的方法，可以利用技术为视障者提供更多的独立性。
2022-01-12 cs.HC
Understanding Individual Differences: Towards Effective Mobile Interface Design and Adaptation for the Blind
没有两个人是一样的。我们通常会忽略这种多样性，因为我们有能力适应，并且在不知不觉中成为界面专家，而这些界面可能一开始就不适应。这种适应并不总是在用户的范围内。盲人是一个被忽视的群体。空间能力、记忆力和触觉灵敏度是用户之间存在差异的一些特征。无论如何，所有人都采用相同的方法，忽略了他们的能力和需求。与移动设备的交互对视觉要求很高，这扩大了盲人之间的差距。我们的研究目标是确定影响移动交互的个人属性，考虑到盲人，并将它们与移动交互方式相匹配，在一个全面的和可扩展的设计空间。我们的目标是为设备设计，设备处方和接口适配提供知识。
2014-02-05 cs.HC
Creation, Critique, and Consumption: Exploring Generative AI Descriptions for Supporting Blind and Low Vision Professionals with Visual Tasks
本文针对盲人和低视力专业人士在视觉任务中的障碍，提出利用生成式AI提供情境化视觉描述，以支持创作、批判和消费，并探讨其提升自主性、包容性和技能发展的设计建议。
2025-10-10 cs.HC
Exploring and Improving the Accessibility of Data Privacy-related Information for People Who Are Blind or Low-vision
我们提出了一项研究的隐私态度和行为的人是盲人或低视力。我们的研究涉及对21名美国参与者的深入采访。该研究探讨了他们的风险认知，以及他们是否以及如何获取与他们互动的数字技术的数据实践相关的信息。这项研究的目的之一是更好地了解这一用户组的需要，更方便的隐私工具。我们还分享了一些关于从计算领域已经代表性不足的用户组中招募包容性参与者样本的挑战以及我们如何克服这一挑战的思考。
2022-08-21 cs.CY cs.HC
A Multimodal Assistive System for Product Localization and Retrieval for People who are Blind or have Low Vision
NYU Tandon School of Engineering（纽约大学坦登工程学院）；NYU Grossman School of Medicine（纽约大学格罗斯曼医学院）
本文提出一种多模态辅助系统，通过目标检测与视觉-语言模型结合，帮助盲人或低视力者自主完成产品定位与检索，提升其自主性和控制感。
2026-01-18 cs.HC
SeeChart: Enabling Accessible Visualizations Through Interactive Natural Language Interface For People with Visual Impairments
基于Web的数据可视化在探索数据和交流见解方面已经变得非常流行。报纸、期刊和报告定期发布可视化内容，用数据讲述引人入胜的故事。不幸的是，大多数可视化是无法访问的读者与视觉障碍。对于网络上的许多图表，没有附带的替代（alt）文本，即使存在这样的文本，它们也不能充分描述图表的重要见解。为了解决这个问题，我们首先采访了15位盲人用户，以了解他们在阅读数据可视化方面的挑战和需求。基于这些采访的见解，我们开发了SeeChart，这是一种交互式工具，可以自动从网页上解构图表，然后将其转换为盲人可访问的可视化，使他们能够听到图表摘要，并使用键盘通过数据点进行交互。我们对14名盲人参与者的评估表明，SeeChart在理解图表中的关键见解和满足他们的信息需求方面具有有效性，同时减少了他们所需的时间和认知负担。
2023-02-15 cs.HC
3D Printed Maps and Icons for Inclusion: Testing in the Wild by People who are Blind or have Low Vision
本研究通过公共活动现场测试，探索3D打印地图对盲人和低视力人群的适用性，基于用户反馈提出设计建议，证实其可支持定向移动并传递无障碍融合的积极信息。
2025-01-15 cs.HC
Contributing to Accessibility Datasets: Reflections on Sharing Study Data by Blind People
为了确保注入人工智能的系统适用于残疾人，我们需要在开发生命周期中引入来自该社区的可访问性数据集。然而，有许多道德和隐私问题限制了更多的数据包含，使得这些数据集不容易获得。我们提出了一对研究，其中13名盲人参与者参与了数据捕获活动，并在不探索影响他们通过人工智能数据集共享数据的决定的各种因素的情况下进行了反思。我们看到不同的因素如何影响盲人参与者在评估风险-收益权衡时分享研究数据的意愿。大多数人支持共享数据以改进技术，但也对商业用途、相关元数据以及数据影响缺乏透明度表示担忧。这些见解对管理可访问性数据集的负责任做法的发展具有影响，并有助于在这一领域进行更广泛的讨论。
2023-03-09 cs.CY cs.HC
User-Sensitive Mobile Interfaces: Accounting for Individual Differences amongst the Blind
移动电话渗透到我们的日常生活中，在许多方面发挥着日益扩大的作用。它们的普遍性使它们在赋予残疾人权力方面发挥了关键作用。然而，如果不提供包容性的办法，它就会成为一种强有力的排斥手段。尽管目前的解决方案试图弥补视力的不足，但并非所有信息都能到达盲人用户。良好的空间能力仍然需要理解设备及其界面，以及需要记住屏幕上的位置或键盘上的键和相关操作。这些问题是由许多个人属性，如年龄，失明的年龄或触觉敏感性，往往被设计师忘记。更糟糕的是，整个盲人群体被反复认为是同质的（通常是刻板印象）。因此，所有用户都面临相同的解决方案，而忽略了他们的特定能力和需求。我们通常忽略这种多样性，因为我们有能力适应并成为界面专家，而这些界面可能一开始就不适应。这种适应并不总是触手可及的。与移动设备的交互对视觉要求很高，这扩大了盲人之间的差距。了解个体差异的影响及其与需求的关系至关重要，以便能够部署更具包容性的解决方案。我们探索盲人之间的个体差异，并评估他们是如何与移动界面的需求，无论是在低（例如执行屏幕上的手势）和高层次（文本输入）的任务。结果证实，不同的能力水平有显着的影响所取得的成绩由一个盲人。特别是，其他被忽视的属性，如触觉敏锐度，压力敏感度，空间能力或语言智商已被证明与特定的移动需求和参数化相匹配。
2014-02-05 cs.HC
Modeling patterns of smartphone usage and their relationship to cognitive health
University of Tübingen（图宾根大学）；Apple（苹果公司）
智能手机在许多人生活中的普遍使用使其成为有关一个人的精神和认知状态的丰富信息来源。在这项工作中，我们分析了113名老年人12周的电话使用数据，其中31名被诊断为认知障碍，82名没有。我们开发了用户智能手机交互的结构化模型，以揭示有认知障碍和没有认知障碍的人之间的手机使用模式的差异。特别是，我们专注于推断特定类型的电话使用会话是预测认知障碍。我们的模型在区分健康和有症状的受试者时达到了0.79的AUROC，其可解释性使我们能够在数据集中对手机使用的哪些方面与认知健康密切相关进行新的见解。
2019-11-13 cs.HC cs.LG stat.ML
Smart Summarizer for Blind People
School of Computer and Engineering, VIT Vellore（韦洛尔理工学院计算机与工程学院）
在当今世界，时间是一种非常重要的资源。在我们忙碌的生活中，我们大多数人几乎没有时间阅读完整的新闻，所以我们所要做的就是浏览标题并满足自己。因此，我们可能会错过新闻的一部分或误解整个事情。对于视力受损或失去视力的人来说，情况更糟。这些人无法阅读文本对他们的生活产生了巨大的影响。盲人阅读课文的方法有很多。特别是盲文，就是其中一个例子，但它是一种非常低效的方法，因为它确实需要时间，需要大量的练习。因此，我们提出了一种基于声音的视觉障碍者的方法，这显然比触觉更好，更准确。本文提出了一种有效的方法来概括新闻的重要关键词，以节省精力，通过每一次完整的文本。本文介绍了Tesseract、GTTS等多个API和模块，以及Luhn算法、潜在语义分析算法、文本排序算法等算法的详细讨论和实现。本文所涉及的另一个功能是将摘要文本转换为语音，以便系统甚至可以帮助盲人。
2020-01-01 cs.CL cs.HC
