构建无视觉数据表示的多模态编辑器：Umwelt的可访问结构化设计和评估
论文总结
研究机构
- Massachusetts Institute of Technology (MIT)
- Global Disability Innovation Hub
摘要
研究团队设计并开发了一个名为Umwelt的环境，它允许视障用户通过使用辅助工具（如屏幕阅读器）创建和分析多模态数据表示。他们对比了现有的基于视觉的数据编辑工具，并提出了一种新的方法，这种方法不对任何特定的非视觉模态进行优先级排序，而是让作者能够以更灵活的方式在可视化、文本描述和声学表示之间切换。通过用户研究，他们发现Umwelt支持了互补的分析视角，并促进了不同感官依赖人群之间的沟通。
问题发现
- 目前的数据编辑工具大多基于视觉，这使得视障者难以独立创建和理解非视觉数据表示。
- 现有系统往往受限于特定的可视化形式，无法表达所有可能的非视觉数据结构和交互。
- 缺乏对多模态数据表示进行结构化编辑的工具。
解决方案
- Umwelt提供了一个结构化的编辑器，用户可以通过它以任意顺序指定可视化、文本描述和声学表示。
- 编辑器使用共享的查询预设，在所有模态中表达数据的关系。
- 观察者可以同步查看独立的视觉、文本和声学视图，并通过交互链接保持各模态之间的上下文。
结果
- 用户研究显示，Umwelt的多模态表示能够支持互补的概览和详细分析视角。
- 通过Umwelt，用户能够在不依赖视觉辅助的情况下独立创建数据表示，并在分析过程中根据需要切换模态。
- 参与者反馈表明，Umwelt降低了创建数据表示时面临的挑战，并促进了不同感官需求用户之间的沟通。
结论
Umwelt是一个创新的工具，通过去中心化视觉模态，它为视障用户提供了一个更全面的数据探索和分析平台。未来的研究可以进一步探索如何优化多模态数据表示的交互设计以适应不同的任务和使用场景。
举一反三
Q1：Umwelt编辑器的主要设计理念是什么？
A1：Umwelt编辑器的主要设计理念是鼓励作者延迟决定，允许他们根据需要选择最合适的表示方式，并提供多模态数据表示的结构化编辑环境。
Q2：Umwelt如何处理不同字段和键值对的默认规格设置？
A2：Umwelt通过使用基于数据集键和类型的规则集来处理默认规格。这些规则集在遇到特定类型（如时间、定量或名义）和主键组合时，提供预设的可视化和文本表示。
Q3：Umwelt viewer如何实现在不同模态间保持互动状态的一致性？
A3：Umwelt viewer通过实现链接交互来维护模态间的一致性。这种设计使得无论用户在哪个视图（如视觉、听觉或文本）上进行操作，其它模态都能反映出相同的数据选择或滤镜状态。
原文地址：https://dl.acm.org/doi/fullHtml/10.1145/3613904.3641996#
内容由MiX Copilot基于大语言模型生成，有可能存在错误的风险。