[论文解读] A Comparative Analysis of Industry Human-AI Interaction Guidelines

Austin P. Wright, Zijie J. Wang+7 more|arXiv (Cornell University)|Oct 22, 2020

Human-Automation Interaction and Safety参考文献 10被引用 15

一句话总结

本文從蘋果、谷歌和微軟的指南中提出了一套統一的人機互動指南分類體系，比較了各公司在設計原則上的側重差異。透過分析190多條指南，研究揭示了各組織的優先事項差異——例如微軟注重心智模型，谷歌採用以模型為中心的方法，蘋果強調無縫的使用者體驗——同時提供一個開放、可由社群擴展的框架，網址為 https://ai-open-guidelines.readthedocs.io/。

ABSTRACT

With the recent release of AI interaction guidelines from Apple, Google, and Microsoft, there is clearly interest in understanding the best practices in human-AI interaction. However, industry standards are not determined by a single company, but rather by the synthesis of knowledge from the whole community. We have surveyed all of the design guidelines from each of these major companies and developed a single, unified structure of guidelines, giving developers a centralized reference. We have then used this framework to compare each of the surveyed companies to find differences in areas of emphasis. Finally, we encourage people to contribute additional guidelines from other companies, academia, or individuals, to provide an open and extensible reference of AI design guidelines at https://ai-open-guidelines.readthedocs.io/.

研究动机与目标

• 整合並比較主要科技公司的人機互動指南，解決產業標準碎片化問題。
• 建立一個超越專有架構的統一、可擴展的AI設計指南分類體系。
• 識別各公司在指南側重上的差異，揭示組織文化與方法論如何影響指南優先事項。
• 提供一個集中化、由社群驅動的參考資源，供AI開發者、研究人員與實務工作者使用。
• 鼓勵學術界、產業界與個人貢獻者參與，以擴展並維持指南體系的發展。

提出的方法

• 對蘋果、谷歌與微軟公開發布的人機互動指南進行全面調查。
• 使用親和圖法與主題聚類，將所有指南映射至單一統一的階層結構中。
• 將指南分類至五個主要領域下的12個核心子類別：介面、資料、心智模型、可解釋性與錯誤處理。
• 透過統計各子類別中指南的頻次，量化各公司的側重程度，以揭示相對優先順序。
• 透過與學術人機互動（HCI）文獻比較，驗證框架的有效性，並應用於識別缺口與重疊。
• 在 https://ai-open-guidelines.readthedocs.io/ 建立開放且可擴展的指南倉儲，以支援社群貢獻。

实验结果

研究问题

• RQ1 蘋果、谷歌與微軟的設計指南在關鍵人機互動原則上的側重有何差異？
• RQ2 其指南的發展與側重點背後的基礎方法論與組織價值觀是什麼？
• RQ3 產業指南在多大程度上與學術HCI研究及既定最佳實踐保持一致或產生分歧？
• RQ4 能否建立一個統一、可由社群擴展的分類體系，以整合碎片化的產業指南？
• RQ5 開放、協作式的維護方式如何提升AI互動標準的長期可持續性與相關性？

主要发现

• 微軟的指南最強調心智模型，近40%的指南集中於此類別。
• 谷歌的指南在與模型相關的面向上集中度最高，反映出其工程驅動、以模型為中心的開發方法。
• 蘋果的指南強調使用者體驗要素，如錯誤預防、校準、信心度與多種選項，反映出其設計導向的文化。
• 儘管結構與側重點不同，三家公司均在介面設計、可解釋性與反饋機制方面共享核心原則，顯示出漸趨一致的共識。
• 統一分類體系成功涵蓋了190多條指南，並顯示單一公司並未完全涵蓋所有指南類別，凸顯出整合的必要性。
• 研究顯示，組織文化與開發方法論顯著影響指南優先順序，學術、工程與設計驅動的方法各自產生不同的側重點。