[論文レビュー] Unpacking Privacy Labels: A Measurement and Developer Perspective on Google's Data Safety Section

Rishabh Khandelwal, Asmit Nayak+2 more|arXiv (Cornell University)|Jun 13, 2023

Privacy, Security, and Data Protection被引用数 12

ひとこと要約

本稿は Google's Data Safety Section (DSS) を用いた大規模な Android アプリデータセット、長期的な研究、開発者調査を通じて、不一致、過少報告/過報告、そして進化する実践を明らかにし、DSS の有用性を向上させるための推奨を提供する。

ABSTRACT

Google has mandated developers to use Data Safety Sections (DSS) to increase transparency in data collection and sharing practices. In this paper, we present a comprehensive analysis of Google's Data Safety Section (DSS) using both quantitative and qualitative methods. We conduct the first large-scale measurement study of DSS using apps from Android Play store (n=1.1M). We find that there are internal inconsistencies within the reported practices. We also find trends of both over and under-reporting practices in the DSSs. Next, we conduct a longitudinal study of DSS to explore how the reported practices evolve over time, and find that the developers are still adjusting their practices. To contextualize these findings, we conduct a developer study, uncovering the process that app developers undergo when working with DSS. We highlight the challenges faced and strategies employed by developers for DSS submission, and the factors contributing to changes in the DSS. Our research contributes valuable insights into the complexities of implementing and maintaining privacy labels, underlining the need for better resources, tools, and guidelines to aid developers. This understanding is crucial as the accuracy and reliability of privacy labels directly impact their effectiveness.

研究の動機と目的

• 開発者が Googles Data Safety Section (DSS) でアプリのプライバシー実践をどのように報告しているかを評価する。
• DSS の実装後1年間で報告パターンがどのように進化したかを調べる。
• DSS 提出の変化を生み出す要因、課題、および行動を特定する。
• 開発者の経験を理解し、DSS に関するリソース、ツール、ガイドラインを改善する。

提案手法

• DSS メタデータを 2.46 million アプリに対して 10 回の snapshots からスクレイピングし分析する。
• 3,500 アプリ開発者と関わり、意思決定、フォームの記入、DSS の更新を理解する。
• 開発者の回答を定性的に分析し、DSS エコシステムへの関与をモデル化する。
• DSS の報告をアプリの権限とサードパーティライブラリと横断的に検証し、不一致を特定する。

Figure 1 : An example of the data safety section of an Android app.

実験結果

リサーチクエスチョン

• RQ1 RQ1: How do developers report their app privacy practices in Googles Data Safety Sections?
• RQ2 RQ2: How have these patterns of reporting practices evolved over the year following the implementation of DSS?
• RQ3 RQ3: What are the driving factors behind the changes in Googles DSS, the challenges, and the behaviors of app developers?

主な発見

• May 2023 時点で、プライバシーラベルは Google Play Store の 46.8% のアプリに表示されている。
• DSS を持つアプリの間で、DSS フォームの過少報告、過剰報告、そして不整合のパターンが見られる。
• 過去1年間に少なくとも1回は DSS を更新したアプリは約 40%、中には複数回更新したものもある。
• 長期的な観察では、データ収集・共有の実践が時間とともに変化し、データカテゴリの追加や削除が見られる。
• 開発者調査は、サードパーティライブラリに関する情報不足、フォームの複雑さ、不整合な審査結果、英語力の低さ、手続きが不明瞭であるといった課題を明らかにする。
• この研究は、より良い教育リソース、多言語サポート、フォームの簡略化、開発者からのフィードバックの改善が DSS の正確さと信頼性を高めると結論づけている。

Figure 2 : The hierarchy of the Google Data Safety Section, showcasing the various layers and components.