arXiv reaDer
AidUI: ユーザー インターフェースの暗いパターンの自動認識に向けて
AidUI: Toward Automated Recognition of Dark Patterns in User Interfaces
過去の調査では、UI のダーク パターン、つまりエンド ユーザーを (無意識のうちに) 意図しないアクションに誘導するユーザー インターフェイスが蔓延していることが示されています。このような欺瞞的な UI デザインは、個人情報の過度の共有や金銭的損失など、エンド ユーザーに悪影響を与える可能性があります。ダークパターンの分類法の開発に向けて研究が大幅に進歩しましたが、現在、開発者とユーザーは、これらのしばしば微妙なデザインモチーフを認識、回避、およびナビゲートするのに役立つガイダンスを欠いています.ただし、ダーク パターンの自動認識は困難な作業です。1 種類のパターンのインスタンス化がさまざまな形をとる可能性があり、大きなばらつきが生じるからです。このホワイト ペーパーでは、最新のソフトウェア アプリケーションで一般的な UI ダーク パターンがどの程度自動的に認識されるかを理解するための第 1 歩を踏み出します。これを行うために、AidUI を紹介します。これは、コンピューター ビジョンと自然言語処理技術を使用して、アプリケーションのスクリーンショット内の一連の視覚的およびテキスト キューを認識し、10 の一意の UI ダーク パターンの存在を示し、それらの検出、分類を可能にする新しい自動化アプローチです。 、およびローカリゼーション。私たちのアプローチを評価するために、ContextDP を構築しました。これは、301 のダーク パターン インスタンスを含む 175 のモバイル UI スクリーンショットと 83 の Web UI スクリーンショットにまたがる、完全にローカライズされた UI ダーク パターンの現在最大のデータセットです。私たちの評価の結果は、\AidUI が 0.66 の全体精度、0.67 のリコール、0.65 の F1 スコアをダーク パターン インスタンスの検出で達成し、ほとんどの誤検知を報告し、検出されたパターンを ~0.84 の IoU スコアでローカライズできることを示しています。 .さらに、研究した暗いパターンの重要なサブセットは非常に確実に検出でき (F1 スコアは 0.82 以上)、将来の研究の方向性により、追加のパターンの検出が改善される可能性があります。
Past studies have illustrated the prevalence of UI dark patterns, or user interfaces that can lead end-users toward (unknowingly) taking actions that they may not have intended. Such deceptive UI designs can result in adverse effects on end users, such as oversharing personal information or financial loss. While significant research progress has been made toward the development of dark pattern taxonomies, developers and users currently lack guidance to help recognize, avoid, and navigate these often subtle design motifs. However, automated recognition of dark patterns is a challenging task, as the instantiation of a single type of pattern can take many forms, leading to significant variability. In this paper, we take the first step toward understanding the extent to which common UI dark patterns can be automatically recognized in modern software applications. To do this, we introduce AidUI, a novel automated approach that uses computer vision and natural language processing techniques to recognize a set of visual and textual cues in application screenshots that signify the presence of ten unique UI dark patterns, allowing for their detection, classification, and localization. To evaluate our approach, we have constructed ContextDP, the current largest dataset of fully-localized UI dark patterns that spans 175 mobile and 83 web UI screenshots containing 301 dark pattern instances. The results of our evaluation illustrate that \AidUI achieves an overall precision of 0.66, recall of 0.67, F1-score of 0.65 in detecting dark pattern instances, reports few false positives, and is able to localize detected patterns with an IoU score of ~0.84. Furthermore, a significant subset of our studied dark patterns can be detected quite reliably (F1 score of over 0.82), and future research directions may allow for improved detection of additional patterns.
updated: Sun Mar 12 2023 23:46:04 GMT+0000 (UTC)
published: Sun Mar 12 2023 23:46:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト