[論文レビュー] Conversational Search -- A Report from Dagstuhl Seminar 19461

Avishek Anand, Lawrence Cavedon+4 more|arXiv (Cornell University)|May 18, 2020

Information Retrieval and Search Behavior参考文献 3被引用数 5

ひとこと要約

本論文は、対話的検索に関する Dagstuhl セミナー 19461 の成果を提示しており、情報検索（IR）、自然言語処理（NLP）、HCI、対話システム分野の研究者44名が集結し、対話的検索の研究アジェンダを策定した。セミナーでは、定義、評価、モデリング、説明、シナリオ、応用、プロトタイピングをカバーする包括的なロードマップが策定され、主な貢献として、学術的対話アシスタントシステムの提案と、基礎的知識を網羅するリーディングリストの作成がなされた。

ABSTRACT

Dagstuhl Seminar 19461 "Conversational Search" was held on 10-15 November 2019. 44~researchers in Information Retrieval and Web Search, Natural Language Processing, Human Computer Interaction, and Dialogue Systems were invited to share the latest development in the area of Conversational Search and discuss its research agenda and future directions. A 5-day program of the seminar consisted of six introductory and background sessions, three visionary talk sessions, one industry talk session, and seven working groups and reporting sessions. The seminar also had three social events during the program. This report provides the executive summary, overview of invited talks, and findings from the seven working groups which cover the definition, evaluation, modelling, explanation, scenarios, applications, and prototype of Conversational Search. The ideas and findings presented in this report should serve as one of the main sources for diverse research programs on Conversational Search.

研究の動機と目的

• 対話的検索を、従来のクエリ-レスポンスモデルを越えた情報検索のパラダイムシフトとして、共通理解を確立すること。
• 対話的検索システムにおけるインタラクティビティ、ユーザーモデリング、評価、説明の分野における核心的課題を特定すること。
• マルチモーダルおよびマルチユーザーシナリオに対応する対話的検索に焦点を当てた、学際的コミュニティの研究ロードマップを定義すること。
• 実世界のデータとユーザーニーズに基づき、具体的に学術的対話アシスタントをプロトタイプ化すること。
• 基礎的リーディングリストを整備し、今後の研究におけるツール、データ、倫理的配慮を提言すること。

提案手法

• 情報検索（IR）、自然言語処理（NLP）、HCI、対話システム分野の研究者44名が参加した5日間の学際的セミナーを実施し、対話的検索を多角的視点から探求した。
• セミナー前調査を通じて、理想のシステム、未解決課題、必須リーディングの入力を収集し、作業グループ編成の根拠とした。
• 定義、評価、モデリング、説明、シナリオ、学習応用、プロトタイピングの7つの作業グループを設立した。
• 個人の知識グラフ、音声認識、arXiv、ACL Anthology、ORKG などのソースからの意味的データを統合する学術的対話アシスタントシステムの提案を行った。
• モジュラーなアーキテクチャを採用したプロトタイプを設計し、クラウドおよびクライアント側のデータ保存をサポートし、ユーザーユーザーの制御とプライバシー保護に重点を置いた。
• オープンソースプラットフォーム（例：Macaw、TIRA）、ツール（例：ArXivDigest、GrapAL）、データコレクション（例：Semantic Scholar、dblp）を推奨し、システム開発の支援を行った。

実験結果

リサーチクエスチョン

• RQ1 『対話的検索』システムとは何か。異なるモダリティやユーザーユーザーの文脈において、どのように形式的に定義できるか。
• RQ2 ユーザーの対話が議論、明確化、議論を含む場合に、対話的検索システムを効果的に評価する方法は何か。
• RQ3 複数ターンにわたる対話におけるユーザーニーズの進化を捉えるために、ユーザーニーズ、文脈、進化する情報ニーズを表現するモデリングアプローチは何か。
• RQ4 透明性とユーザーユーザーの信頼を向上させるために、説明や根拠を対話的検索に統合する方法は何か。
• RQ5 学術的および実世界の利用を想定したスケーラブルでプライバシーを守る対話的検索システムを構築するにあたり、主な技術的・倫理的・運用的課題は何か。

主な発見

• 対話的検索は、ユーザーとシステムが対話によって情報ニーズを共同で構築する動的かつ複数ターンの対話的相互作用であるというコンSENSUSが得られた。
• 対話的検索の評価は、正確性と再現率を越えて、対話の整合性、明確化の効果、議論の質といった指標を含める必要がある。
• ユーザーニーズと文脈のモデリングには、ユーザーモデル、個人の知識グラフ、セッションおよびモダリティをまたがる文脈的メモリの統合が必要である。
• 対話的検索における説明は、特にユーザーデータから導かれた意見や推奨事項を提示する場合に、インタラクティブで根拠に基づいたものでなければならない。
• 提案された学術的対話アシスタントプロトタイプは、arXiv、ACL Anthology、ORKG などの複数のデータソースを統合し、プライバシー保護措置を講じた状態でオンラインおよびオフライン両方の動作をサポートしている。
• 主な課題には、データプライバシーの確保、ユーザーユーザー参加のインcentive 管理、共有研究環境におけるシステムの安定性と再現性の確保が含まれる。