[論文レビュー] CAGI, the Critical Assessment of Genome Interpretation, establishes progress and prospects for computational genetic variant interpretation methods

The Critical Assessment of Genome Interpretation Consortium|arXiv (Cornell University)|May 12, 2022

Genomics and Rare Diseases参考文献 143被引用数 7

ひとこと要約

この論文は、遺伝子変異の表現型的影響を予測するための計算手法を挑戦した、ゲノム解釈評価（CAGI）共同研究の5回のエディションを評価している。結果として、臨床的病原性変異およびがん関連変異に対して、特にミスセンス変異の解釈において顕著な進歩が見られ、正確性が向上している。一方、レギュラトリおよび複雑な特性関連変異の予測はまだ明確でないが、補助的臨床的用途において有望である。

ABSTRACT

The Critical Assessment of Genome Interpretation (CAGI) aims to advance the state of the art for computational prediction of genetic variant impact, particularly those relevant to disease. The five complete editions of the CAGI community experiment comprised 50 challenges, in which participants made blind predictions of phenotypes from genetic data, and these were evaluated by independent assessors. Overall, results show that while current methods are imperfect, they have major utility for research and clinical applications. Missense variant interpretation methods are able to estimate biochemical effects with increasing accuracy. Performance is particularly strong for clinical pathogenic variants, including some difficult-to-diagnose cases, and extends to interpretation of cancer-related variants. Assessment of methods for regulatory variants and complex trait disease risk is less definitive, and indicates performance potentially suitable for auxiliary use in the clinic. Emerging methods and increasingly large, robust datasets for training and assessment promise further progress ahead.

研究の動機と目的

• コミュニティ全体で実施された盲検チャレンジを通じて、計算的遺伝子変異解釈の最先端状況を評価すること。
• 特に疾患に関連する遺伝子変異からの表現型的結果の予測における手法のパフォーマンスを評価すること。
• ミスセンス、レギュラトリ、および複雑な特性関連変異の解釈における現在の手法の強みと限界を特定すること。
• 変異解釈における進展と残された課題を強調することで、今後の開発を導くこと。
• 5回のCAGIエディションにおける50のチャレンジを通じて、独立した盲検評価を用いたベンチマークを確立すること。

提案手法

• CAGIコミュニティ実験の5回の完全なエディションを組織し、各エディションで変異影響予測に関する複数のチャレンジを実施した。
• 参加者に匿名化された遺伝子データを提供し、表現型的結果について盲検予測を求めた。
• 客観性と再現性を確保するため、独立した盲検評価者による評価を実施した。
• ミスセンス、レギュラトリ、および複雑な特性関連変異を含む多様な変異タイプにおける手法パフォーマンスを比較するため、標準化された指標を用いた。
• 複数の研究チームからのフィードバックと結果を統合し、時間経過に伴う手法的トレンドと改善を評価した。
• 手法開発と検証を支援するため、より大規模かつ堅牢なデータセットを段階的に活用した。

実験結果

リサーチクエスチョン

• RQ1 計算手法は、特にミスセンス変異および病原性変異において、遺伝子変異の表現型的影響をどの程度正確に予測できるか？
• RQ2 現在の手法は、レギュラトリおよび非コーディング変異の解釈において、どの程度のパフォーマンスを示すか？
• RQ3 既存のツールは、複雑な特性の疾患リスクをどの程度正確に予測できるか？
• RQ4 手法は、異なる遺伝的背景や変異タイプにわたってどの程度一般化できるか？
• RQ5 計算的変異解釈分野における今後の開発における主な限界と機会は何か？

主な発見

• ミスセンス変異の解釈手法は、臨床的に重要な病原性変異に対して、生化学的影響を予測する精度が向上している。
• 特に診断が困難な病原性ミスセンス変異およびがん関連変異に対して、パフォーマンスが顕著に高い。
• レギュラトリ変異の解釈手法は有望ではあるが、まだ明確でないため、補助的臨床的用途の可能性がある。
• 複雑な特性疾患リスク予測手法は、限定的ではあるが実質的なパフォーマンスを示しており、改善の余地がある。
• 新規手法および大規模で高品質なデータセットの導入により、分野のさらなる発展が期待される。
• CAGIフレームワークは、イノベーションを促進し、変異解釈ツールの評価に信頼できるベンチマークを提供した。