[論文レビュー] On Sex, Evolution, and the Multiplicative Weights Update Algorithm

Reshef Meir, David C. Parkes|arXiv (Cornell University)|Feb 17, 2015

Advanced Bandit Algorithms Research参考文献 18被引用数 5

ひとこと要約

本稿は、弱選択や積分布の仮定を必要とせずに、再結合の前後における選択（RS）および選択の前後における再結合（SR）の下で、性的進化と乗法的重み更新アルゴリズム（MWUA）との間の関係を一般化する。主な貢献は、分布に依存しない厳密な対応関係を確立し、従来の研究を裏付け・拡張するものであり、性的生殖が一般の適応度ランドスケープにおいて遺伝子レベルでレギュレートのない学習を実装していることを明らかにする。

ABSTRACT

We consider a recent innovative theory by Chastain et al. on the role of sex in evolution [PNAS'14]. In short, the theory suggests that the evolutionary process of gene recombination implements the celebrated multiplicative weights updates algorithm (MWUA). They prove that the population dynamics induced by sexual reproduction can be precisely modeled by genes that use MWUA as their learning strategy in a particular coordination game. The result holds in the environments of \emph{weak selection}, under the assumption that the population frequencies remain a product distribution. We revisit the theory, eliminating both the requirement of weak selection and any assumption on the distribution of the population. Removing the assumption of product distributions is crucial, since as we show, this assumption is inconsistent with the population dynamics. We show that the marginal allele distributions induced by the population dynamics precisely match the marginals induced by a multiplicative weights update algorithm in this general setting, thereby affirming and substantially generalizing these earlier results. We further revise the implications for convergence and utility or fitness guarantees in coordination games. In contrast to the claim of Chastain et al.[PNAS'14], we conclude that the sexual evolutionary dynamics does not entail any property of the population distribution, beyond those already implied by convergence.

研究の動機と目的

• MWUAを用いた性的進化のモデル化において、弱選択や積分布の仮定を置いていた先行研究の不整合を解消すること。
• 生物学的集団動態（RSおよびSR）と、変種MWUAとの間の一般対応関係を確立すること。
• 性的生殖下での遺伝子の収束性およびレギュレート性の性質を明確にし、集団レベルの適応度最大化に関する以前の誤解を是正すること。
• 元のモデルの仮定が、特にアレルの相関性に関して、実際の集団動態と整合しないことの証明。

提案手法

• 条件付き確率および適応度加重平均を用いて、SRおよびRS集団動態下でのアレルのマージナル分布を導出する。
• 相関する戦略に対して作用する一般化されたMWUAの変種を導入し、それが性的集団における遺伝子のマージナル動態と一致することを示す。
• 数学的帰納法および結合分布の再帰的分解を用いて、各遺伝子のマージナルが、レギュレートのない学習ルールを適用しているかのように進化することを証明する。
• ゲーム理論および学習アルゴリズムの既知の収束結果を適用し、弱選択がなくてもSR動的下で各遺伝子が有界な累積的レギュレートを経験することを示す。
• 集団分布がワイズマン多様体（積分布）から著しく逸脱しうることを実証的に示し、先行研究の仮定を無効にすることを示す。
• 一般の適応度条件において等価ではないRSとSR動態の矛盾を解消し、それらが一般には交換可能でないことを示す。

実験結果

リサーチクエスチョン

• RQ1 弱選択や積分布の仮定なしに、乗法的重み更新アルゴリズムは性的集団における遺伝子マージナル動態を正確に記述できるか？
• RQ2 一般の適応度行列において、SRおよびRS集団動態がMWUAとの対応関係においてどのように比較されるか？
• RQ3 弱選択や独立したアレル分布に依存せずに、個々の遺伝子に対して有界な累積的レギュレートを保証できるか？
• RQ4 集団分布と以前の研究で主張された適応度最大化特性との真の関係は何か？
• RQ5 なぜ元の仮定（積分布および弱選択）が、実際の集団動態と整合しないのか？

主な発見

• 弱選択や積分布の仮定なしに、SRおよびRS動的下での各遺伝子のマージナル分布は、乗法的重み更新アルゴリズムの更新ルールと正確に一致する。
• この対応関係は、遺伝子数、適応度行列、再結合率、初期集団頻度のいかんに関わらず成立する。
• 集団動態はワイズマン多様体（積分布）から著しく逸脱しうり、Chastainら[2014]の仮定を無効にすることを示す。
• SR動的下では、弱選択がなくても各遺伝子が有界な累積的レギュレートを経験する。これは、関連するMWUA変種の収束性に起因する。
• 例示により、SRおよびRS動的は異なる均衡に収束しうり、一般条件下で等価であるという主張を否定する。
• 元の主張（性的進化が適応度の和とエントロピーの組み合わせを最大化する）は支持されない。このプロセスは収束を示すだけであり、追加の最適化特性を示唆しない。