[論文レビュー] Software Engineering at Google

Fergus Henderson|arXiv (Cornell University)|Feb 6, 2017

Open Source Software Innovations参考文献 2被引用数 14

ひとこと要約

この論文は、Googleのスケーラブルなソフトウェアエンジニアリング実践を詳細に記述しており、モノレポアーキテクチャ、自動化テスト、コード所有権、継続的デプロイメントの強調を特徴としています。これらの実践が、大規模なスケールにおいてスケーラビリティ、信頼性、開発者生産性を実現する仕組みを示しており、主な貢献としては、統一されたコードベースと数千人のエンジニアが参加する大規模な環境におけるきめ細やかなエンジニアリングの規律が挙げられます。

ABSTRACT

We catalog and describe Google's key software engineering practices.

研究の動機と目的

• Googleのエンジニアリング組織全体で用いられている大規模なソフトウェアエンジニアリング実践を文書化および分析すること。
• モノリシックなコードベースで高い信頼性とスケーラビリティを実現するためのコアな原則とシステムを特定すること。
• 自動化、コード所有権、継続的インテグレーションがスケールした開発をどのように支援するかを理解すること。
• グローバルで分散された環境において、コード品質と開発者生産性を維持するためのエンジニアリング実践を明らかにすること。
• 複雑なソフトウェアシステムを有する大規模組織に適用可能なエンジニアリングの優れた事例を提供すること。

提案手法

• すべてのGoogleコードを1つのリポジトリに統合するモノレポアーキテクチャを採用し、グローバルな依存関係管理と一貫したツールチェーンを可能にする。
• ユニットテスト、統合テスト、エンドツーエンドテストから成る包括的なテストピラミッドを実装し、自動チェックとプリマージゲートキーパーによって強制する。
• コード品質と責任の所在を保証するため、細かく分類されたコード所有権モデル（「所有者」と「レビュー担当者」のシステム）を構築する。
• スケーラブルで自動化された継続的インテグレーションおよびデプロイメントパイプラインを活用し、サービス間で迅速かつ安全にリリースを実行する。
• ビルド、テスト、リリースワークフローを大規模に管理するためのカスタムツールとインfra（例：Rearch、Prowに類似したシステム）を活用する。
• 静的解析と自動リファクタリングツールを適用し、コーディング規約の遵守と開発段階でのバグの早期特定を促進する。

実験結果

リサーチクエスチョン

• RQ1 グローバル組織における大規模なソフトウェア開発において、モノレポアーキテクチャはどのように機能するか？
• RQ2 自動化テストとプリマージチェックは、コード品質とシステム信頼性をどのように維持するか？
• RQ3 数千人のエンジニアが関与する環境において、コード所有権とレビューの規律はどのようにスケーリングされるか？
• RQ4 大規模で複雑なコードベースにおいて、継続的デプロイメントを実現するためのエンジニアリング実践は何か？
• RQ5 ツールチェーンとインfraストラクチャは、開発者生産性とシステム安定性をどのように支援するか？

主な発見

• Googleのモノレポは1億行を超えるコードを含み、すべてのチームが共有しており、一貫した依存関係管理とプロジェクト間のリファクタリングを可能にしている。
• プリマージテストパイプラインは包括的なテストスイートを強制し、マージ前に95％以上の変更が自動チェックに合格している。
• 必須のレビュー担当者と自動チェックによってコード所有権が強制され、リgressのリスク低減とコード品質の向上が達成されている。
• スケーラブルで自動化されたパイプラインにより、継続的デプロイメントが実現され、サービス間で毎日数千回のリリースが可能になっている。
• 分散ビルドシステムや静的解析を含むカスタムツールにより、コーディング規約とパフォーマンスチェックの一貫した適用が可能になっている。
• モノレポ、自動化、強い所有権文化の組み合わせにより、技術的負債が削減され、スケールに応じた機能の迅速な提供が実現されている。