Jenkinsを適切にスケーリングする方法は？

私のプロジェクトでは、Jenkins Master + 1 Jenkins slave（2エグゼキューター）を実行するAWSサーバーが1つあり
、ビルドパワーを増強するために3つのオプションがあります：

1. スケールアップ：AWSインスタンスを大きくし、エグゼキューターを追加します。
2. スケールアップ：AWSインスタンスを大きくし、別のjenkinsスレーブプロセスを追加します。
3. スケールアウト：jenkinsスレーブを使用して別のAWSインスタンスを作成し、マスターに接続します

私たちは大規模な組織であり、現在のジェンキンスマスターは必要なすべての場所にすでにアクセスしているため、2。を実行したいと考えています。オプション3。「新しいサーバー」は、数週間かかる官僚的な承認をさらに必要とするため、複雑です。

だから私の質問は：

• オプション2に技術的な問題はありますか？。各ジェンキンススレーブのエグゼキューターは、他のスレーブエグゼキューターを知らないのでしょうか？
• 一般的に、ジェンキンスをスケーリングするための最良のアプローチは何ですか？スケールアップまたはスケールアウト？

同じマシンで複数のjenkinsスレーブを実行しても、根本的な技術的な問題はありません。実際、同じマシン上で複数のスレーブを実行すると、それを行うためのいくつかの正当な理由がリストされます。

エグゼキュータを正しく使用すると、同じマシン上に複数のスレーブインスタンスがほとんど不要になりますが、考慮すべきユニークな使用例がいくつかあります。

• 構成されたノード間でより多くの構成可能性が必要です。可能な限り使用する1つのノードセットと、必要な場合にのみ使用する他のノードがあるとします。
• 異なるものを構築する複数のJenkinsマスターインストールが存在する場合があるため、この構成では、同じボックスに複数のマスターのスレーブを配置できます。そうです、ジェンキンスを使えば、本当に2人のマスターに仕えることができます。
• Libvirt Slaves PluginなどのJenkinsプラグインと組み合わせて、仮想マシンの起動/停止/交換の容易さを活用できます。
• ハードウェアへの投資と使用率を最大化し、同時に運用コスト（アイドリングスレーブを実行するためのユーティリティ費用など）を最小限に抑えたい場合。

一般的に、スケールアウトは、通常、利用可能な物理リソースのタイプ/サイズによって制限されるため、スケールアウトが推奨されます。

特に、ビルド能力を強化するために、実際のビルドを分析して、マシンリソースの使用方法、ボトルネックの場所/場所、およびスケールアップがさらに役立つかどうかを明らかにするために生じるスケーラビリティの制限を判断することをお勧めします。

たとえば、同じマシン上で2つの並列ビルドのビルド時間が、同じマシン上で順次実行される（重複しない）同じ2つのビルドの合計ビルド時間よりも長い場合がありました。そのような場合、全体的な建物の収容能力が実際に減少するため、スケールアップすら検討しません。

KubernetesとHelmを使用します。

Jenkins Helmチャートの使用をお勧めします。とともにインストールされhelm install stable/jenkins、自動的にスケーリングされます。

https://github.com/kubernetes/charts/tree/master/stable/jenkins

私はあなたがどちらもすべきではないと思う;）

まあちょっと。もっとエグゼキューターが必要だと思います。おそらくあなたのビルドは本当にリソースを消費しているのでしょうか？少なくとも4回実行しますが、ジョブに応じて6〜8回実行します。コアの数をエクセクターに合わせるのが好きです。そのため、ノードをスケールアップしたい場合があります。4-8エグゼキュータ用にM4ラージを実行すると思います。

また、スケールアウトする必要があると思いますが、スマートに行う必要があります。Jenkinsには、ビルドキューの内容に応じてAWSで自動的にスケールアウトするプラグインがあります。基本的に、スレーブを立ち上げて新しいスレーブにジョブを送信するまでのジョブの数と待機時間を伝えます。スレーブの最大量​​、最小量なども設定できます。

オプション3に進むために、スケールアップではなくスケールアウトします。すべてのJenkinsエージェントがECS（カスタムDockerベースのJenkins）で実行され、自動スケーリンググループが設定されています。すべてのJenkinsマスターがECSと通信しているため、ECSのワークロードを共有し、スケールアップ演習でJenkinsマスターを再作成する必要はありません。