HN 日本語サマリー

← 一覧へ戻る
インフラ・DevOps

Hetzner Cloud 上での安価なセルフホスト Kubernetes

Cheap Self-Hosted Kubernetes on Hetzner Cloud (blog.qstars.nl)

44 pointsby victorbrink19 コメント

要約

この記事では、Hetzner Cloud 上に安価で本番稼働可能な Kubernetes クラスターをデプロイするためのオープンソース Terraform プロジェクト「terraform-hcloud-kube-hetzner」を紹介します。K3s と openSUSE MicroOS を利用し、コスト効率と使いやすさのバランスを取りながら、信頼性の高い Kubernetes 環境を構築する方法を解説しています。

全文翻訳

Hetzner Cloudで安価にセルフホストKubernetesを構築する

このブログのスタータープロジェクトは github.com/qstarsit/hcloud-kube-hetzner で見つけることができます。

Kubernetesは優れたワークロードAPIであり、コミュニティはアプリケーションデプロイメントから基盤となるマシンやインフラストラクチャを抽象化する、高度に拡張可能な標準を構築してきました。しかし、クラウドネイティブのエコシステムには、ベンダーロックインの感覚が伴うことがあります。マネージドロードバランシング、シームレスなノードオートスケーリング、豊富なストレージオプション、統合ネットワーキング、洗練された運用ツールなどの機能は、プレミアム価格で提供されます。

Kubernetesを自分で実行・運用する、いわゆる「The Hard Way」は、圧倒されるような、時間のかかる作業になり得ます。そこでこの記事では、terraform-hcloud-kube-hetzner を取り上げます。これは、Hetzner Cloud上に本番環境対応のK3sクラスタをデプロイするプロセスを簡素化するオープンソースのTerraformプロジェクトであり、使いやすさ、信頼性、コスト効率のバランスを取っています。そして、私たちのヨーロッパのルーツ🇪🇺に忠実であり続けています。

Hetzner

Hetznerは、高性能なハードウェアを手頃で予測可能な価格で提供することで高い評価を築いてきたドイツのインフラストラクチャプロバイダーです。ハイパースケーラーよりも機能は少ないですが、少数のことを非常にうまくこなすことに注力しています。これにより、インディーハッカーやスタートアップの間で人気のホスティングプロバイダーとなっています。

同社のクラウドサービスは近年大きく成熟し、リソースを管理するための堅牢なAPIを備えています。プライベートネットワーキング、ロードバランサー、ネットワークアタッチトストレージ、仮想マシンを提供しています。これは、よりコスト効率の高いプラットフォームで適切な自動化を求めるチームにとって、確かな代替手段となります。

Hetznerは主にヨーロッパに近代的なデータセンターを運営しており、米国とアジアにもロケーションを提供しています。最近のデータ主権への注目の高まりを考えると、Hetznerがドイツ企業であるという事実は、データ主権に関する安心感を与えます。

[画像: Hetzner Falkenstein datacenter park]

Kube-Hetzner

Kube-Hetzner は、最適化され使いやすいTerraformモジュールで、(高可用性)自動アップグレードクラスタをセットアップします。これは、K3sをHetzner Cloud上で信頼性高く実行するために必要な多くのベストプラクティスをコード化しています。

このプロジェクトは、クラスタのブートストラップとメンテナンスに関わる多くの重労働を処理します。コンピューティングリソースのプロビジョニング、プライベートネットワーキングの設定、ロードバランサーのセットアップ、ノードプールの管理、そしてそれらをすべて連携させる作業です。アップグレードはデフォルトで自動化され、ローリングで行われるため、メンテナンス中の手動介入とダウンタイムを削減します。

Hetznerネイティブのツールをクラスタに直接統合しており、hcloud CSI ドライバーとhcloud Cloud Controller Manager (CCM) が含まれています。これにより、KubernetesはロードバランサーやブロックストレージのようなリソースをKubernetes経由で自動的にプロビジョニングおよび管理できるようになります。

MicroOS

コンテナの世界では、少ない方が多いです。これは、ワークロードの基盤となるオペレーティングシステムにも当てはまります。Ubuntu、Debian、またはRedHat Enterprise Linux のような従来のサーバーディストリビューションは、汎用的な使用のために幅広いパッケージとサービスを含んでいますが、コンテナワークロードには不要なものも多く含まれています。このため、コンテナ中心のオペレーティングシステムが開発されてきました。Talos、CoreOS、Bottlerocket、flatcar などが挙げられます。

Kube-Hetznerは、すべてのノードでopenSUSEのMicroOS を利用しています。MicroOSは、コンテナワークロードの実行に特化した、フットプリントの小さい安定したオペレーティングシステムです。ローリングリリース、アトミック&トランザクショナルアップデート、デフォルトでのセキュアアップデートを備えています。このOSは、予測可能で、回復力があり、起動ごとに同じように動作するように設計されています。

MicroOSはイミュータブル(不変)であり、実行時に変更することはできません。アップデートはBtrfs スナップショットを使用してトランザクショナルに適用され、システムは完全に成功するか、クリーンな状態にロールバックできます。誤ったアップデートが発生した場合、手動操作なしで以前のスナップショットから自動的に起動します。

読み取り専用のルートファイルシステムは、攻撃対象領域を削減します。コンテナが侵害された後でも、ホストバイナリやオペレーティングシステムの設定を変更することはできません。攻撃者がホストレベルのアクセス権を取得したとしても、変更は再起動時に破棄されます。

アプリケーションワークロードは、ホストオペレーティングシステムとは独立して管理され、ルートファイルシステムにはインストールされません。これにより、設定ドリフトを防ぎ、すべてのノードが相互に交換可能であり、繰り返し展開、交換、または復旧できることを保証します。

K3s

クラスタの心臓部となるのは、Rancherの軽量KubernetesディストリビューションであるK3s です。特にエッジやIoTデバイスのようなコンピューティングリソースが限られた環境向けに設計されています。K3sは、Kubernetes APIサーバー、kube proxy、kubeletなどのコンポーネントを単一のバイナリにパッケージ化し、依存関係とクラスタをブートストラップするために必要な手順を削減します。

これは完全に準拠したディストリビューションであり、運用を簡素化します。最小限の設計にもかかわらず、K3sは本番環境に対応しており、小規模から中規模のクラスタに適しています。標準的なKubernetesインストールの実行に伴うオーバーヘッドの多くを圧縮・抽象化します。

さらに、K3sとKube-Hetznerは適切なデフォルト設定を備えています。Podおよびサービスネットワークに使用されるIP範囲の変更や、クラスタの内部ホスト名の変更など、高度な設定は自由に、そして可能であれば変更できます。これらの設定については、Terraformで設定する際にさらに詳しく説明します。

K3s server configuration

クラスタの計画

このブログでは、標準的な高可用性クラスタをデプロイします。3つのコントロールプレーンノードと、Falkenstein、Nuremberg、Helsinkiに分散された3つのワーカーノードです。

コスト効率のため、Rancherのlocal-path プロビジョナーを有効にして、VPSノードに接続されたディスクを活用します。これにより、ワークロードに応じて、リージョナルブロックストレージまたはローカルパスを使用したノードに接続されたディスクを選択できます。

私はLonghorn の使用は避け、ローカルパスプロビジョナーとブロックストレージの組み合わせで私のワークロードには十分とします。リージョン間でレプリケートされ、Podスケジューリングの決定に依存しないストレージが必要な場合は、Longhornを有効にできます。Longhornを使用する際のパフォーマンスのボトルネックに注意し、ユースケースに合わせてベンチマーク を実行してください。

💡 別の方法として、2つのドイツのサイト間でデュアルリージョンフェイルオーバーセットアップを選択することもできます。Helsinkiリージョンは一般的にサーバーの可用性が高く、本番ワークロードに対して許容できるレイテンシを持っていますが、FalkensteinとNuremberg間のサイト間接続よりもレイテンシは高くなります。

コントロールプレーンとワーカーノードの希望するマシンタイプ を選択します。私はコントロールプレーンにCX23(仮想コア2 / RAM 4GB / ディスク40GB @ €5,49/月)を、ワーカーにはCX33(仮想コア4 / RAM 8GB / ディスク80GB @ €8,49/月)を選択します。これらのインスタンスはHetznerの共有クラウドオファリングの一部であり、同じ物理ホスト上の他の顧客とリソースが共有されることを意味します。私の経験では、顕著なCPUスティールタイムは観察されておらず、Hetznerがサーバーを積極的に過剰供給しているとは考えていません。それでも、特定のワークロードとビジネス要件に基づいて、この選択を慎重に評価する必要があります。

💡 この更新時点では、Hetznerの共有vCPUラインへの需要が高いため、CX23とCX33はほとんどのEUロケーションで一時的に品切れとなっています。これは歴史的に断続的です - Hetzner Cloudコンソールを確認するか、別のロケーション(Falkenstein、Nuremberg、Helsinki)を試してから、より高価な専用vCPUタイプに手を伸ばしてください。

これで、6台のマシンで月額合計 €41,94 になります。次に、クラスタのネットワーク構成を決定する必要があります。

この記事では、シンプルに保ちます。各ノードにパブリックIPアドレスを割り当て、ポート22(SSH)への接続を自分のIPアドレスでホワイトリストに登録することを選択します。APIサーバーは、コントロールプレーンの前にロードバランサーを配置するため、外部トラフィックには閉じます。

さらに、Traefikイングレスクラスには独自のロードバランサーが用意されます。これにより、クラスタ管理とアプリケーショントラフィックのための、高可用性で独立したエントリーポイントが得られます。これらの2つのロードバランサー(lb11)はそれぞれ €7,49/月で、合計で月額 €14,98 が追加されます。

パブリックIPv4アドレスは現在月額 €0,50 で、さらに €3,00 が追加され、VAT抜きの合計は €59,92/月、VAT込みでは €72,50/月になります。

私にとって、これはクラスタの妥当なコストですが、Hetznerの2026年の価格改定 以降、そのマージンは狭まっています。プロモーション割引や無料ティアを除けば、GCP GKE やAWS EKS での典型的なマネージドクラスタの開始価格は $70〜$75/月です。VAT抜きの合計(VAT登録事業者は払い戻し可能)と比較すると、依然として大幅に安価ですが、以前のような広い差ではありません。これはクラスタを実行するためのコストであり、そこにスケジュールするワークロードのコストではありません。

しかし、コストをさらに削減したい人向けに、いくつかのオプションがあります。

1. 単一のロードバランサーまたはMetalLBを使用する

APIサーバーとインバウンドトラフィックのために別々のロードバランサーを使用する代わりに、両方を処理する単一のロードバランサーに統合することができます。これにより、VAT抜きの月額 €7,49 が節約され、VAT込みの合計は月額 €63,44 になります。

あるいは、Hetznerのロードバランサーを完全にスキップし、クラスタ内で実行されるソフトウェアロードバランサーとしてMetalLB を使用します。

2. パブリックIPアドレスを削除し、プライベートネットワーキングを使用する

各パブリックIPv4アドレスは現在月額 €0,50 で、6ノードで合計 €3,00/月になります。HetznerがIPv4価格を引き下げたため、以前ほど大きな節約ではありません。パブリックIPを削除し、バステオンホスト、NATゲートウェイ、またはVPNソリューション経由でクラスタに接続することで、直接的なコスト削減はわずかですが、セキュリティ体制を向上させることができます。

オプションには以下が含まれます。

  • バステオンホスト: クラスタノードにアクセスするためにSSHで接続する、パブリックIPを持つ単一の小さなノード。
  • WireGuard VPN: 1つのノードまたは別のインスタンスにWireGuardサーバーをセットアップし、安全なプライベートネットワークアクセスを提供する。
  • Tailscale/Nebula: メッシュVPNソリューションを使用して、シームレスなプライベート接続を実現する。

このアプローチは、IPコストの €3,00/月を削減しますが、今日の主な利点は、直接的なコスト削減よりも攻撃対象領域の縮小です。

クラスタの展開

いよいよクラスタを実際にデプロイします。当社のスタータープロジェクト にアクセスしてクローンし、開始してください。Readmeファイルの重要な設定セクションに注意し、値を好みに合わせて変更してください。

ここでは、Terraform、Kubectl、およびhcloud CLI がインストールされていることを前提とします。これらがインストールされていない場合は、今すぐインストールしてください。

プロジェクトディレクトリで、terraform init -upgrade を実行してTerraform依存関係をインストールすることから始めます。

[画像: Terraform command output]

次に、terraform plan を実行してインフラストラクチャの変更を計画します。TerraformがHetznerで作成しようとしているものすべてを確認する計画にしばらく時間をかけてください。計画に満足したら、terraform apply -auto-approve を実行して適用します。適用プロセスには最大10分かかる場合があります。

💡 apply中のlocal-execステップでMicroOSがアクティブになるのを待って行き詰まった場合は、マシンがノードに接続できること、およびSSH接続用のIPアドレスをホワイトリストに登録していることを確認してください。

適用が成功した後、terraform output -raw kubeconfig > config を実行してkubeconfigを取得できます。Linux & MacOSの場合は~/.kube/config、Windowsの場合は`%USERPROFILE%".kube\