GKE ServiceをGCE HTTP Load Balancingで負荷分散する #gcpja

2014-12-02 about GCE, LoadBalancing, GKE

ども、takiponeです。

このエントリーはDocker Advent Calendar 2014とGoogle Cloud Platform Advent Calendar 2014の2日目です。

Google Container Engine(GKE)は、Dockerクラスタの管理ソフトウェアKubernetesを簡単に扱うクラウドサービスで、Serviceは外部からのアクセスをコンテナにサーブするためのKubernetesコンポーネントです。

GKEでは、ServiceをGCE(Google Compute Engine)のNetwork Load Balancing(NLB)のターゲットとして簡単に設定できるのですが、昨日のsoundTrickerさんのエントリーにあるContent-based Load BalancingなどNLBの代わりにHTTP Load Balancing(HTTP LB)をGKE Serviceのフロントに置きたい場合もあるのかなぁと思い、検証してみました。

GKEの構成

今回は、GKEのドキュメントにあるサンプルのGuestbookアプリケーションをそのままデプロイして利用します。まずは、ダウンロードしてJSONの構成ファイルを確認します。

$ wget https://cloud.google.com/container-engine/docs/downloads/guestbook.zip
$ unzip guestbook.zip
$ ls
guestbook-controller.json     redis-master-service.json
guestbook-service.json        redis-worker-controller.json
redis-master-pod.json         redis-worker-service.json
$

お作法的な感じですが、GCPのProject名とゾーンを事前に設定しておきます。今回はasia-east1-cゾーンにGKEクラスタを作成してみます。

$ gcloud config set project project1
$ gcloud config set compute/zone asia-east1-c

あとはドキュメントにある手順通り、JSONの構成ファイルを読み込んでPod/ReplicationControllerとServiceをデプロイします。

$ gcloud preview container clusters create guestbook
$ gcloud preview container pods create redis-master-pod --config-file ./redis-master-pod.json
$ gcloud preview container services create --config-file ./redis-master-service.json
$ gcloud preview container replicationcontrollers create --config-file ./redis-worker-controller.json
$ gcloud preview container services create --config-file ./redis-worker-service.json
$ gcloud preview container replicationcontrollers create --config-file ./guestbook-controller.json
$ gcloud preview container services create --config-file ./guestbook-service.json
$ gcloud compute firewall-rules create guestbook-node-3000 --allow=tcp:3000     --target-tags k8s-guestbook-node

Guestbookは、データストアとしてのRedisクラスタとWeb層としてGo言語で書かれたWebアプリケーションが構成されます。今回は、Web層のService設定であるguestbook-service.jsonに合わせてHTTP LBのターゲットを設定することになります。

guestbook-service.json

{
  "apiVersion": "v1beta1",
  "kind": "Service",
  "id": "guestbook",
  "port": 3000,
  "containerPort": "http-server",
  "selector": { "name": "guestbook" },
  "createExternalLoadBalancer": true
}

3000番ポートを使用していることがわかりますね。KubernetesのServiceは、全クラスタノード(Dockerホスト)で提供ポートをListenし、Pod(Dockerコンテナ)へプロキシします。従って、HTTP LBからはクラスタの任意のノードにリクエストを転送すればOKです。

ちなみに、guestbook-service.jsonの最後のcreateExternalLoadBalancer要素がNLBを作成する定義なので、今回のHTTP LB構成ではfalseでも構いません。