ブルーグリーンデプロイ

どのようなものか

ブルーグリーンデプロイは、できる限り同じ構成にした二つの本番環境で、
ソフトウェアをリリースする方法です。ここでblueと呼ぶ一方が、すべての
要求を処理します。新しいバージョンは、もう一方のgreenにインストール
し、顧客のトラフィックが届かない間にテストします。準備ができたら、二
つの環境の前段にある仕組みを変更し、以後のすべての要求をgreenへ送り
ます。blueは手を加えず稼働を続けるため、greenに問題があれば、同じ変
更を逆に行うだけでblueを再び使えます。

色自体に意味がないことが、この名前の狙いです。「旧・新」「主系・待機
系」といった名前は、リリースのたびに意味が入れ替わりますが、二つの色
なら、単に交代するだけです。次に切り替えた後はgreenが稼働側、blueが
待機側になります。Martin
Fowlerは、2010年に自身のblikiでこの手法を説明し、やや曖昧ながら、命
名をDaniel Terhorst-NorthとJez
Humbleによるものとしています。英語では通常ハイフンを入れて書きます
が、ツールでは表記が異なります。この種のデプロイ戦略を追加する
Kubernetesコントローラー、Argo
Rolloutsは、設定内で`blueGreen`と呼びます。

切り替えには、要求の送り先を決める一点であれば、どのような仕組みでも
使えます。Fowlerの説明ではルーターを変更しますが、ロードバランサーの
転送先、リバースプロキシの転送先、Kubernetesでトラフィックを受ける
Podをラベルセレクターで選ぶServiceでも構いません。また、二つの環境
を、二つのデータセンターに置く必要もありません。Fowlerは、別々のハー
ドウェア、別々の仮想マシン、または一つのシステム上でそれぞれのIPアド
レスを持つ二つのゾーンでも十分としています。

近い二つの手法と比べると、特徴が明確になります。ローリングアップデー
トは、インスタンスを数個ずつ置き換えるため、最後の旧版がなくなるま
で、新旧が並んで要求に答えます。元へ戻すにも、逆向きに同じ更新を進め
る必要があります。カナリアリリースは、まず少量のトラフィックを新版へ
送り、段階的に広げます。ブルーグリーンは、一度にすべてを移す一方、旧
版の完全なコピーを稼働したまま残すため、戻す操作も、進める操作と同じ
く、一段階の切り替えで済みます。

なぜ重要なのか

リリースは、時間のかかる一方通行の作業から、短時間で完了し、元に戻せ
る作業に変わります。ファイルのコピー、プロセスの起動、キャッシュの準
備といった遅い部分は、blueが処理を続ける間にgreenで行うため、顧客を
待たせません。切り替え自体も、それを元へ戻すことも短時間で済みます。
旧版は停止していないため、再構築も再インストールも不要です。その結
果、普段の午後にリリースする際のチームの構えも、問題の兆候が見えた際
に動ける速さも変わります。

顧客へ見せる前に、本番に非常に近い条件でgreenを確認することもできま
す。ネットワーク、設定、データベースが同じだからです。greenへのス
モークテストは、細かな違いがいくつもあるステージング環境での同じテス
トより、多くを確認できます。Argo
Rolloutsは、昇格前の新版へトラフィックを送るプレビュー用Serviceとし
て、これを仕組みにしています。本番のトラフィックを処理させずにテスト
できます。

待機側の環境には、もう一つ仕事があります。リリースが安定したら、トラ
フィックを受けなくなった側が、次のリリースを準備する場所になり、その
間はウォームスタンバイになります。Fowlerは、切り替えのたびに人が見守
るフェイルオーバーを行うため、同じ仕組みで「リリースのたびに災害復旧
手順をテストできる」と指摘しています。

代償は明確です。二つの本番環境には、少なくともリリースの間、二環境分
の処理能力が必要です。また、アプリケーション層は容易に複製できても、
データはそうではありません。blueとgreenは、ほぼ常に一つのデータベー
スを共有するため、どのリリースでも両方のバージョンからデータを読める
必要があります。それを保証できないチームは、素早く切り替えて進めて
も、戻す際に動かなくなります。

実際の活用例

Kubernetesでの最小構成は、二つのDeploymentと一つのServiceです。
Deploymentの`web-blue`と`web-green`が同じアプリケーションを動かし、
`app:
web`と、`slot: blue`または`slot:
green`のラベルを持ちます。顧客がアクセスするServiceは、一方のスロッ
トを選びます。

```yaml
apiVersion: v1
kind: Service
metadata:
  name: web
spec:
  selector:
    app: web
    slot: blue
  ports:
    - port: 80
      targetPort: 8080
```

リリースでは、待機側に新しいイメージを配置し、準備が整うのを待ち、
`slot:
green`だけを選ぶ二つ目のServiceでテストしてから、稼働側のServiceを切
り替えます。

```sh
kubectl set image deployment/web-green web=registry.example.com/web:1.5.0
kubectl rollout status deployment/web-green --timeout=5m
i# ここでweb-greenのプレビュー用Serviceにスモークテストを行う		engineer.company	70
kubectl patch service web -p '{"spec":{"selector":{"slot":"green"}}}'
i# 切り戻しは、色だけを変えた同じコマンドで行う		engineer.company	70
kubectl patch service web -p '{"spec":{"selector":{"slot":"blue"}}}'
```

`kubectl patch`の既定はstrategic merge
patchであるため、セレクターの`slot`キーだけが変わり、`app:
web`はそのまま残ります。Serviceコントローラーは、セレクターに一致す
るPodを継続的に調べ、その集合が変わるとServiceのエンドポイントを更新
します。そのため、新しい接続はgreenへ届き、blueは旧イメージで待機を
続けます。

Argo
Rolloutsは、同じ一連の処理を、一つの`Rollout`オブジェクトで自動化し
ます。昇格時に新しいPodへ向ける`activeService`と、それより前にアクセ
スするための、任意の`previewService`を使います。
`autoPromotionEnabled:
false`にすると、誰かが`kubectl argo rollouts promote
web`を実行するまで、切り替え前でロールアウトを一時停止します。

DevOps・CI/CDサービスは、変更をテストし、リリースし、元へ戻せること
を約束しています。ブルーグリーンデプロイは、最後の操作の負担を小さく
する方法の一つです。その基盤になるのは、あるプラットフォームのAzure
へのデプロイで、二つ目の本番スロットを設けずに実践している、二つの習
慣です。Bicepテンプレートで環境間の対象インフラを同じ形に保ち、同じ
ビルド成果物を開発からステージング、本番へ昇格させ、到着した環境の設
定を取得します。その経路は、リリースを各環境へ直線的に進めます。ブ
ルーグリーンは、その終点に双子を加えます。インフラを同じにし、一つの
成果物を変えずに使うという二つの習慣が、その双子が本当に同じだと信頼
できる根拠になります。

問題が起きるところ

スキーマの変更で、戻る道が行き止まりになります。
greenが起動し、列名を変えるマイグレーションを実行して、正常にトラ
フィックを処理します。10分後、障害でblueへ戻すと、旧列名を使い続ける
ため、すべての要求が失敗します。アプリケーションのロールバックは計画
しても、データの計画がなかったのです。Fowlerの2015年の助言は、二つを
分けることです。両方のバージョンで使えるデータベースの変更を先に出
し、その後アプリケーションを出し、新版が安定してから、旧版だけに必要
だったものを削除します。

greenが書いた状態が、切り戻すと取り残されます。
ローカルディスクにアップロードしたファイル、メモリー内のセッションス
トア、保留中ジョブの独自キャッシュなど、greenだけが持つものは、blue
へトラフィックを戻しても、そちらにはありません。利用者は、ログアウト
させられたり、保存したばかりのものを失ったりします。共有する状態は、
両方の色が使う保存先に置きます。greenに固有のデータが必要なら、
Fowlerは、両環境へトランザクションを送るか、greenを読み取り専用で開
始し、動作を確認できてから読み書き可能へ切り替える方法を提案していま
す。

障害が現れる前に、戻る先を縮小してしまいます。 Argo
Rolloutsは、切り替え後に旧ReplicaSetを縮小し、
`scaleDownDelaySeconds`の既定値は30です。15分後や夜間ジョブの実行
時、あるいはゆっくり進むリークによって障害が表れたときには、戻るblue
がありません。通常、問題が表れるまでの時間をカバーするよう遅延を設定
し、その代償として処理能力を確保し続けることを受け入れます。

```yaml
strategy:
  blueGreen:
    activeService: web
    previewService: web-preview
    autoPromotionEnabled: false
    scaleDownDelaySeconds: 3600
```

準備完了だけで、正しさを確かめずに昇格します。
`autoPromotionEnabled`の既定値はtrueであり、新しいPodが準備完了にな
ると、Argo
Rolloutsは切り替えます。readiness
probe（準備完了の確認）で分かるのは、プロセスが応答することで、購入
手続きが動くことではありません。上のブロックのように昇格前で一時停止
し、プレビュー用Serviceでテストします。または、失敗時にロールアウト
を中止する`prePromotionAnalysis`と、切り替え後に失敗すると旧版へ戻す
`postPromotionAnalysis`を付けます。

待機側の構成がずれます。
リリースの間に、誰かが緊急の設定変更を稼働側だけへ適用します。次のリ
リースを置く待機側は、古い設定のままで、一つだけ変えるはずだった切り
替えが、二つを変えます。両方のスロットを同じテンプレートと設定の正本
から構築し、一方の変更が両方に反映されるようにします。Fowlerの説明の
とおり、待機側を次のリリースの準備場所として扱います。

参考資料

  * Blue Green Deployment：Martin
Fowlerによる2010年の説明と、データベース変更に関する2015年の追記で
す。

  * Argo
Rollouts：BlueGreen：稼働用とプレビュー用のService、自動昇格、切り替
え前後の分析、縮小までの遅延を説明します。

  * KubernetesのService：Serviceのトラフィックを受けるPodを、セレク
ターで選ぶ仕組みです。

  * kubectl patch：セレクターを切り替えるコマンドと、strategic
merge、merge、JSONの各パッチを説明します。

hこのページのウェブ版	URL:https://engineer.company/ja/glossary/blue-green-deployment/	engineer.company	70
