---
title: Kubernetesと耐障害性
tags: 
author: [appare45](https://docswell.com/user/appare45)
site: [Docswell](https://www.docswell.com/)
thumbnail: https://bcdn.docswell.com/page/GJ8XN6VL7D.jpg?width=480
description: Kubernetesと耐障害性 by appare45
published: November 19, 26
canonical: https://docswell.com/s/appare45/5X2JDR-cndw2026-lt
---
# Page. 1

![Page Image](https://bcdn.docswell.com/page/GJ8XN6VL7D.jpg)

CloudNativeと耐障害性
CloudNative Days Winter 2026 LT
appare45


# Page. 2

![Page Image](https://bcdn.docswell.com/page/LJL8P95QER.jpg)

自己紹介など
中村天晴（@appare45）
● 筑波大学情報科学類 4年生
● 茨城県からきました
● Ultra-CoinsでKubernetesクラスタを運用してWebサーバーとか
メール受信サーバを運用している
2


# Page. 3

![Page Image](https://bcdn.docswell.com/page/47M64ZRKJW.jpg)

Ultra-Coinsとは
&gt; Ultra-Coinsとは、情報科学類生とOB・OG向けの超正統派
コンピューティング人材育成環境です。
（ultra.coins.tsukuba.ac.jp より）
サークルのようなもの
●
●
●
●
学生が適当にサーバを置く環境がある
適当なネットワーク・電源・物理的なスペースが確保されている
みんなでなかよくラックを共有して使っている
各自好きなことをやっているので他のメンバーが何を
やっているかを知らない
3


# Page. 4

![Page Image](https://bcdn.docswell.com/page/P7RPW6R6J9.jpg)

写真
4


# Page. 5

![Page Image](https://bcdn.docswell.com/page/PJX3PMRD7X.jpg)

問題
適当である＝治安が悪い
● 電源はラック間で分離され、利用容量の上限が設定されている
● ネットワーク最上流は分離されたラック・電源で動作している
● みんなたくさん電気を使う
よくラック単位で停電する
5


# Page. 6

![Page Image](https://bcdn.docswell.com/page/3JKYDGRD7D.jpg)

6


# Page. 7

![Page Image](https://bcdn.docswell.com/page/LE39RN8PE5.jpg)

目標
ラック単位で停電してもサービスを止めない
7


# Page. 8

![Page Image](https://bcdn.docswell.com/page/8EDGYWM3EG.jpg)

耐障害性を確保するのに必要なこと
1. ワークロードの冗長化→Kubernetes
2. ストレージの冗長化→Ceph/レプリケーション
3. ネットワークの冗長化→VRRP・BGP
（時間の都合で省略・資料をご確認ください）
8


# Page. 9

![Page Image](https://bcdn.docswell.com/page/V7P369RPJ8.jpg)

Kubernetes
● ワークロードを宣言した状態に近づけてくれる
● ノードに繋がらなくなったら勝手にPodを退避して作り直す
→実際どれくらいダウンタイムがあるのか？
9


# Page. 10

![Page Image](https://bcdn.docswell.com/page/2JV43MRV7Q.jpg)

Kubernetesとノードの死活監視
kubelet
kube-apiserver
status更新
lease保存
lease更新
10


# Page. 11

![Page Image](https://bcdn.docswell.com/page/5EG13GM1JL.jpg)

Kubernetesとノードの死活監視
kind: Lease
apiVersion: coordination.k8s.io/v1
metadata:
name: green-worker-4
namespace: kube-node-lease
kube-node-lease namespaceに
勝手にできている
…
spec:
holderIdentity: green-worker-4
leaseDurationSeconds: 40
renewTime: &#039;2026-11-15T12:51:48.070380Z&#039;
11


# Page. 12

![Page Image](https://bcdn.docswell.com/page/4JQD5XRN7P.jpg)

Kubernetesとノードの死活監視
50秒変化がない場合
Unknown
NoExecuteにする
lease / ハートビートを監視する
node controller
Not Readyになる
12
＝Serviceが転送しなくなる


# Page. 13

![Page Image](https://bcdn.docswell.com/page/K74Z9683E1.jpg)

Not ReadyなPodのその後
kind: Pod
apiVersion: v1
…
tolerations:
- key: node.kubernetes.io/not-ready
operator: Exists
effect: NoExecute
デフォルトでつく
tolerationSeconds: 300
- key: node.kubernetes.io/unreachable
operator: Exists
effect: NoExecute
tolerationSeconds: 300
13


# Page. 14

![Page Image](https://bcdn.docswell.com/page/LJ1RKV2ZJG.jpg)

Not ReadyなPodのその後
NoExecute
5分後に削除
taint-eviction-controller
Not Ready
14


# Page. 15

![Page Image](https://bcdn.docswell.com/page/GJW1DLR6E2.jpg)

タイムライン
デフォルトの場合は以下のようになる
1. 0秒
: kubeletからlease更新が送られなくなる
2. 50秒後 : NodeがUnknown/NoExecute
3. 350秒後: Podが削除され再作成される
● Podの作成自体も時間がかかる
● 一気に大量のPodが対象になると削除はさらに遅延
● ダウンタイムを短くしたい場合は調整が必要
● 素朴にはレプリカを増やしたほうが良いがその分リソースが必要
15


# Page. 16

![Page Image](https://bcdn.docswell.com/page/4EZPGMRRJ3.jpg)

耐障害性を確保するのに必要なこと
1. ワークロードの冗長化→Kubernetes
2. ストレージの冗長化→Ceph/レプリケーション
3. ネットワークの冗長化→VRRP・BGP
（時間の都合で省略・資料をご確認ください）
16


# Page. 17

![Page Image](https://bcdn.docswell.com/page/Y76MYNR1EV.jpg)

ストレージも冗長化が必要
● ワークロードが利用するデータにアクセスできないと困る
17


# Page. 18

![Page Image](https://bcdn.docswell.com/page/G75ZG58LJ4.jpg)

Rook-Cephを使うといい感じにできる
● RookはCephをKubernetesで管理できるOperator
○ KubernetesのPVCとして振る舞う
● 障害に耐性をもたせるには全ラックに完全なコピーを置く必要が
ある
○ 実データのラック数倍ストレージが必要
● CephのErasure Codingという断片データを配置する方式に
すればもう少しストレージ効率はあがるが耐障害性が下がる
18


# Page. 19

![Page Image](https://bcdn.docswell.com/page/9J2RYNK37R.jpg)

Ceph
各ラックにコピーを置く
19


# Page. 20

![Page Image](https://bcdn.docswell.com/page/DEYDGPN8EM.jpg)

Rook-Ceph
kind: Node
apiVersion: v1
metadata:
name: green-worker-4
creationTimestamp: &#039;2026-11-06T05:13:03Z&#039;
labels:
ラベルをつけて
topology.rook.io/rack: rack4
20


# Page. 21

![Page Image](https://bcdn.docswell.com/page/VJN6G5X9J8.jpg)

Rook-Ceph
apiVersion: ceph.rook.io/v1
kind: CephBlockPool
spec:
failureDomainを指定すると
failureDomain: rack
replicated:
size: 3
21


# Page. 22

![Page Image](https://bcdn.docswell.com/page/YE9LWY8373.jpg)

いい感じにしてくれる
22


# Page. 23

![Page Image](https://bcdn.docswell.com/page/GE8XN68LJD.jpg)

まとめ
● 耐障害性は考えることがいろいろある
● CloudNativeにすることでやりやすくなっている
● 実際にやってみないとわからないことや単純にたくさん
リソースが必要なことも多い
停電しても待っていれば復活してくれるようになった
23


# Page. 24

![Page Image](https://bcdn.docswell.com/page/LEL8P9RQ7R.jpg)

耐障害性を確保するのに必要なこと
1. ワークロードの冗長化→Kubernetes
2. ストレージの冗長化→Ceph/レプリケーション
3. ネットワークの冗長化→VRRP・BGP
（時間の都合で省略・資料をご確認ください）
24


# Page. 25

![Page Image](https://bcdn.docswell.com/page/4JM64ZPKEW.jpg)

インターネットからサービスへのアクセス
単一障害点
WAN
クライアント
LAN
ルータ
Kubernetes Pod
Kubernetes Pod
Kubernetes Pod
25


# Page. 26

![Page Image](https://bcdn.docswell.com/page/PJRPW616E9.jpg)

インターネットからサービスへのアクセス
外側のIPアドレスは
1つにしたい
クライアント
ルータ
ルータ
Kubernetes Pod
Kubernetes Pod
Kubernetes Pod
ルータ
26


# Page. 27

![Page Image](https://bcdn.docswell.com/page/PEX3PMYDJX.jpg)

インターネットからサービスへのアクセス
VRRP
VIP
ルータ
相互に監視する
クライアント
ルータ
Kubernetes Pod
Kubernetes Pod
Kubernetes Pod
ルータ
27


# Page. 28

![Page Image](https://bcdn.docswell.com/page/3EKYDG3DJD.jpg)

インターネットからサービスへのアクセス
VRRP
クライアント
VIP
ルータ
ルータ
どこに転送するかル
ータが知りたい
Kubernetes Pod
Kubernetes Pod
Kubernetes Pod
ルータ
28


# Page. 29

![Page Image](https://bcdn.docswell.com/page/L739RNGP75.jpg)

インターネットからサービスへのアクセス
VIP
クライアント
各ルータはWANのVIPと
LANのVIPで静的にNATする
ルータ
VIP
kube-vip Service
ルータ
kube-vip Service
ルータ
kube-vip Service
BGP
kube-vipがルータに
VIPへの経路をBGPで広報する
29


# Page. 30

![Page Image](https://bcdn.docswell.com/page/87DGYW137G.jpg)

インターネットからのアクセス
● 外側（WAN）のIPは1つをVRRPによりActive-Standby
● 内側のIPアドレスはBGPでルータに広報する
● ルータは外側のVIPと内側のVIPを静的にNATする
ちなみに治安が悪いのでVRRPのID（＝MACアドレス）が他の
ホストと重複しており気づくのが大変だった
30


