Kubeadm: Kubeadm initブロックで「コントロールプレーンイメージをプルする必要がある場合、これには1分以上かかる場合があります

作成日 2018年01月31日 · 67コメント · ソース: kubernetes/kubeadm

バージョン

kubeadmバージョン（ kubeadm versionを使用）：

環境：

Kubernetesバージョン（ kubectl versionを使用）：v1.9.2
クラウドプロバイダーまたはハードウェア構成：Virtual Box
OS （例：/ etc / os-releaseから）：Ubuntu 16.04.0 LTS（Xeniak Xerus）amd64
カーネル（例： uname -a ）：linux4.4.0-62-generic
その他：kubeadmバージョン：v1.9.2：amd64、kubeletバージョン：v1.9.2 amd64、kubernetes-cniバージョン：0.6.0-00 amd64、dockerバージョン：17.03.2-ce

どうしたの？

kubeadm initを実行しようとすると、
xx @ xx ：〜$ sudo kubeadm init --kubernetes-version = v1.9.2

[init] Kubernetesバージョンの使用：v1.9.2
[init]認証モードの使用：[ノードRBAC]
[プリフライト]プリフライトチェックを実行します。
[警告FileExisting-crictl]：システムパスにcrictlが見つかりません
【プリフライト】クベレットサービス開始
[証明書]生成されたca証明書とキー。
[証明書]生成されたapiserver証明書とキー。
[証明書]証明書を提供するapiserverは、DNS名[kickseed kubernetes kubernetes.default kubernetes.default.svckubernetes.default.svc.cluster.local]およびIP [10.96.0.1172.17.41.15]に対して署名されています。
[証明書]生成されたapiserver-kubelet-client証明書とキー。
[証明書]生成されたsaキーと公開キー。
[証明書]生成されたfront-proxy-ca証明書とキー。
[証明書]生成されたfront-proxy-client証明書とキー。
[証明書]有効な証明書とキーが「/ etc / kubernetes / pki」に存在するようになりました
[kubeconfig] KubeConfigファイルをディスクに書き込みました： "admin.conf"
[kubeconfig] KubeConfigファイルをディスクに書き込みました：「kubelet.conf」
[kubeconfig] KubeConfigファイルをディスクに書き込みました： "controller-manager.conf"
[kubeconfig] KubeConfigファイルをディスクに書き込みました：「scheduler.conf」
[controlplane]コンポーネントkube-apiserverの静的ポッドマニフェストを「/etc/kubernetes/manifests/kube-apiserver.yaml」に書き込みました
[controlplane]コンポーネントkube-controller-managerの静的ポッドマニフェストを「/etc/kubernetes/manifests/kube-controller-manager.yaml」に書き込みました
[controlplane]コンポーネントkube-schedulerの静的ポッドマニフェストを「/etc/kubernetes/manifests/kube-scheduler.yaml」に書き込みました
[etcd]ローカルetcdインスタンスの静的ポッドマニフェストを「/etc/kubernetes/manifests/etcd.yaml」に書き込みました
[init]ディレクトリ「/ etc / kubernetes / manifests」からコントロールプレーンを静的ポッドとしてkubeletが起動するのを待機しています。
[init]コントロールプレーンイメージをプルする必要がある場合、これには1分以上かかる場合があります。

次に、kubeletログを確認します。
xx @ xx ：〜$ sudo journalctl -xeu kubelet：
Jan 31 14:45:03 cockseed kubelet [28516]：E0131 14：45：03.280984 28516 remote_runtime.go：92]ランタイムサービスからのRunPodSandboxが失敗しました：rpcエラー：コード=不明なdesc =イメージのプルに失敗しました "gcr.io/google_containers/ pause-amd64：3.0 "：デーモンからのエラー応答： https ：//gcr.io/v1/_pingを取得：tcp 172.217.6.127：443にダイヤル：i / oタイムアウト
Jan 31 14:45:03 cockseed kubelet [28516]：E0131 14：45：03.281317 28516 kuberuntime_sandbox.go：54]ポッド「kube-scheduler-kickseed_kube-system（69c12074e336b0dbbd0a1666ce05226a）」のCreatePodSandboxが失敗しました：r =イメージ "gcr.io/google_containers/pause-amd64:3.0"のプルに失敗しました：デーモンからのエラー応答： https ：//gcr.io/v1/_pingを取得：tcp 172.217.6.127：443にダイヤル：i / oタイムアウト
Jan 31 14:45:03 cockseed kubelet [28516]：E0131 14：45：03.281580 28516 kuberuntime_manager.go：647]ポッド「kube-scheduler-kickseed_kube-system（69c12074e336b0dbbd0a1666ce05226a）」のcreatePodSandboxが失敗しました：rpc =イメージ "gcr.io/google_containers/pause-amd64:3.0"のプルに失敗しました：デーモンからのエラー応答： https ：//gcr.io/v1/_pingを取得：tcp 172.217.6.127：443にダイヤル：i / oタイムアウト
Jan 31 14:45:03 cockseed kubelet [28516]：E0131 14：45：03.281875 28516 pod_workers.go：186]ポッドの同期中にエラーが発生しました69c12074e336b0dbbd0a1666ce05226a（ "kube-scheduler-kickseed_kube-system（69c12074e336b0dbb CreatePodSandboxError： "CreatePodSandbox for pod \" kube-scheduler-kickseed_kube-system（69c12074e336b0dbbd0a1666ce05226a） "for pod \" kube-scheduler-kickseed_kube-system（69c12074e336b0dbbd0a1666ce05226a） "for pod \" kube-scheduler-kickseed_kube-system（69c12074e336b0b "gcr.io/google_containers/pause-amd64：3.0 \"：デーモンからのエラー応答： https ：//gcr.io/v1/_pingを取得：tcp 172.217.6.127：443をダイヤル：i / oタイムアウト "
Jan 31 14:45:03 cockseed kubelet [28516]：E0131 14：45：03.380290 28516 event.go：209]イベントを書き込めません： 'パッチhttps://172.17.41.15：6443 / api / v1 / namespaces / default /events/kickseed.150ecf46afb098b7：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました '（スリープ後に再試行できます）
Jan 3114：45：03キックシードkubelet [28516]：E0131 14：45：03.93378328516reflector.go：205] k8s.io/kubernetes/pkg/kubelet/config/apiserver.go:47：*v1の一覧表示に失敗しました。ポッド：取得https://172.17.41.15：6443 / api / v1 / pods？fieldSelector = spec.nodeName％3Dkickseed＆limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
Jan 3114：45：03キックシードkubelet [28516]：E0131 14：45：03.934707 28516reflection.go：205] k8s.io/kubernetes/pkg/kubelet/kubelet.go:474：* v1.Nodeの一覧表示に失敗しました：取得https://172.17.41.15：6443 / api / v1 / nodes？fieldSelector = metadata.name％3Dkickseed＆limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
Jan 3114：45：03キックシードkubelet [28516]：E0131 14：45：03.935921 28516reflection.go：205] k8s.io/kubernetes/pkg/kubelet/kubelet.go:465：* v1.Serviceの一覧表示に失敗しました：取得https://172.17.41.15：6443 / api / v1 / services？limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
Jan 31 14:45:04 cockseed kubelet [28516]：E0131 14：45：04.281024 28516 remote_runtime.go：92]ランタイムサービスからのRunPodSandboxが失敗しました：rpcエラー：コード=不明なdesc =イメージ "gcr.io/google_containers/のプルに失敗しましたpause-amd64：3.0 "：デーモンからのエラー応答： https ：//gcr.io/v1/_pingを取得：tcp 172.217.6.127：443にダイヤル：i / oタイムアウト
Jan 31 14:45:04 cockseed kubelet [28516]：E0131 14：45：04.281352 28516 kuberuntime_sandbox.go：54]ポッド「kube-controller-manager-kickseed_kube-system（6546d6faf0b50c9fc6712ce25ee9b6cb）」のCreatePodSandboxが失敗しました不明なdesc =イメージのプルに失敗しました "gcr.io/google_containers/pause-amd64:3.0"：デーモンからのエラー応答： https ：//gcr.io/v1/_pingを取得：tcp 172.217.6.127：443をダイヤル：i / oタイムアウト
Jan 31 14:45:04 cockseed kubelet [28516]：E0131 14：45：04.281634 28516 kuberuntime_manager.go：647]ポッド「kube-controller-manager-kickseed_kube-system（6546d6faf0b50c9fc6712ce25ee9b6cb）」のcreatePodSandboxが失敗しました不明なdesc =イメージのプルに失敗しました "gcr.io/google_containers/pause-amd64:3.0"：デーモンからのエラー応答： https ：//gcr.io/v1/_pingを取得：tcp 172.217.6.127：443をダイヤル：i / oタイムアウト
Jan 31 14:45:04 cockseed kubelet [28516]：E0131 14：45：04.281938 28516 pod_workers.go：186]ポッドの同期中にエラーが発生しました6546d6faf0b50c9fc6712ce25ee9b6cb（ "kube-controller-manager-kickseed_kube-system（6546d6faf0b CreatePodSandboxError： "CreatePodSandbox for pod \" kube-controller-manager-kickseed_kube-system（6546d6faf0b50c9fc6712ce25ee9b6cb） "for" CreatePodSandbox "for pod \" kube-controller-manager-kickseed_kube-system（6546d6faf） desc =イメージのプルに失敗しました\ "gcr.io/google_containers/pause-amd64：3.0 \"：デーモンからのエラー応答：Get https://gcr.io/v1/_ping：dial tcp 172.217.6.127:443：i / oタイムアウト"
Jan 3114：45：04キックシードkubelet [28516]：E0131 14：45：04.934694 28516reflection.go：205] k8s.io/kubernetes/pkg/kubelet/config/apiserver.go:47：*v1の一覧表示に失敗しました。ポッド：取得https://172.17.41.15：6443 / api / v1 / pods？fieldSelector = spec.nodeName％3Dkickseed＆limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
Jan 3114：45：04キックシードkubelet [28516]：E0131 14：45：04.935613 28516reflection.go：205] k8s.io/kubernetes/pkg/kubelet/kubelet.go:474：* v1.Nodeの一覧表示に失敗しました：取得https://172.17.41.15：6443 / api / v1 / nodes？fieldSelector = metadata.name％3Dkickseed＆limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
Jan 3114：45：04キックシードkubelet [28516]：E0131 14：45：04.936669 28516reflection.go：205] k8s.io/kubernetes/pkg/kubelet/kubelet.go:465：* v1.Serviceの一覧表示に失敗しました：取得https://172.17.41.15：6443 / api / v1 / services？limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
1月31日14:45:05キックシードkubelet [28516]：W0131 14：45：05.073692 28516 cni.go：171] cni構成を更新できません：/etc/cni/net.dにネットワークが見つかりません
Jan 31 14:45:05 cockseed kubelet [28516]：E0131 14：45：05.074106 28516 kubelet.go：2105]コンテナランタイムネットワークの準備ができていません：NetworkReady = false理由：NetworkPluginNotReady メッセージ： docker：ネットワークプラグインの準備ができていません：cni config初期化されていません
Jan 3114：45：05キックシードkubelet [28516]：E0131 14：45：05.935680 28516reflection.go：205] k8s.io/kubernetes/pkg/kubelet/config/apiserver.go:47：*v1の一覧表示に失敗しました。ポッド：取得https://172.17.41.15：6443 / api / v1 / pods？fieldSelector = spec.nodeName％3Dkickseed＆limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
Jan 3114：45：05キックシードkubelet [28516]：E0131 14：45：05.937423 28516reflection.go：205] k8s.io/kubernetes/pkg/kubelet/kubelet.go:474：* v1.Nodeの一覧表示に失敗しました：取得https://172.17.41.15：6443 / api / v1 / nodes？fieldSelector = metadata.name％3Dkickseed＆limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
Jan 3114：45：05キックシードkubelet [28516]：E0131 14：45：05.937963 28516reflection.go：205] k8s.io/kubernetes/pkg/kubelet/kubelet.go:465：リストに失敗しました* v1.Service：取得https://172.17.41.15：6443 / api / v1 / services？limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
Jan 3114：45：05キックシードkubelet [28516]：I0131 14：45：05.974034 28516kubelet_node_status.go：273]ボリュームコントローラーのアタッチ/デタッチを有効にするノード注釈の設定
Jan 3114：45：06キックシードkubelet [28516]：I0131 14：45：06.802447 28516kubelet_node_status.go：273]ボリュームコントローラーのアタッチ/デタッチを有効にするノード注釈の設定
Jan 3114：45：06キックシードkubelet [28516]：I0131 14：45：06.804242 28516kubelet_node_status.go：82]ノードキックシードを登録しようとしています
Jan 31 14:45:06 cockseed kubelet [28516]：E0131 14：45：06.804778 28516 kubelet_node_status.go：106]ノード「kickseed」をAPIサーバーに登録できません：投稿https://172.17.41.15：6443 / api / v1 /ノード：ダイヤルtcp 172.17.41.15：6443：getsockopt：con

xx @ xx ：〜$ sudo systemctl status kubelet：

kubelet.service-kubelet：Kubernetesノードエージェント
ロード済み：ロード済み（/lib/systemd/system/kubelet.service;有効;ベンダープリセット：有効）
ドロップイン：/etc/systemd/system/kubelet.service.d
└─11-kubeadm.conf、10-kubeadm1.conf、90-local-extras.conf
アクティブ：水2018-01-31 13:53:46 CST以降アクティブ（実行中）。 49分前
ドキュメント：http： //kubernetes.io/docs/
メインPID：28516（kubelet）
タスク：13
メモリ：37.8M
CPU：22.767s
CGroup：/system.slice/kubelet.service
└─28516/ usr / bin / kubelet --bootstrap-kubeconfig = / etc / kubernetes / bootstrap-kubelet.conf --kubeconfig = / etc / kubernetes / kubelet.conf --pod-manifest-path = / etc / kubernetes /マニフェスト--allow-privileged = true --cgroup-driver = cgroupfs --network-plugin = cni --cni-conf-dir = / etc / cni / net.d --cni-bin-dir = / opt / cni / bin --cluster-dns = 10.96.0.10 --cluster-domain = cluster.local --authorization-mode = Webhook --client-ca-file = / etc / kubernetes / pki / ca.crt --cadvisor-port = 0 --rotate-certificates = true --cert-dir = / var / lib / kubelet / pki --fail-swap-on = false

Jan 3114：43：17キックシードkubelet [28516]：E0131 14：43：17.86259028516reflector.go：205] k8s.io/kubernetes/pkg/kubelet/kubelet.go:474：* v1.Nodeの一覧表示に失敗しました： Get https：//172.17.41.15：6443 / api / v1 / nodes？fieldSelector = metadata.name％3Dkickseed＆limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
Jan 3114：43：17キックシードkubelet [28516]：E0131 14：43：17.86347428516reflector.go：205] k8s.io/kubernetes/pkg/kubelet/kubelet.go:465：リストに失敗しました* v1.Service：取得https://172.17.41.15：6443 / api / v1 / services？limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
Jan 31 14:43:18 cockseed kubelet [28516]：E0131 14：43：18.621818 28516 event.go：209]イベントを書き込めません： 'パッチhttps://172.17.41.15：6443 / api / v1 / namespaces / default /events/kickseed.150ecf46afb098b7：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました '（スリープ後に再試行できます）
Jan 3114：43：18キックシードkubelet [28516]：E0131 14：43：18.862440 28516reflection.go：205] k8s.io/kubernetes/pkg/kubelet/config/apiserver.go:47：*v1の一覧表示に失敗しました。ポッド：取得https://172.17.41.15：6443 / api / v1 / Pods？fieldSelector = spec.nodeName％3Dkickseed＆limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
Jan 3114：43：18キックシードkubelet [28516]：E0131 14：43：18.863379 28516reflection.go：205] k8s.io/kubernetes/pkg/kubelet/kubelet.go:474：* v1.Nodeの一覧表示に失敗しました： Get https：//172.17.41.15：6443 / api / v1 / nodes？fieldSelector = metadata.name％3Dkickseed＆limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
Jan 3114：43：18キックシードkubelet [28516]：E0131 14：43：18.864424 28516reflection.go：205] k8s.io/kubernetes/pkg/kubelet/kubelet.go:465：* v1.Serviceの一覧表示に失敗しました：取得https://172.17.41.15：6443 / api / v1 / services？limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
1月31日14:43:19キックシードkubelet [28516]：E0131 14：43：19.255460 28516 eviction_manager.go：238]エビクションマネージャー：予期しないエラー：ノード情報の取得に失敗しました：ノード「キックシード」が見つかりません
Jan 3114：43：19キックシードkubelet [28516]：E0131 14：43：19.86326628516reflector.go：205] k8s.io/kubernetes/pkg/kubelet/config/apiserver.go:47：*v1の一覧表示に失敗しました。ポッド：取得https://172.17.41.15：6443 / api / v1 / Pods？fieldSelector = spec.nodeName％3Dkickseed＆limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
Jan 3114：43：19キックシードkubelet [28516]：E0131 14：43：19.864238 28516reflection.go：205] k8s.io/kubernetes/pkg/kubelet/kubelet.go:474：* v1.Nodeの一覧表示に失敗しました： Get https：//172.17.41.15：6443 / api / v1 / nodes？fieldSelector = metadata.name％3Dkickseed＆limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました
Jan 3114：43：19キックシードkubelet [28516]：E0131 14：43：19.865262 28516reflection.go：205] k8s.io/kubernetes/pkg/kubelet/kubelet.go:465：* v1.Serviceの一覧表示に失敗しました：取得https://172.17.41.15：6443 / api / v1 / services？limit = 500＆resourceVersion = 0：ダイヤルtcp 172.17.41.15：6443：getsockopt：接続が拒否されました

一部のDockerイメージは次のようにリストされています。
gcr.io/google_containers/kube-apiserver-amd64:v1.9.2
gcr.io/google_containers/kube-controller-manager-amd64:v1.9.2
gcr.io/google_containers/kube-scheduler-amd64:v1.9.2
gcr.io/google_containers/kube-proxy-amd64:v1.9.2
gcr.io/google_containers/etcd-amd64:3.2.14
gcr.io/google_containers/pause-amd64:3.1
gcr.io/google_containers/kube-dnsmasq-amd64:1.4.1
gcr.io/google_containers/kubernetes-dashboard-amd64:v1.8.2
gcr.io/google_containers/kubedns-amd64:1.9
gcr.io/google_containers/kube-discovery-amd64:1.0
gcr.io/google_containers/exechealthz-amd64:v1.2.0
gcr.io/google_containers/k8s-dns-kube-dns-amd64:1.14.8
gcr.io/google_containers/k8s-dns-dnsmasq-nanny-amd64:1.14.8
gcr.io/google_containers/k8s-dns-sidecar-amd64:1.14.8
gcr.io/google_containers/dnsmasq-metrics-amd64:1.0.1

あなたは何が起こると思っていましたか？

kubeadminitが完了する必要があります

それをどのように再現するか（可能な限り最小限かつ正確に）？

Ubuntu16.04およびkubeadm1.9.2を搭載したvirtualbox

他に知っておくべきことはありますか？

areUX lifecyclactive prioritimportant-soon

ソース

PhoenixAD

👍12

最も参考になるコメント

https://github.com/kubernetes/kubernetes/issues/59680#issuecomment -364646304
selinuxを無効にすることは私を助けました。

avielb 2018年03月19日

😕7 👍7 👎6 🎉2 ❤1

全てのコメント67件

上記のDockerイメージは、「kubeadm init --kubernetes-version v1.9.2」を実行する前にプライベートリポジトリから取得されました。GFWが原因で、gcr.io / google-containersに直接アクセスできません。

PhoenixAD 2018年01月31日

ここでも同じ問題です！

hedinasr 2018年02月06日

CentOS7でも同じ問題があります

6l20 2018年02月07日

fluidjeel 2018年02月08日

newhomie 2018年02月09日

tmilleville 2018年02月09日

+1
vultr上のサーバー、ここでもスタックしています。

WindGreen 2018年02月09日

grantcurell 2018年02月09日

humorcode 2018年02月12日

CFAndy 2018年02月12日

回避策として

1 / kubernetesマスターにDockerレジストリを作成します

2 / / etc / hostsでkubernetesマスターをgcr.ioとして宣言します

3 /インターネットにアクセスできるマシンで、ggogleクラウドにログオンし、画像をダウンロードします
例：
gloud docker --pull gcrio / goole_container / pause-amd64：3.0
gloud docker --save -o /tmp/pause-amd.tar gcrio / goole_container / pause-amd64：3.0

4 /画像をDockerリポジトリレジストリにアップロードする
docker load -i /tmp/pause-amd64.tar
docker tag gcr.io/Google_containers/pause-amd64:3.0 yourdoke rregistry：pause-amd64 ：3.0
docker push yourdoke rregistry：pause-amd64 ：3.0

5 / kebernetesマスターでgcr.iodockerレジストリとして

Dockerレジストリリポジトリから画像を取得します
docker pull yourdocke rregistry：pause-amd64 ：3.0

ローカルのgcr.iodockerレジストリにプルします
docker tag yourdocke rregistry：pause-amd64 ：3.0 gcr.io/google_containers/pause-amd64:3.0
docker push gcr.io/google_containers/pause-amd64:3.0

kubeadminitが使用するすべての画像をダウンロードします。 /etc/kubernetes/manifest/*.yamlを参照してください

tmilleville 2018年02月12日

👎31 👍1

1.9.3で修正されていますか？

alexpekurovsky 2018年02月16日

edwardofclt 2018年02月23日

+ 1-これは、kubeadminitを2回実行したときにのみ発生します。初めてはうまくいきます。 kubeadmリセットで適切にクリーンアップされない、最初の実行からの状態が少しあるかどうかはわかりません。

patrickstjohn 2018年02月25日

emisty 2018年02月27日

centos7と私は/ etc / envにプロキシを設定し、👎として表示します

emisty 2018年02月27日

😕1

simis2626 2018年02月28日

ここでも同じ問題があります。 Centos7、最新のkube install（1.9.3）は、hightowerのドキュメントとすべてのkubernetesドキュメントを試しました。 etcdとflannelは機能しており、稼働しています。 NO_PROXY env変数を使用して、外部IPを挿入し、他の接続へのプロキシ接続を試行しないようにしましたが、実際にはそのポイントに到達せず、上記の他のすべてのユーザーと同じエラーが発生します。

multipathmaster 2018年02月28日

robertBrem 2018年03月02日

私は同じ問題を抱えています、centos 7、kubelet v1.9.3;
しかし、画像は正常にダウンロードされているようです。
docker images
gcr.io/google_containers/kube-apiserver-amd64 v1.9.3 360d55f91cbf 4 weeks ago 210.5 MB gcr.io/google_containers/kube-controller-manager-amd64 v1.9.3 83dbda6ee810 4 weeks ago 137.8 MB gcr.io/google_containers/kube-scheduler-amd64 v1.9.3 d3534b539b76 4 weeks ago 62.71 MB gcr.io/google_containers/etcd-amd64 3.1.11 59d36f27cceb 3 months ago 193.9 MB gcr.io/google_containers/pause-amd64 3.0 99e59f495ffa 22 months ago 746.9 kB

wangsenyuan 2018年03月08日

❤1

ここにCentOS7 vmがあり、プロキシサーバーで既に構成されています。
同じタイムアウトのメッセージが表示されましたが、Dockerイメージがプルされ、稼働しています。

mvsouza 2018年03月08日

私も同じ問題を抱えています。詳細については、出力とログを参照してください。

`` `[ root @ kube01〜 ] ＃kubeadm init
[init] Kubernetesバージョンの使用：v1.9.3
[init]認証モードの使用：[ノードRBAC]
[プリフライト]プリフライトチェックを実行します。
[警告ホスト名]：ホスト名 "kube01"に到達できませんでした
[警告ホスト名]：ホスト名 "kube01"は10.10.0.81:53でkube01を検索します：サーバーの誤動作
[警告FileExisting-crictl]：システムパスにcrictlが見つかりません
【プリフライト】クベレットサービス開始
[証明書]生成されたca証明書とキー。
[証明書]生成されたapiserver証明書とキー。
[証明書]証明書を提供するapiserverは、DNS名[kube01 kubernetes kubernetes.default kubernetes.default.svckubernetes.default.svc.cluster.local]とIP [10.96.0.1 10.25.123.11]
[証明書]生成されたapiserver-kubelet-client証明書とキー。
[証明書]生成されたsaキーと公開キー。
[証明書]生成されたfront-proxy-ca証明書とキー。
[証明書]生成されたfront-proxy-client証明書とキー。
[証明書]有効な証明書とキーが「/ etc / kubernetes / pki」に存在するようになりました
[kubeconfig] KubeConfigファイルをディスクに書き込みました： "admin.conf"
[kubeconfig] KubeConfigファイルをディスクに書き込みました：「kubelet.conf」
[kubeconfig] KubeConfigファイルをディスクに書き込みました： "controller-manager.conf"
[kubeconfig] KubeConfigファイルをディスクに書き込みました：「scheduler.conf」
[controlplane]コンポーネントkube-apiserverの静的ポッドマニフェストを「/etc/kubernetes/manifests/kube-apiserver.yaml」に書き込みました
[controlplane]コンポーネントkube-controller-managerの静的ポッドマニフェストを「/etc/kubernetes/manifests/kube-controller-manager.yaml」に書き込みました
[controlplane]コンポーネントkube-schedulerの静的ポッドマニフェストを「/etc/kubernetes/manifests/kube-scheduler.yaml」に書き込みました
[etcd]ローカルetcdインスタンスの静的ポッドマニフェストを「/etc/kubernetes/manifests/etcd.yaml」に書き込みました
[init]ディレクトリ「/ etc / kubernetes / manifests」からコントロールプレーンを静的ポッドとしてkubeletが起動するのを待機しています。
[init]コントロールプレーンイメージをプルする必要がある場合、これには1分以上かかる場合があります。

In the meantime, while watching `docker ps` this is what I see:
***Note:*** Don't mind the length of time that the containers have been up — this is my third attempt and it's always the same.

```CONTAINER ID        IMAGE
              COMMAND                  CREATED              STATUS              PORTS               NAMES
c422b3fd67f9        gcr.io/google_containers/kube-apiserver-amd64<strong i="5">@sha256</strong>:a5382344aa373a90bc87d3baa4eda5402507e8df5b8bfbbad392c4fff715f0
43            "kube-apiserver --req"   About a minute ago   Up About a minute                       k8s_kube-apiserver_kube-apiserver-k
ube01_kube-system_3ff6faac27328cf290a026c08ae0ce75_1
4b30b98bcc24        gcr.io/google_containers/kube-controller-manager-amd64<strong i="6">@sha256</strong>:3ac295ae3e78af5c9f88164ae95097c2d7af03caddf067cb35599
769d0b7251e   "kube-controller-mana"   2 minutes ago        Up 2 minutes                            k8s_kube-controller-manager_kube-co
ntroller-manager-kube01_kube-system_d556d9b8ccdd523a5208b391ca206031_0
71c6505ed125        gcr.io/google_containers/kube-scheduler-amd64<strong i="7">@sha256</strong>:2c17e637c8e4f9202300bd5fc26bc98a7099f49559ca0a8921cf692ffd4a16
75            "kube-scheduler --add"   2 minutes ago        Up 2 minutes                            k8s_kube-scheduler_kube-scheduler-k
ube01_kube-system_6502dddc08d519eb6bbacb5131ad90d0_0
9d01e2de4686        gcr.io/google_containers/pause-amd64:3.0
              "/pause"                 3 minutes ago        Up 2 minutes                            k8s_POD_kube-controller-manager-kub
e01_kube-system_d556d9b8ccdd523a5208b391ca206031_0
7fdaabc7e2a7        gcr.io/google_containers/pause-amd64:3.0
              "/pause"                 3 minutes ago        Up 2 minutes                            k8s_POD_kube-apiserver-kube01_kube-
system_3ff6faac27328cf290a026c08ae0ce75_0
a5a2736e6cd0        gcr.io/google_containers/pause-amd64:3.0
              "/pause"                 3 minutes ago        Up 2 minutes                            k8s_POD_kube-scheduler-kube01_kube-
system_6502dddc08d519eb6bbacb5131ad90d0_0
ea82cd3a27da        gcr.io/google_containers/pause-amd64:3.0
              "/pause"                 3 minutes ago        Up 2 minutes                            k8s_POD_etcd-kube01_kube-system_727
8f85057e8bf5cb81c9f96d3b25320_0

gcr.io/google_containers/ kube-apiserver-amd64 @ sha256のログ出力：a5382344aa373a90bc87d3baa4eda5402507e8df5b8bfbbad392c4fff715f043

I0309 19:59:29.570990       1 server.go:121] Version: v1.9.3
I0309 19:59:29.756611       1 feature_gate.go:190] feature gates: map[Initializers:true]
I0309 19:59:29.756680       1 initialization.go:90] enabled Initializers feature as part of admission plugin setup
I0309 19:59:29.760396       1 master.go:225] Using reconciler: master-count
W0309 19:59:29.789648       1 genericapiserver.go:342] Skipping API batch/v2alpha1 because it has no resources.
W0309 19:59:29.796731       1 genericapiserver.go:342] Skipping API rbac.authorization.k8s.io/v1alpha1 because it has no resources.
W0309 19:59:29.797445       1 genericapiserver.go:342] Skipping API storage.k8s.io/v1alpha1 because it has no resources.
W0309 19:59:29.804841       1 genericapiserver.go:342] Skipping API admissionregistration.k8s.io/v1alpha1 because it has no resources.
[restful] 2018/03/09 19:59:29 log.go:33: [restful/swagger] listing is available at https://10.25.123.11:6443/swaggerapi
[restful] 2018/03/09 19:59:29 log.go:33: [restful/swagger] https://10.25.123.11:6443/swaggerui/ is mapped to folder /swagger-ui/
[restful] 2018/03/09 19:59:30 log.go:33: [restful/swagger] listing is available at https://10.25.123.11:6443/swaggerapi
[restful] 2018/03/09 19:59:30 log.go:33: [restful/swagger] https://10.25.123.11:6443/swaggerui/ is mapped to folder /swagger-ui/
I0309 19:59:32.393800       1 serve.go:89] Serving securely on [::]:6443
I0309 19:59:32.393854       1 apiservice_controller.go:112] Starting APIServiceRegistrationController
I0309 19:59:32.393866       1 cache.go:32] Waiting for caches to sync for APIServiceRegistrationController controller
I0309 19:59:32.393965       1 controller.go:84] Starting OpenAPI AggregationController
I0309 19:59:32.393998       1 crdregistration_controller.go:110] Starting crd-autoregister controller
I0309 19:59:32.394012       1 controller_utils.go:1019] Waiting for caches to sync for crd-autoregister controller
I0309 19:59:32.394034       1 customresource_discovery_controller.go:152] Starting DiscoveryController
I0309 19:59:32.394057       1 naming_controller.go:274] Starting NamingConditionController
I0309 19:59:32.393855       1 crd_finalizer.go:242] Starting CRDFinalizer
I0309 19:59:32.394786       1 available_controller.go:262] Starting AvailableConditionController
I0309 19:59:32.394815       1 cache.go:32] Waiting for caches to sync for AvailableConditionController controller
I0309 20:00:06.434318       1 trace.go:76] Trace[12318713]: "Create /api/v1/nodes" (started: 2018-03-09 19:59:32.431463052 +0000 UTC m=+2.986431803) (total time: 34.002792758s):
Trace[12318713]: [4.00201898s] [4.001725343s] About to store object in database
Trace[12318713]: [34.002792758s] [30.000773778s] END
E0309 20:00:32.406206       1 reflector.go:205] k8s.io/kubernetes/pkg/client/informers/informers_generated/internalversion/factory.go:85: Failed to list *core.LimitRange: the server was unable to return a response in the time allotted, but may still be processing the request (get limitranges)
E0309 20:00:32.406339       1 reflector.go:205] k8s.io/kubernetes/pkg/client/informers/informers_generated/internalversion/factory.go:85: Failed to list *core.Secret: the server was unable to return a response in the time allotted, but may still be processing the request (get secrets)
E0309 20:00:32.406342       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/kube-aggregator/pkg/client/informers/internalversion/factory.go:73: Failed to list *apiregistration.APIService: the server was unable to return a response in the time allotted, but may still be processing the request (get apiservices.apiregistration.k8s.io)
E0309 20:00:32.408094       1 reflector.go:205] k8s.io/kubernetes/pkg/client/informers/informers_generated/internalversion/factory.go:85: Failed to list *core.Pod: the server was unable to return a response in the time allotted, but may still be processing the request (get pods)
E0309 20:00:32.415692       1 reflector.go:205] k8s.io/kubernetes/pkg/client/informers/informers_generated/internalversion/factory.go:85: Failed to list *core.PersistentVolume: the server was unable to return a response in the time allotted, but may still be processing the request (get persistentvolumes)
E0309 20:00:32.415818       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/apiextensions-apiserver/pkg/client/informers/internalversion/factory.go:73: Failed to list *apiextensions.CustomResourceDefinition: the server was unable to return a response in the time allotted, but may still be processing the request (get customresourcedefinitions.apiextensions.k8s.io)
E0309 20:00:32.415862       1 reflector.go:205] k8s.io/kubernetes/pkg/client/informers/informers_generated/internalversion/factory.go:85: Failed to list *rbac.ClusterRoleBinding: the server was unable to return a response in the time allotted, but may still be processing the request (get clusterrolebindings.rbac.authorization.k8s.io)
E0309 20:00:32.415946       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Namespace: the server was unable to return a response in the time allotted, but may still be processing the request (get namespaces)
E0309 20:00:32.416029       1 reflector.go:205] k8s.io/kubernetes/pkg/client/informers/informers_generated/internalversion/factory.go:85: Failed to list *core.ResourceQuota: the server was unable to return a response in the time allotted, but may still be processing the request (get resourcequotas)
E0309 20:00:32.416609       1 reflector.go:205] k8s.io/kubernetes/pkg/client/informers/informers_generated/internalversion/factory.go:85: Failed to list *rbac.ClusterRole: the server was unable to return a response in the time allotted, but may still be processing the request (get clusterroles.rbac.authorization.k8s.io)
E0309 20:00:32.416684       1 reflector.go:205] k8s.io/kubernetes/pkg/client/informers/informers_generated/internalversion/factory.go:85: Failed to list *rbac.RoleBinding: the server was unable to return a response in the time allotted, but may still be processing the request (get rolebindings.rbac.authorization.k8s.io)
E0309 20:00:32.420305       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Endpoints: the server was unable to return a response in the time allotted, but may still be processing the request (get endpoints)
E0309 20:00:32.440196       1 reflector.go:205] k8s.io/kubernetes/pkg/client/informers/informers_generated/internalversion/factory.go:85: Failed to list *storage.StorageClass: the server was unable to return a response in the time allotted, but may still be processing the request (get storageclasses.storage.k8s.io)
E0309 20:00:32.440403       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Service: the server was unable to return a response in the time allotted, but may still be processing the request (get services)
E0309 20:00:32.448018       1 reflector.go:205] k8s.io/kubernetes/pkg/client/informers/informers_generated/internalversion/factory.go:85: Failed to list *core.ServiceAccount: the server was unable to return a response in the time allotted, but may still be processing the request (get serviceaccounts)
E0309 20:00:32.448376       1 reflector.go:205] k8s.io/kubernetes/pkg/client/informers/informers_generated/internalversion/factory.go:85: Failed to list *rbac.Role: the server was unable to return a response in the time allotted, but may still be processing the request (get roles.rbac.authorization.k8s.io)
E0309 20:00:33.395988       1 storage_rbac.go:175] unable to initialize clusterroles: the server was unable to return a response in the time allotted, but may still be processing the request (get clusterroles.rbac.authorization.k8s.io)
I0309 20:00:43.455564       1 trace.go:76] Trace[375160879]: "Create /api/v1/nodes" (started: 2018-03-09 20:00:13.454506587 +0000 UTC m=+44.009475397) (total time: 30.001008377s):
Trace[375160879]: [30.001008377s] [30.000778516s] END

================================================== ====================

gcr.io/google_containers/ kube -controller-manager-amd64 @ sha256のログ出力：3ac295ae3e78af5c9f88164ae95097c2d7af03caddf067cb35599769d0b7251e

I0309 19:51:35.248083       1 controllermanager.go:108] Version: v1.9.3
I0309 19:51:35.257251       1 leaderelection.go:174] attempting to acquire leader lease...
E0309 19:51:38.310839       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:51:41.766358       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:51:46.025824       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:51:49.622916       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:51:52.675648       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:51:55.697734       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:51:59.348765       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:01.508487       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:03.886473       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:06.120356       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:08.844772       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:12.083789       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:16.038882       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:18.555388       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:21.471034       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:24.236724       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:27.363968       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:30.045776       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:32.751626       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:36.383923       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:38.910958       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:41.400748       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:44.268909       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:47.640891       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:51.713420       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:54.419154       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:52:57.134430       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:00.942903       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:03.440586       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:07.518362       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:53:12.968927       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:16.228760       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:18.299005       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:20.681915       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:24.141874       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:28.484775       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:30.678092       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:34.107654       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:36.251647       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:39.914756       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:42.641017       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:45.058876       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:48.359511       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:51.667554       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:54.338101       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:53:57.357894       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:54:00.633504       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:54:03.244353       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:54:05.923510       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:54:09.817627       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:54:12.688349       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:54:16.803954       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:54:19.519269       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:54:23.668226       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:54:25.903217       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:54:30.248639       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:54:32.428029       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:54:34.962675       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:54:38.598370       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:54:41.179039       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:54:43.927574       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:54:48.190961       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:54:51.974141       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:54:55.898687       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:54:59.653210       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:02.094737       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:05.125275       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:09.280324       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:12.920886       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:17.272605       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:21.488182       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:23.708198       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:26.893696       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:31.121014       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:35.414628       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:38.252001       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:41.912479       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:45.621133       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:48.976244       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:52.537317       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:55.863737       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:55:59.682009       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:02.653432       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:04.968939       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:09.336478       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:56:13.488850       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:56:16.262967       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:56:22.685928       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:26.235497       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:28.442915       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:32.051827       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:35.547277       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:38.437120       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:41.007877       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:44.295081       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:46.746424       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:49.321870       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:52.831866       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:55.138333       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:56:57.815491       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:57:00.802112       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:57:03.848363       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:57:07.350593       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:57:10.672982       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:57:14.171660       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:57:17.923995       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:57:21.919624       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:57:23.923165       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:57:27.692006       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:57:30.654447       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:57:33.851703       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:57:37.302382       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:57:40.286552       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:57:42.358940       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:57:44.364982       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:57:46.372569       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:57:50.571683       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:57:53.988093       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:57:57.648006       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:01.607961       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:05.717138       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:08.819600       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:12.262314       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:14.327626       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:18.359683       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:20.961212       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:24.503457       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:27.099581       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:29.518623       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:32.943210       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:36.900236       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:40.567479       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:42.642410       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:45.938839       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:50.282483       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:54.086558       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:58:56.794469       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:59:00.604370       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:59:02.968978       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:59:05.825551       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:59:09.824458       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:59:12.383249       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:59:15.891164       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:59:19.088375       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:59:21.305063       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:59:23.366258       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:59:26.308481       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: Get https://10.25.123.11:6443/api/v1/namespaces/kube-system/endpoints/kube-controller-manager: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:59:32.440045       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:59:36.673744       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:59:40.049109       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:59:43.463730       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:59:46.454431       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:59:49.782639       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:59:52.964468       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 19:59:57.265527       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:01.181219       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:03.441468       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:07.324053       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:10.269835       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:12.584906       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:15.042928       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:18.820764       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:22.392476       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:24.630702       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:27.881904       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:30.123513       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:32.490088       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:34.675420       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:37.433904       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:39.819475       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"
E0309 20:00:42.152164       1 leaderelection.go:224] error retrieving resource lock kube-system/kube-controller-manager: endpoints "kube-controller-manager" is forbidden: User "system:kube-controller-manager" cannot get endpoints in the namespace "kube-system"

================================================== ====================

gcr.io/google_containers/ kube -scheduler-amd64 @ sha256のログ出力：2c17e637c8e4f9202300bd5fc26bc98a7099f49559ca0a8921cf692ffd4a1675

W0309 19:51:34.800737       1 server.go:159] WARNING: all flags than --config are deprecated. Please begin using a config file ASAP.
I0309 19:51:34.812848       1 server.go:551] Version: v1.9.3
I0309 19:51:34.817093       1 server.go:570] starting healthz server on 127.0.0.1:10251
E0309 19:51:34.818028       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.PodDisruptionBudget: Get https://10.25.123.11:6443/apis/policy/v1beta1/poddisruptionbudgets?limit=500&resourceVersion=0: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:51:34.818279       1 reflector.go:205] k8s.io/kubernetes/plugin/cmd/kube-scheduler/app/server.go:590: Failed to list *v1.Pod: Get https://10.25.123.11:6443/api/v1/pods?fieldSelector=spec.schedulerName%3Ddefault-scheduler%2Cstatus.phase%21%3DFailed%2Cstatus.phase%21%3DSucceeded&limit=500&resourceVersion=0: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:51:34.818346       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolumeClaim: Get https://10.25.123.11:6443/api/v1/persistentvolumeclaims?limit=500&resourceVersion=0: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:51:34.818408       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.StatefulSet: Get https://10.25.123.11:6443/apis/apps/v1beta1/statefulsets?limit=500&resourceVersion=0: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:51:34.819028       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Service: Get https://10.25.123.11:6443/api/v1/services?limit=500&resourceVersion=0: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:51:34.819386       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Node: Get https://10.25.123.11:6443/api/v1/nodes?limit=500&resourceVersion=0: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:51:34.820217       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.ReplicaSet: Get https://10.25.123.11:6443/apis/extensions/v1beta1/replicasets?limit=500&resourceVersion=0: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:51:34.820659       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolume: Get https://10.25.123.11:6443/api/v1/persistentvolumes?limit=500&resourceVersion=0: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:51:34.821783       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.ReplicationController: Get https://10.25.123.11:6443/api/v1/replicationcontrollers?limit=500&resourceVersion=0: dial tcp 10.25.123.11:6443: getsockopt: connection refused
E0309 19:51:38.320455       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.PodDisruptionBudget: poddisruptionbudgets.policy is forbidden: User "system:kube-scheduler" cannot list poddisruptionbudgets.policy at the cluster scope
E0309 19:51:38.329101       1 reflector.go:205] k8s.io/kubernetes/plugin/cmd/kube-scheduler/app/server.go:590: Failed to list *v1.Pod: pods is forbidden: User "system:kube-scheduler" cannot list pods at the cluster scope
E0309 19:51:38.329733       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.ReplicationController: replicationcontrollers is forbidden: User "system:kube-scheduler" cannot list replicationcontrollers at the cluster scope
E0309 19:51:38.332670       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.ReplicaSet: replicasets.extensions is forbidden: User "system:kube-scheduler" cannot list replicasets.extensions at the cluster scope
E0309 19:51:38.332707       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Node: nodes is forbidden: User "system:kube-scheduler" cannot list nodes at the cluster scope
E0309 19:51:38.332734       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolumeClaim: persistentvolumeclaims is forbidden: User "system:kube-scheduler" cannot list persistentvolumeclaims at the cluster scope
E0309 19:51:38.334248       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolume: persistentvolumes is forbidden: User "system:kube-scheduler" cannot list persistentvolumes at the cluster scope
E0309 19:51:38.334568       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.StatefulSet: statefulsets.apps is forbidden: User "system:kube-scheduler" cannot list statefulsets.apps at the cluster scope
E0309 19:51:38.334594       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Service: services is forbidden: User "system:kube-scheduler" cannot list services at the cluster scope
E0309 19:51:39.322884       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.PodDisruptionBudget: poddisruptionbudgets.policy is forbidden: User "system:kube-scheduler" cannot list poddisruptionbudgets.policy at the cluster scope
E0309 19:51:39.331726       1 reflector.go:205] k8s.io/kubernetes/plugin/cmd/kube-scheduler/app/server.go:590: Failed to list *v1.Pod: pods is forbidden: User "system:kube-scheduler" cannot list pods at the cluster scope
E0309 19:51:39.333093       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.ReplicationController: replicationcontrollers is forbidden: User "system:kube-scheduler" cannot list replicationcontrollers at the cluster scope
E0309 19:51:39.335939       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.ReplicaSet: replicasets.extensions is forbidden: User "system:kube-scheduler" cannot list replicasets.extensions at the cluster scope
E0309 19:51:39.335988       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Node: nodes is forbidden: User "system:kube-scheduler" cannot list nodes at the cluster scope
E0309 19:51:39.336229       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolumeClaim: persistentvolumeclaims is forbidden: User "system:kube-scheduler" cannot list persistentvolumeclaims at the cluster scope
E0309 19:51:39.336514       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolume: persistentvolumes is forbidden: User "system:kube-scheduler" cannot list persistentvolumes at the cluster scope
E0309 19:51:39.337881       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.StatefulSet: statefulsets.apps is forbidden: User "system:kube-scheduler" cannot list statefulsets.apps at the cluster scope
E0309 19:51:39.338784       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Service: services is forbidden: User "system:kube-scheduler" cannot list services at the cluster scope
E0309 19:51:40.323869       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.PodDisruptionBudget: poddisruptionbudgets.policy is forbidden: User "system:kube-scheduler" cannot list poddisruptionbudgets.policy at the cluster scope
E0309 19:51:40.332910       1 reflector.go:205] k8s.io/kubernetes/plugin/cmd/kube-scheduler/app/server.go:590: Failed to list *v1.Pod: pods is forbidden: User "system:kube-scheduler" cannot list pods at the cluster scope
E0309 19:51:40.334120       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.ReplicationController: replicationcontrollers is forbidden: User "system:kube-scheduler" cannot list replicationcontrollers at the cluster scope
E0309 19:51:40.337188       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.ReplicaSet: replicasets.extensions is forbidden: User "system:kube-scheduler" cannot list replicasets.extensions at the cluster scope
E0309 19:51:40.338218       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Node: nodes is forbidden: User "system:kube-scheduler" cannot list nodes at the cluster scope
E0309 19:51:40.339267       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolumeClaim: persistentvolumeclaims is forbidden: User "system:kube-scheduler" cannot list persistentvolumeclaims at the cluster scope
E0309 19:51:40.340635       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolume: persistentvolumes is forbidden: User "system:kube-scheduler" cannot list persistentvolumes at the cluster scope
E0309 19:51:40.342035       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.StatefulSet: statefulsets.apps is forbidden: User "system:kube-scheduler" cannot list statefulsets.apps at the cluster scope
E0309 19:51:40.343070       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Service: services is forbidden: User "system:kube-scheduler" cannot list services at the cluster scope
E0309 19:51:41.325987       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.PodDisruptionBudget: poddisruptionbudgets.policy is forbidden: User "system:kube-scheduler" cannot list poddisruptionbudgets.policy at the cluster scope
E0309 19:51:41.334782       1 reflector.go:205] k8s.io/kubernetes/plugin/cmd/kube-scheduler/app/server.go:590: Failed to list *v1.Pod: pods is forbidden: User "system:kube-scheduler" cannot list pods at the cluster scope
E0309 19:51:41.336320       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.ReplicationController: replicationcontrollers is forbidden: User "system:kube-scheduler" cannot list replicationcontrollers at the cluster scope
E0309 19:51:41.338996       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.ReplicaSet: replicasets.extensions is forbidden: User "system:kube-scheduler" cannot list replicasets.extensions at the cluster scope
E0309 19:51:41.339923       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Node: nodes is forbidden: User "system:kube-scheduler" cannot list nodes at the cluster scope
E0309 19:51:41.340904       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolumeClaim: persistentvolumeclaims is forbidden: User "system:kube-scheduler" cannot list persistentvolumeclaims at the cluster scope
E0309 19:51:41.342304       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolume: persistentvolumes is forbidden: User "system:kube-scheduler" cannot list persistentvolumes at the cluster scope
E0309 19:51:41.343675       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.StatefulSet: statefulsets.apps is forbidden: User "system:kube-scheduler" cannot list statefulsets.apps at the cluster scope
E0309 19:51:41.344622       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Service: services is forbidden: User "system:kube-scheduler" cannot list services at the cluster scope
E0309 19:51:42.328038       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.PodDisruptionBudget: poddisruptionbudgets.policy is forbidden: User "system:kube-scheduler" cannot list poddisruptionbudgets.policy at the cluster scope
E0309 19:51:42.336744       1 reflector.go:205] k8s.io/kubernetes/plugin/cmd/kube-scheduler/app/server.go:590: Failed to list *v1.Pod: pods is forbidden: User "system:kube-scheduler" cannot list pods at the cluster scope
E0309 19:51:42.338239       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.ReplicationController: replicationcontrollers is forbidden: User "system:kube-scheduler" cannot list replicationcontrollers at the cluster scope
E0309 19:51:42.340719       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.ReplicaSet: replicasets.extensions is forbidden: User "system:kube-scheduler" cannot list replicasets.extensions at the cluster scope
E0309 19:51:42.341878       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Node: nodes is forbidden: User "system:kube-scheduler" cannot list nodes at the cluster scope
E0309 19:51:42.342835       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolumeClaim: persistentvolumeclaims is forbidden: User "system:kube-scheduler" cannot list persistentvolumeclaims at the cluster scope
E0309 19:51:42.344100       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolume: persistentvolumes is forbidden: User "system:kube-scheduler" cannot list persistentvolumes at the cluster scope
E0309 19:51:42.345231       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.StatefulSet: statefulsets.apps is forbidden: User "system:kube-scheduler" cannot list statefulsets.apps at the cluster scope
E0309 19:51:42.346405       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Service: services is forbidden: User "system:kube-scheduler" cannot list services at the cluster scope
E0309 19:51:43.330230       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.PodDisruptionBudget: poddisruptionbudgets.policy is forbidden: User "system:kube-scheduler" cannot list poddisruptionbudgets.policy at the cluster scope
E0309 19:51:43.338706       1 reflector.go:205] k8s.io/kubernetes/plugin/cmd/kube-scheduler/app/server.go:590: Failed to list *v1.Pod: pods is forbidden: User "system:kube-scheduler" cannot list pods at the cluster scope
E0309 19:51:43.339941       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.ReplicationController: replicationcontrollers is forbidden: User "system:kube-scheduler" cannot list replicationcontrollers at the cluster scope
E0309 19:51:43.342476       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.ReplicaSet: replicasets.extensions is forbidden: User "system:kube-scheduler" cannot list replicasets.extensions at the cluster scope
E0309 19:51:43.343584       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Node: nodes is forbidden: User "system:kube-scheduler" cannot list nodes at the cluster scope
E0309 19:51:43.344615       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolumeClaim: persistentvolumeclaims is forbidden: User "system:kube-scheduler" cannot list persistentvolumeclaims at the cluster scope
E0309 19:51:43.345792       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolume: persistentvolumes is forbidden: User "system:kube-scheduler" cannot list persistentvolumes at the cluster scope
E0309 19:51:43.346976       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.StatefulSet: statefulsets.apps is forbidden: User "system:kube-scheduler" cannot list statefulsets.apps at the cluster scope
E0309 19:51:43.348050       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Service: services is forbidden: User "system:kube-scheduler" cannot list services at the cluster scope
E0309 19:51:44.332307       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.PodDisruptionBudget: poddisruptionbudgets.policy is forbidden: User "system:kube-scheduler" cannot list poddisruptionbudgets.policy at the cluster scope
E0309 19:51:44.340659       1 reflector.go:205] k8s.io/kubernetes/plugin/cmd/kube-scheduler/app/server.go:590: Failed to list *v1.Pod: pods is forbidden: User "system:kube-scheduler" cannot list pods at the cluster scope
E0309 19:51:44.341607       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.ReplicationController: replicationcontrollers is forbidden: User "system:kube-scheduler" cannot list replicationcontrollers at the cluster scope
E0309 19:51:44.344223       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.ReplicaSet: replicasets.extensions is forbidden: User "system:kube-scheduler" cannot list replicasets.extensions at the cluster scope
E0309 19:51:44.345380       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Node: nodes is forbidden: User "system:kube-scheduler" cannot list nodes at the cluster scope
E0309 19:51:44.346247       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolumeClaim: persistentvolumeclaims is forbidden: User "system:kube-scheduler" cannot list persistentvolumeclaims at the cluster scope
E0309 19:51:44.347536       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolume: persistentvolumes is forbidden: User "system:kube-scheduler" cannot list persistentvolumes at the cluster scope
E0309 19:51:44.348664       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.StatefulSet: statefulsets.apps is forbidden: User "system:kube-scheduler" cannot list statefulsets.apps at the cluster scope
E0309 19:51:44.349648       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Service: services is forbidden: User "system:kube-scheduler" cannot list services at the cluster scope
E0309 19:51:45.334228       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.PodDisruptionBudget: poddisruptionbudgets.policy is forbidden: User "system:kube-scheduler" cannot list poddisruptionbudgets.policy at the cluster scope
E0309 19:51:45.342638       1 reflector.go:205] k8s.io/kubernetes/plugin/cmd/kube-scheduler/app/server.go:590: Failed to list *v1.Pod: pods is forbidden: User "system:kube-scheduler" cannot list pods at the cluster scope
E0309 19:51:45.343460       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.ReplicationController: replicationcontrollers is forbidden: User "system:kube-scheduler" cannot list replicationcontrollers at the cluster scope
E0309 19:51:45.345969       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1beta1.ReplicaSet: replicasets.extensions is forbidden: User "system:kube-scheduler" cannot list replicasets.extensions at the cluster scope
E0309 19:51:45.347140       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.Node: nodes is forbidden: User "system:kube-scheduler" cannot list nodes at the cluster scope
E0309 19:51:45.348176       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:86: Failed to list *v1.PersistentVolumeClaim: persistentvolumeclaims is forbidden: User "system:kube-scheduler" cannot list persistentvolumeclaims at the cluster scope

================================================== ====================

gcr.io/google_containers/pause-amd64:3.0のログ出力

================================================== ====================

gcr.io/google_containers/pause-amd64:3.0のログ出力

================================================== ====================

gcr.io/google_containers/pause-amd64:3.0のログ出力

================================================== ====================

gcr.io/google_containers/pause-amd64:3.0のログ出力

================================================== ====================

edwardofclt 2018年03月09日

+1
アップデート：
できる限りのことを調べた後（k8sは初めてです）、 kubectl describe pod -n kube-system kube-dns-<sha>は、インストールしている仮想サーバーにCPUが1つしかなく、kube-dnsが起動していなかったことを最終的に示しました。 CPUの不足に。奇妙なことに、 kubectl logs pod -n kube-system kube-dns-<sha>はこの情報を表示しませんでした。

OSの再インストール後に機能しました（kubeadmのインストール後に再起動すると、k8sマスターが正しく起動できなくなります）。
（出力のキャプチャを忘れてすみません）

bbruun 2018年03月12日

QQ-ing 2018年03月14日

私は同じ問題を抱えていて、キャンセルしてresetを実行し、次に以前と同じinitを実行しましたが、 --apiserver-advertise-address=<my_host_public_ip_address>を使用しました-そしてそれは機能しました。

VaverDariush 2018年03月15日

👍2

https://github.com/kubernetes/kubernetes/issues/59680#issuecomment -364646304
selinuxを無効にすることは私を助けました。

avielb 2018年03月19日

😕7 👍7 👎6 🎉2 ❤1

1.8.10にダウングレードすると、問題が修正されました。

cbluth 2018年03月24日

👍5

gabrielfsousa 2018年03月27日

nevotheless 2018年04月01日

Ubuntu 16.04（selinuxなし）のv1.9.3でも同じ問題が発生します

jpmondet 2018年04月01日

+1同じ問題

duongmngo 2018年04月02日

arm64上のUbuntu16.04のv1.10でも同じ問題が発生します。

farfeduc 2018年04月04日

👍8

arm64（selinuxなし）のubuntu16.04のv1.10と同じ問題

therealqxing 2018年04月05日

インストールするハドウェアに搭載されているCPUの数を確認します。3週間ほど前に書いたように、マスターをインストールするには2つ必要です。

bbruun 2018年04月05日

😕1 👍1

@bbruun使用されるハードウェアはhttps://www.pine64.org/?page_id=1491であるため、4つのコアが適切に検出されます。その場合、ハードウェアが問題になることはありません。しかし、とにかくヒントをありがとう。たぶん@ qxing3は同じハードウェアを使用していません...

farfeduc 2018年04月05日

@farfeducこれは私が直面した障害であり、仮想マシンを再インストールしてインストールをテストし、k8sを理解するために数回続けて試行しましたが、システムから使用可能なログを取得するのは面倒であり、可能な限りどこからでも取得しようとしました使用可能なCPUが不足しているというメッセージが表示されるまで。今、私は3つのUdoo x86 Ultraを購入して、小さなクラスターを実行し、少し大きなインスタンスを使用する作業と一緒に自宅でプレイしました:-)

bbruun 2018年04月05日

@bbruunとにかくヒントをありがとう、仮想マシン用に2CPUを構成しました。

therealqxing 2018年04月05日

/ assign @liztio

timothysc 2018年04月07日

wu0407 2018年04月08日

+1 v1.10.0

manojakondi 2018年04月13日

+ 1v1.10.0および1.10.1

TechnoRoss 2018年04月13日

cleversonledur 2018年04月13日

興味深いことに、展開する場所に応じてデルタを見つけています。さらに探求する時間を見つけたいと思っていますが、これまでのところ、私はこれを知っています。 Mac / VMwareFusionを使用してCentOS7 VMを実行すると、kubeadm1.8を完全に使用できます。 v1.9またはv1.10をローカルで動作させることはありません。ただし、DigitalOceanでCentOS7イメージを使用すると、v1.8.x、v1.10.0、およびv1.10.1を正常に実行できます。 v1.9は、何らかの理由で「依存している」ようです。だから今、それはスイッチをトリップするものを見つけるために2つの環境の間の細かいデルタを掘り下げることの問題です。カーネル/パッチレベルが一致していること、Dockerエンジンなどが一致していることはわかっています。cloud-initのものをインストールしますが、ローカルVMはインストールしません。何が違うのかを知るのは簡単ではありません。私はディスクサイズを一致させることを試みました（小さいディスクを考えると、どこかでエラーがマスクされる可能性がありますが、それも排除されました）。

いずれの場合も、画像のプルは常に機能します。APIサービスが応答し、失敗したときに数分ごとにリサイクルを継続しないようにするだけです。

TechnoRoss 2018年04月14日

ご挨拶、

https://docs.docker.com/config/daemon/systemd/#httphttps -proxyを参照して、Dockerデーモンのプロキシを設定できます。

guhuajun 2018年04月16日

+1 Raspberry PI3のHypriotOSで実行

hansamann 2018年04月18日

最後のバージョンの代わりにv1.9.6をインストールすることで、それを機能させることができました。
したがって、v1.9.6では正常に動作しますが、sopineボードのarm64のubuntu16.04ではv1.10.0およびv1.10.1では失敗します。

farfeduc 2018年04月18日

👍1

Raspberry Pi 3、HypriotOSでも同じ問題が発生します。 1.9.7-00へのダウングレードもうまくいきました。

JoeJasinski 2018年04月22日

👍1

+ 1、kubeadm v1.10.1、ラズベリーpi 3b、hypriotOS

kocoten1992 2018年04月22日

私の場合、etcdコンテナが起動してからエラーで終了していることがわかりました。これにより、 kubeadm initがハングし、最終的にタイムアウトになりました。

これがあなたを噛んでいるかどうかを確認するには、 docker ps -aを実行し、etcdコンテナのステータスを確認します。実行されていない場合は、etcdコンテナ（ docker logs <container-id> ）のログを確認し、アドレスにバインドできないことについて不平を言っているかどうかを確認します。この問題レポートを参照してください： https ：//github.com/kubernetes/kubernetes/issues/57709

今述べた問題には回避策がありますが、それが最初に実行している問題であることを確認してください。

loudsong 2018年04月27日

👍1

ファイアウォールが6443のインバウンドトラフィックを許可していることを確認してください

たとえば、Ubuntuを使用している場合は、 ufw statusを実行して、有効になっているかどうかを確認します

次に、 ufw allow 6443でポートを開きます

aaronkjones 2018年05月01日

以下の画像を一覧表示して、プロキシで手動でプルしてから、kubeadmを再度初期化することは可能ですか。
それは機能しますか？
cuz、私たちは中国にいます、あなたが知っている、GFW。
そして、私はk8sを初めて使用し、centos7でセットアップするときにここで立ち往生しています。

HanYL-coder 2018年05月17日

❤1

THE GREATFIREWALLの背後にいる中国の人々のために

thanch2n 2018年05月17日

👍1

@ thanch2nthxたくさん。やってみます。

HanYL-coder 2018年05月18日

これを使用してdockerにプロキシを追加しました。これを使用すると、イメージはすべてダウンロード済みのようですが、「[init]コントロールプレーンイメージをプルする必要がある場合は、1分以上かかる場合があります。」

以下に自動プルされた画像をリストします。

k8s.gcr.io/kube-apiserver-amd64 v1.10.2 e774f647e2592週間前225MB
k8s.gcr.io/kube-scheduler-amd64 v1.10.2 0dcb3dea0db12週間前50.4MB
k8s.gcr.io/kube-controller-manager-amd64 v1.10.2 f3fcd0775c4e2週間前148MB
k8s.gcr.io/etcd-amd64 3.1.12 52920ad46f5b2か月前193MB
k8s.gcr.io/pause-amd64 3.1 da86e6ba6ca14か月前742kB

HanYL-coder 2018年05月18日

私はこれを理解しようと多くの時間を費やしました。 ufwを無効にし、selinuxをオフにし、ip forwadingがオンになっていることと、/ proc / sys / net / bridge / bridge-nf-call-iptablesが1に設定されていることを確認しました。問題を解決するものは何もありませんでした。

最後に、ダウングレードしてからアップグレードすることにしました。

sudo apt-get -y --allow-downgrades install kubectl=1.5.3-00 kubelet=1.5.3-00 kubernetes-cni=0.3.0.1-07a8a2-00および

curl -Lo /tmp/old-kubeadm.deb https://apt.k8s.io/pool/kubeadm_1.6.0-alpha.0.2074-a092d8e0f95f52-00_amd64_0206dba536f698b5777c7d210444a8ace18f48e045ab78687327631c6c694f42.deb

1.10からダウングレードしてから

sudo apt-get -y install kubectl kubelet kubernetes-cni kubeadm

Etcdが再起動し、APIサーバーがタイムアウトしました。しばらくすると、APIサーバーが再起動して接続できないという苦情を言います。 DEBUGレベルのログをオンにする方法はありますか？これを引き起こす原因を確認してください。しかし、今は機能しています。これを再現してトラブルシューティングしたいと思います。

mendoncangelo 2018年05月19日

👍2

立ち往生した理由がわかりました。
私はそれをvmwareで実行していて、1G RAMを配置していますが、k8sには少なくとも2GRAMが必要です。
これに関する通知を追加することは可能ですか？

HanYL-coder 2018年05月22日

CentOS7で+ 1kubeadm 1.10.2
4GB RAM 2CPU

FNaughton 2018年05月25日

6GBのRAMと1つのVCPUを搭載したHyperVVM上のDebianStretch（go1.9.3）でkubeadm1.10.1を+1します。

クラスターを何度も再生成したので、過去には正常に機能していました...

simmessa 2018年05月28日

HyperVで2つのVCPUに切り替えてみましたが、何も変わりません。

simmessa 2018年05月28日

+1！

imedaouidene 2018年05月29日

+1。 kubeadm 1.10.1、DebianStretch。以前に働いた

egism 2018年06月01日

Centos7のdocker1.13.1で、ストレージドライバーに問題が発生したことを発見しました。 Dockerログに「readlink / var / lib / docker / overlay2 / l：invalidargument」が表示されました。 docker 18.03.1-ceに移行すると、この問題は解決したようで、kubeadminitがハングしなくなりました。

FNaughton 2018年06月01日

私も同じ問題を抱えていました。 etcdがLinuxマシンのホスト名（somedomain.example.com）をプルし、DNSサーバーで検索し、ワイルドカードドメイン（* .example.com）の回答を見つけて、返されたIPアドレスの代わりにバインドしようとしたことが判明しました。 apiserver-advertise-address。

Evengard 2018年06月06日

プリプルとピボットタイムアウトの検出には多くの修正が加えられているため、この問題を解決します。

timothysc 2018年06月12日

tejp1002 2018年10月30日

k8sadminにイメージをプルダウンさせる標準的な方法を試し、何度も試し、次にイメージをプルし、リセットし、エラーを無視しようとしましたが、常に失敗します。

pi @ master-node-001 ：〜$ sudo kubeadm reset
[リセット]警告：「kubeadminit」または「kubeadmjoin」によってこのホストに加えられた変更は元に戻されます。
[プリフライト]プリフライトチェックの実行
[リセット] kubeletサービスを停止します
[リセット]「/ var / lib / kubelet」内のマウントされたディレクトリのアンマウント
[リセット]ステートフルディレクトリのコンテンツの削除：[/ var / lib / kubelet /etc/cni/net.d / var / lib / dockershim / var / run / kubernetes / var / lib / etcd]
[リセット]構成ディレクトリの内容を削除します：[/ etc / kubernetes / manifests / etc / kubernetes / pki]
[リセット]ファイルの削除：[/ etc / kubernetes / admin.conf /etc/kubernetes/kubelet.conf /etc/kubernetes/bootstrap-kubelet.conf /etc/kubernetes/controller-manager.conf / etc / kubernetes / scheduler。 conf]
pi @ master-node-001 ：〜$ kubeadm config images pull
[config / images]プルされたk8s.gcr.io/kube-apiserver：v1.12.2
[config / images]プルされたk8s.gcr.io/kube-controller-manager：v1.12.2
[config / images]プルされたk8s.gcr.io/kube-scheduler：v1.12.2
[config / images]プルされたk8s.gcr.io/kube-proxy：v1.12.2
[config / images] k8s.gcr.io/pause:3.1をプル
[config / images]プルされたk8s.gcr.io/etcd:3.2.24
[config / images]プルされたk8s.gcr.io/coredns:1.2.2
pi @ master-node-001 ：〜$ sudo kubeadm init --token-ttl = 0 --ignore-preflight-errors = all
[init] Kubernetesバージョンを使用：v1.12.2
[プリフライト]プリフライトチェックの実行
[プリフライト/画像] Kubernetesクラスターのセットアップに必要な画像のプル
[プリフライト/画像]インターネット接続の速度によっては、1〜2分かかる場合があります
[プリフライト/画像]このアクションは、「kubeadm configimagespull」を使用して事前に実行することもできます
[kubelet]フラグ付きのkubelet環境ファイルをファイル「/var/lib/kubelet/kubeadm-flags.env」に書き込んでいます
[kubelet]ファイル「/var/lib/kubelet/config.yaml」へのkubelet設定の書き込み
【プリフライト】kubeletサービスの有効化
[証明書]生成されたetcd / ca証明書とキー。
[証明書]生成されたapiserver-etcd-client証明書とキー。
[証明書]生成されたetcd / server証明書とキー。
[証明書] etcd / serverサービング証明書は、DNS名[master-node-001localhost]およびIP [127.0.0.1 :: 1]に対して署名されています
[証明書]生成されたetcd /ピア証明書とキー。
[証明書] etcd / peerserving証明書は、DNS名[master-node-001localhost]およびIP [192.168.0.100 127.0.0.1 :: 1]に対して署名されています
[証明書]生成されたetcd / healthcheck-クライアントの証明書とキー。
[証明書]生成されたca証明書とキー。
[証明書]生成されたapiserver証明書とキー。
[証明書]証明書を提供するapiserverは、DNS名[master-node-001 kubernetes kubernetes.default kubernetes.default.svckubernetes.default.svc.cluster.local]とIP [10.96.0.1192.168.0.100]に対して署名されています
[証明書]生成されたapiserver-kubelet-client証明書とキー。
[証明書]生成されたfront-proxy-ca証明書とキー。
[証明書]生成されたfront-proxy-client証明書とキー。
[証明書]有効な証明書とキーが「/ etc / kubernetes / pki」に存在するようになりました
[証明書]生成されたsaキーと公開キー。
[kubeconfig] KubeConfigファイルをディスクに書き込みました： "/ etc / kubernetes / admin.conf"
[kubeconfig] KubeConfigファイルをディスクに書き込みました： "/ etc / kubernetes / kubelet.conf"
[kubeconfig] KubeConfigファイルをディスクに書き込みました：「/ etc / kubernetes /controller-manager.conf」
[kubeconfig] KubeConfigファイルをディスクに書き込みました：「/ etc / kubernetes /scheduler.conf」
[controlplane]はコンポーネントkube-apiserverの静的ポッドマニフェストを「/etc/kubernetes/manifests/kube-apiserver.yaml」に書き込みました
[controlplane]はコンポーネントkube-controller-managerの静的ポッドマニフェストを「/etc/kubernetes/manifests/kube-controller-manager.yaml」に書き込みました
[controlplane]はコンポーネントkube-schedulerの静的ポッドマニフェストを「/etc/kubernetes/manifests/kube-scheduler.yaml」に書き込みました
[etcd]ローカルetcdインスタンスの静的ポッドマニフェストを「/etc/kubernetes/manifests/etcd.yaml」に書き込みました
[init]ディレクトリ「/ etc / kubernetes / manifests」からkubeletがコントロールプレーンを静的ポッドとして起動するのを待機しています
[init]コントロールプレーンイメージをプルする必要がある場合、これには1分以上かかる場合があります

残念ながら、エラーが発生しました：
状態を待ってタイムアウトしました

このエラーの原因は次のとおりです。
-kubeletが実行されていません
-何らかの方法でノードの構成が誤っているため、kubeletが異常です（必要なcgroupが無効になっています）

systemdを利用したシステムを使用している場合は、次のコマンドを使用してエラーのトラブルシューティングを試みることができます。
-'systemctl status kubelet '
-'journalctl -xeu kubelet '

さらに、コンテナランタイムによって開始されたときに、コントロールプレーンコンポーネントがクラッシュまたは終了した可能性があります。
トラブルシューティングを行うには、Dockerなどの優先コンテナランタイムCLIを使用してすべてのコンテナを一覧表示します。
Dockerで実行されているすべてのKubernetesコンテナを一覧表示する方法の一例を次に示します。
-'docker ps -a | grep kube | grep -v pause '
障害のあるコンテナを見つけたら、次の方法でログを調べることができます。
-'dockerログCONTAINERID '
Kubernetesクラスターを初期化できませんでした
pi @ master-node-001 ：〜$ dockerイメージ
リポジトリタグの画像ID作成サイズ
k8s.gcr.io/kube-controller-manager v1.12.24bc6cae738d87日前146MB
k8s.gcr.io/kube-apiserver v1.12.28bfe044a05e17日前177MB
k8s.gcr.io/kube-scheduler v1.12.23abf5566fec17日前52MB
k8s.gcr.io/kube-proxy v1.12.2328ef67ca54f7日前84.5MB
k8s.gcr.io/kube-proxy v1.12.1 8c06fbe564583週間前84.7MB
k8s.gcr.io/kube-controller-manager v1.12.1 5de9433802953週間前146MB
k8s.gcr.io/kube-scheduler v1.12.1 1fbc2e4cd3783週間前52MB
k8s.gcr.io/kube-apiserver v1.12.1 ab216fe6acf63週間前177MB
k8s.gcr.io/etcd 3.2.24 e7a8884c84435週間前222MB
k8s.gcr.io/coredns 1.2.2 ab0805b0de942か月前33.4MB
k8s.gcr.io/kube-scheduler v1.11.0 0e4a34a3b0e64か月前56.8MB
k8s.gcr.io/kube-controller-manager v1.11.0 55b70b4207854か月前155MB
k8s.gcr.io/etcd 3.2.18 b8df3b177be26か月前219MB
k8s.gcr.io/pause 3.1 e11a8cbeda8610か月前374kB
pi @ master-node-001 ：〜$ h | grep kubectl
-bash：h：コマンドが見つかりません
pi @ master-node-001 ：〜$履歴| grep kubectl
9つのkubectlポッドリスト
10個のkubectlリストポッド
11 kubectl --help
12 kubectl get pods -o wide
14 kubectl get pods -o wide
32時間| grep kubectl
33の歴史| grep kubectl
pi @ master-node-001 ：〜$！12
kubectl get pods -o wide
サーバーに接続できません：net / http：TLSハンドシェイクタイムアウト
pi @ master-node-001 ：〜$履歴| grep一時停止
17 docker ps -a | grep kube | grep -v pause
35の歴史| grep一時停止
pi @ master-node-001 ：〜$！17
docker ps -a | grep kube | grep -v pause
41623613679e 8bfe044a05e1 "kube-apiserver--au…" 29秒前アップ14秒k8s_kube-apiserver_kube-apiserver-master-node-001_kube-system_1ec53f8ef96c76af95c78c809252f05c_3
0870760b9ea0 8bfe044a05e1 "kube-apiserver--au…" 2分前終了（0）33秒前k8s_kube-apiserver_kube-apiserver-master-node-001_kube-system_1ec53f8ef96c76af95c78c809252f05c_2
c60d65fab8a7 3abf5566fec1 "kube-scheduler--ad…" 6分前5分アップk8s_kube-scheduler_kube-scheduler-master-node-001_kube-system_ee7b1077c61516320f4273309e9b4690_0
26c58f6c68e9 e7a8884c8443 "etcd--advertise-cl…" 6分前アップ5分k8s_etcd_etcd-master-node-001_kube-system_d01dcc7fc79b875a52f01e26432e6745_0
65546081ca77 4bc6cae738d8 "kube-controller-man…" 6分前アップ5分k8s_kube-controller-manager_kube-controller-manager-master-node-001_kube-system_07e19bc9fea1626927c12244604bdb2f_0
pi @ master-node-001 ：〜$ kubectl get pods -o wide
^ C
pi @ master-node-001 ：〜$ sudo restart
リモートホストによって閉じられた192.168.0.100への接続。
192.168.0.100への接続が閉じられました。
karl @ karl-PL62-7RC ：〜$ ping 192.168.0.100
PING 192.168.0.100（192.168.0.100）56（84）バイトのデータ。
^ C
--- 192.168.0.100ping統計---
2パケット送信、0受信、100％パケット損失、時間1015ms

karl @ karl-PL62-7RC ：〜$ ssh [email protected]
ssh_exchange_identification：読み取り：ピアによって接続がリセットされました
karl @ karl-PL62-7RC ：〜$ ssh [email protected]
[email protected]のパスワード：
Linux master-node-001 4.14.71-v7 +＃1145 SMP Fri Sep 21 15:38:35 BST 2018 armv7l

Debian GNU / Linuxシステムに含まれているプログラムは自由ソフトウェアです。
各プログラムの正確な配布条件は、
/ usr / share / doc / * / copyright内の個々のファイル。

Debian GNU / Linuxには、ある程度の保証は一切ありません。
適用法で許可されています。
最終ログイン：2018年10月31日水曜日21:36:13
pi @ master-node-001 ：〜$ kubectl get pods -o wide
サーバー192.168.0.100:6443への接続が拒否されました-正しいホストまたはポートを指定しましたか？
pi @ master-node-001 ：〜$ sudo kubeadm init --token-ttl = 0 --ignore-preflight-errors = all
[init] Kubernetesバージョンを使用：v1.12.2
[プリフライト]プリフライトチェックの実行
[警告FileAvailable--etc-kubernetes-manifests-kube-apiserver.yaml]：/ etc / kubernetes / manifests / kube-apiserver.yamlは既に存在します
[警告FileAvailable--etc-kubernetes-manifests-kube-controller-manager.yaml]：/ etc / kubernetes / manifests / kube-controller-manager.yamlは既に存在します
[警告FileAvailable--etc-kubernetes-manifests-kube-scheduler.yaml]：/ etc / kubernetes / manifests / kube-scheduler.yamlは既に存在します
[警告FileAvailable--etc-kubernetes-manifests-etcd.yaml]：/ etc / kubernetes / manifests / etcd.yamlはすでに存在します
[警告ポート-10250]：ポート10250が使用中です
[警告DirAvailable--var-lib-etcd]：/ var / lib / etcdは空ではありません
[プリフライト/画像] Kubernetesクラスターのセットアップに必要な画像のプル
[プリフライト/画像]インターネット接続の速度によっては、1〜2分かかる場合があります
[プリフライト/画像]このアクションは、「kubeadm configimagespull」を使用して事前に実行することもできます
[kubelet]フラグ付きのkubelet環境ファイルをファイル「/var/lib/kubelet/kubeadm-flags.env」に書き込んでいます
[kubelet]ファイル「/var/lib/kubelet/config.yaml」へのkubelet設定の書き込み
【プリフライト】kubeletサービスの有効化
[証明書]既存のetcd / peer証明書とキーを使用します。
[証明書]既存のapiserver-etcd-client証明書とキーを使用します。
[証明書]既存のetcd / server証明書とキーを使用します。
[証明書]既存のetcd / healthcheck-client証明書とキーを使用します。
[証明書]既存のapiserver証明書とキーを使用します。
[証明書]既存のapiserver-kubelet-client証明書とキーを使用します。
[証明書]既存のfront-proxy-client証明書とキーを使用します。
[証明書]有効な証明書とキーが「/ etc / kubernetes / pki」に存在するようになりました
[証明書]既存のsaキーを使用します。
[kubeconfig]既存の最新のKubeConfigファイルを使用する： "/ etc / kubernetes / admin.conf"
[kubeconfig]既存の最新のKubeConfigファイルを使用する： "/ etc / kubernetes / kubelet.conf"
[kubeconfig]既存の最新のKubeConfigファイルを使用する： "/ etc / kubernetes / controller-manager.conf"
[kubeconfig]既存の最新のKubeConfigファイルを使用する：「/ etc / kubernetes /scheduler.conf」
[controlplane]はコンポーネントkube-apiserverの静的ポッドマニフェストを「/etc/kubernetes/manifests/kube-apiserver.yaml」に書き込みました
[controlplane]はコンポーネントkube-controller-managerの静的ポッドマニフェストを「/etc/kubernetes/manifests/kube-controller-manager.yaml」に書き込みました
[controlplane]はコンポーネントkube-schedulerの静的ポッドマニフェストを「/etc/kubernetes/manifests/kube-scheduler.yaml」に書き込みました
[etcd]ローカルetcdインスタンスの静的ポッドマニフェストを「/etc/kubernetes/manifests/etcd.yaml」に書き込みました
[init]ディレクトリ「/ etc / kubernetes / manifests」からkubeletがコントロールプレーンを静的ポッドとして起動するのを待機しています
[init]コントロールプレーンイメージをプルする必要がある場合、これには1分以上かかる場合があります

残念ながら、エラーが発生しました：
状態を待ってタイムアウトしました

fenwk0 2018年10月31日

13 sudo kubeadm init --token-ttl = 0
14 kubectl get pods -o wide
15 sudokubeadmリセット
16 sudo kubeadm init --token-ttl = 0
17 docker ps -a | grep kube | grep -v pause
18 kubeadm config images pull --kubernetes-version = v1.11.0
19 sudokubeadmリセット
20履歴> notes.txt
さらに21個のnotes.txt
22sudoリブート
23kubeadm設定画像リスト
24 kubeadm config images pull --kubernetes-version = v1.11.0
25 sudo kubeadm init --token-ttl = 0 --ignore-preflight-errors = all
26 kubeadmconfig画像プル
27 sudo kubeadm init --token-ttl = 0 --ignore-preflight-errors = all
28 kubeadmconfig画像プル
29 sudokubeadmリセット
30 kubeadmconfig画像プル
31 sudo kubeadm init --token-ttl = 0 --ignore-preflight-errors = all
32個のDocker画像
33時間| grep kubectl
34の歴史| grep kubectl
35 kubectl get pods -o wide
36の歴史| grep一時停止
37 docker ps -a | grep kube | grep -v pause
38 kubectl get pods -o wide
39sudoリブート
40 kubectl get pods -o wide
41 sudo kubeadm init --token-ttl = 0 --ignore-preflight-errors = all

fenwk0 2018年10月31日

このページは役に立ちましたか？

0 / 5 - 0 評価

Kubeadm: Kubeadm initブロックで「コントロールプレーンイメージをプルする必要がある場合、これには1分以上かかる場合があります

バージョン

どうしたの？

あなたは何が起こると思っていましたか？

それをどのように再現するか（可能な限り最小限かつ正確に）？

他に知っておくべきことはありますか？

最も参考になるコメント

全てのコメント67件

gcr.io/google_containers/ kube-apiserver-amd64 @ sha256のログ出力：a5382344aa373a90bc87d3baa4eda5402507e8df5b8bfbbad392c4fff715f043

gcr.io/google_containers/ kube -controller-manager-amd64 @ sha256のログ出力：3ac295ae3e78af5c9f88164ae95097c2d7af03caddf067cb35599769d0b7251e

gcr.io/google_containers/ kube -scheduler-amd64 @ sha256のログ出力：2c17e637c8e4f9202300bd5fc26bc98a7099f49559ca0a8921cf692ffd4a1675

gcr.io/google_containers/pause-amd64:3.0のログ出力

gcr.io/google_containers/pause-amd64:3.0のログ出力

gcr.io/google_containers/pause-amd64:3.0のログ出力

gcr.io/google_containers/pause-amd64:3.0のログ出力

関連する問題