Kubeadm: CoreDNS не запускается в Ubuntu 18.04 Bionic Beaver

Созданный на 9 июл. 2018  ·  18Комментарии  ·  Источник: kubernetes/kubeadm

Какие ключевые слова вы искали в выпусках kubeadm перед тем, как подать этот запрос?

dns, resolv.conf, coredns

ОТЧЕТ ОБ ОШИБКЕ

Версии

версия kubeadm (используйте kubeadm version ):
kubeadm version: &version.Info{Major:"1", Minor:"11", GitVersion:"v1.11.0", GitCommit:"91e7b4fd31fcd3d5f436da26c980becec37ceefe", GitTreeState:"clean", BuildDate:"2018-06-27T20:14:41Z", GoVersion:"go1.10.2", Compiler:"gc", Platform:"linux/amd64"}

Окружающая среда :

  • Версия Kubernetes (используйте kubectl version ):
  Client Version: version.Info{Major:"1", Minor:"11", GitVersion:"v1.11.0", GitCommit:"91e7b4fd31fcd3d5f436da26c980becec37ceefe", GitTreeState:"clean", BuildDate:"2018-06-27T20:17:28Z", GoVersion:"go1.10.2", Compiler:"gc", Platform:"linux/amd64"}
  Server Version: version.Info{Major:"1", Minor:"11", GitVersion:"v1.11.0", GitCommit:"91e7b4fd31fcd3d5f436da26c980becec37ceefe", GitTreeState:"clean", BuildDate:"2018-06-27T20:08:34Z", GoVersion:"go1.10.2", Compiler:"gc", Platform:"linux/amd64"}
  • Облачный провайдер или конфигурация оборудования :
    baremetal (Intel Xeon, 2 жестких диска по 2 ТБ, ОЗУ 32 ГБ)
  • ОС (например, из / etc / os-release):
    Ubuntu 18.04 LTS (бионический бобер)
  • Ядро (например, uname -a ):
    4.15.0-24-общий

Что случилось?

После установки kubernetes через kubeadm поды coredns не появятся. kubectl get pods --all-namespaces печатает это:

NAMESPACE     NAME                                  READY     STATUS    RESTARTS   AGE
kube-system   coredns-78fcdf6894-kgg8d              0/1       Pending   0          2h
kube-system   coredns-78fcdf6894-vl9jf              0/1       Pending   0          2h
kube-system   etcd-beetlejuice                      1/1       Running   0          2h
kube-system   kube-apiserver-beetlejuice            1/1       Running   0          2h
kube-system   kube-controller-manager-beetlejuice   1/1       Running   0          2h
kube-system   kube-proxy-bjdqd                      1/1       Running   0          2h
kube-system   kube-scheduler-beetlejuice            1/1       Running   0          2h

Чего вы ожидали?

coredns переходит в статус "Running", и kubernetes работает без проблем.

Как это воспроизвести (максимально минимально и точно)?

Это сценарий, который я использовал для установки:

curl -s https://packages.cloud.google.com/apt/doc/apt-key.gpg | apt-key add -
cat <<EOF >/etc/apt/sources.list.d/kubernetes.list
deb http://apt.kubernetes.io/ kubernetes-xenial main
EOF

apt-get update
apt-get install -y docker.io
apt-get install -y kubeadm

kubeadm init --pod-network-cidr=10.27.0.0/16

Что еще нам нужно знать?

Думаю, да, но я не знаю что ... Если вам нужны какие-то логи, просто скажите мне.

kinbug prioritawaiting-more-evidence prioritimportant-soon
Источник
picture sergej2705

Самый полезный комментарий

Жаль, что нет логов от планировщика.

Содержимое /var/lib/kubelet/kubeadm-flags.env

кажется, что добавлен флаг --resolv-conf , так что все в порядке.

К настоящему времени это будет куб с одним узлом.

вызовите kubeadm reset а затем снова kubeadm init ... .
затем скопируйте конфигурацию в свой пользовательский каталог и попробуйте установить сетевой плагин pod (weave):

kubectl apply -f "https://cloud.weave.works/k8s/net?k8s-version=$(kubectl version | base64 | tr -d '\n')"

и посмотрите, готовы ли dns pods. это может не иметь смысла, но попробуйте.

picture neolit123 9 июл. 2018
👍25 ❤9

Все 18 Комментарий

@ sergej2705
вывод из:
kubectl describe pod <coredns-pod-ids>

и соответствующие ошибки из:

'systemctl status kubelet'
'journalctl -xeu kubelet'

помогло бы больше.
Благодарю.

neolit123 picture neolit123 9 июл. 2018
👍1

От kubectl describe pod coredns-78fcdf6894-kgg8d -n kube-system :

Name:           coredns-78fcdf6894-kgg8d
Namespace:      kube-system
Node:           <none>
Labels:         k8s-app=kube-dns
                pod-template-hash=3497892450
Annotations:    <none>
Status:         Pending
IP:             
Controlled By:  ReplicaSet/coredns-78fcdf6894
Containers:
coredns:
    Image:       k8s.gcr.io/coredns:1.1.3
    Ports:       53/UDP, 53/TCP, 9153/TCP
    Host Ports:  0/UDP, 0/TCP, 0/TCP
    Args:
    -conf
    /etc/coredns/Corefile
    Limits:
    memory:  170Mi
    Requests:
    cpu:        100m
    memory:     70Mi
    Liveness:     http-get http://:8080/health delay=60s timeout=5s period=10s #success=1 #failure=5
    Environment:  <none>
    Mounts:
    /etc/coredns from config-volume (ro)
    /var/run/secrets/kubernetes.io/serviceaccount from coredns-token-4fqm7 (ro)
Conditions:
Type           Status
PodScheduled   False 
Volumes:
config-volume:
    Type:      ConfigMap (a volume populated by a ConfigMap)
    Name:      coredns
    Optional:  false
coredns-token-4fqm7:
    Type:        Secret (a volume populated by a Secret)
    SecretName:  coredns-token-4fqm7
    Optional:    false
QoS Class:       Burstable
Node-Selectors:  <none>
Tolerations:     CriticalAddonsOnly
                node-role.kubernetes.io/master:NoSchedule
                node.kubernetes.io/not-ready:NoExecute for 300s
                node.kubernetes.io/unreachable:NoExecute for 300s
Events:
Type     Reason            Age                 From               Message
----     ------            ----                ----               -------
Warning  FailedScheduling  4m (x1436 over 4h)  default-scheduler  0/1 nodes are available: 1 node(s) were not ready.

и из kubectl describe pod coredns-78fcdf6894-vl9jf -n kube-system :

Name:           coredns-78fcdf6894-vl9jf
Namespace:      kube-system
Node:           <none>
Labels:         k8s-app=kube-dns
                pod-template-hash=3497892450
Annotations:    <none>
Status:         Pending
IP:             
Controlled By:  ReplicaSet/coredns-78fcdf6894
Containers:
coredns:
    Image:       k8s.gcr.io/coredns:1.1.3
    Ports:       53/UDP, 53/TCP, 9153/TCP
    Host Ports:  0/UDP, 0/TCP, 0/TCP
    Args:
    -conf
    /etc/coredns/Corefile
    Limits:
    memory:  170Mi
    Requests:
    cpu:        100m
    memory:     70Mi
    Liveness:     http-get http://:8080/health delay=60s timeout=5s period=10s #success=1 #failure=5
    Environment:  <none>
    Mounts:
    /etc/coredns from config-volume (ro)
    /var/run/secrets/kubernetes.io/serviceaccount from coredns-token-4fqm7 (ro)
Conditions:
Type           Status
PodScheduled   False 
Volumes:
config-volume:
    Type:      ConfigMap (a volume populated by a ConfigMap)
    Name:      coredns
    Optional:  false
coredns-token-4fqm7:
    Type:        Secret (a volume populated by a Secret)
    SecretName:  coredns-token-4fqm7
    Optional:    false
QoS Class:       Burstable
Node-Selectors:  <none>
Tolerations:     CriticalAddonsOnly
                node-role.kubernetes.io/master:NoSchedule
                node.kubernetes.io/not-ready:NoExecute for 300s
                node.kubernetes.io/unreachable:NoExecute for 300s
Events:
Type     Reason            Age                 From               Message
----     ------            ----                ----               -------
Warning  FailedScheduling  1m (x1467 over 4h)  default-scheduler  0/1 nodes are available: 1 node(s) were not ready.

Я не вижу ошибок в systemctl status kubelet , вот полный вывод:

● kubelet.service - kubelet: The Kubernetes Node Agent
Loaded: loaded (/lib/systemd/system/kubelet.service; enabled; vendor preset: enabled)
Drop-In: /etc/systemd/system/kubelet.service.d
        └─10-kubeadm.conf, override.conf
Active: active (running) since Mon 2018-07-09 17:43:53 CEST; 4h 7min ago
    Docs: http://kubernetes.io/docs/
Main PID: 26710 (kubelet)
    Tasks: 32 (limit: 4915)
CGroup: /system.slice/kubelet.service
        └─26710 /usr/bin/kubelet --bootstrap-kubeconfig=/etc/kubernetes/bootstrap-kubelet.conf --kubeconfig=/etc/kubernetes/kubelet.conf --config=/var/lib/kubelet/config.yaml --cgroup-driver=cgroupfs --cni-bin-dir=/opt/cni/bin --cni-co

в journalctl -xeu kubelet я несколько раз вижу следующие строки:

Jul 09 21:54:48 beetlejuice kubelet[26710]: E0709 21:54:48.883071   26710 kubelet.go:2112] Container runtime network not ready: NetworkReady=false reason:NetworkPluginNotReady message:docker: network plugin is not ready: cni config uninit
Jul 09 21:54:49 beetlejuice kubelet[26710]: E0709 21:54:49.566069   26710 dns.go:131] Nameserver limits were exceeded, some nameservers have been omitted, the applied nameserver line is: 213.133.99.99 213.133.98.98 213.133.100.100
Jul 09 21:54:53 beetlejuice kubelet[26710]: W0709 21:54:53.884846   26710 cni.go:172] Unable to update cni config: No networks found in /etc/cni/net.d

к вашему сведению, /etc/resolv.conf :

### Hetzner Online GmbH installimage
# nameserver config
nameserver 213.133.99.99
nameserver 213.133.98.98
nameserver 213.133.100.100
nameserver 2a01:4f8:0:1::add:1010
nameserver 2a01:4f8:0:1::add:9999
nameserver 2a01:4f8:0:1::add:9898

где Hetzner - имя оператора дата-центра.

sergej2705 picture sergej2705 9 июл. 2018

@ sergej2705
планировщик не работает, но мне непонятно почему.

вы можете найти идентификатор модуля kube-scheduler с помощью
kubectl get pods --all-namespace

тогда вы можете попробовать запустить терминал в этом модуле:
kubectl exec -ti <POD-ID-HERE> bash -n kube-system

и оттуда вы можете попробовать посмотреть журнал:
cat /var/log

нет гарантий, что в нем есть что-то актуальное.

neolit123 picture neolit123 9 июл. 2018

еще пара вещей:

  • вы устанавливаете pod-сеть после init (спрашиваю на всякий случай)?
  • после init какое содержимое вы получите в /var/lib/kubelet/kubeadm-flags.env ?
neolit123 picture neolit123 9 июл. 2018

kubectl exec -ti kube-scheduler-beetlejuice bash -n kube-system говорит

OCI runtime exec failed: exec failed: container_linux.go:348: starting container process caused "exec: \"bash\": executable file not found in $PATH": unknown command terminated with exit code 126

поэтому я попробовал kubectl exec -ti kube-scheduler-beetlejuice sh -n kube-system поэтому sh вместо bash ... но нет файла /var/log

ls -lAh /var :

drwxr-xr-x    3 root     root        4.0K May 22 17:00 spool
drwxr-xr-x    2 root     root        4.0K May 22 17:00 www

К настоящему времени это будет куб с одним узлом.

Содержимое /var/lib/kubelet/kubeadm-flags.env

KUBELET_KUBEADM_ARGS=--cgroup-driver=cgroupfs --cni-bin-dir=/opt/cni/bin --cni-conf-dir=/etc/cni/net.d --network-plugin=cni --resolv-conf=/run/systemd/resolve/resolv.conf
sergej2705 picture sergej2705 9 июл. 2018

Жаль, что нет логов от планировщика.

Содержимое /var/lib/kubelet/kubeadm-flags.env

кажется, что добавлен флаг --resolv-conf , так что все в порядке.

К настоящему времени это будет куб с одним узлом.

вызовите kubeadm reset а затем снова kubeadm init ... .
затем скопируйте конфигурацию в свой пользовательский каталог и попробуйте установить сетевой плагин pod (weave):

kubectl apply -f "https://cloud.weave.works/k8s/net?k8s-version=$(kubectl version | base64 | tr -d '\n')"

и посмотрите, готовы ли dns pods. это может не иметь смысла, но попробуйте.

neolit123 picture neolit123 9 июл. 2018
👍25 ❤9

после новой инициализации поды выглядят так (снова):

NAMESPACE     NAME                                  READY     STATUS    RESTARTS   AGE
kube-system   coredns-78fcdf6894-lcmg6              0/1       Pending   0          1m
kube-system   coredns-78fcdf6894-wd9nt              0/1       Pending   0          1m
kube-system   etcd-beetlejuice                      1/1       Running   0          18s
kube-system   kube-apiserver-beetlejuice            1/1       Running   0          36s
kube-system   kube-controller-manager-beetlejuice   1/1       Running   0          12s
kube-system   kube-proxy-zrhgj                      1/1       Running   0          1m
kube-system   kube-scheduler-beetlejuice            1/1       Running   0          24s

после установки плагина weave это выглядит так:

NAMESPACE     NAME                                  READY     STATUS    RESTARTS   AGE
kube-system   coredns-78fcdf6894-lcmg6              1/1       Running   0          2m
kube-system   coredns-78fcdf6894-wd9nt              1/1       Running   0          2m
kube-system   etcd-beetlejuice                      1/1       Running   0          1m
kube-system   kube-apiserver-beetlejuice            1/1       Running   0          1m
kube-system   kube-controller-manager-beetlejuice   1/1       Running   0          58s
kube-system   kube-proxy-zrhgj                      1/1       Running   0          2m
kube-system   kube-scheduler-beetlejuice            1/1       Running   0          1m
kube-system   weave-net-ldxg5                       2/2       Running   0          24s

теперь это работает 👍

Я установил kubernetes-dashboard сейчас без проблем, раньше это не работало. Но разве это решение этой проблемы?

sergej2705 picture sergej2705 10 июл. 2018

спасибо за тестирование.

Но разве это решение этой проблемы?

я бы сказал - да, пока.

как интерфейс командной строки, так и документация инструктируют пользователей установить подключаемый модуль pod-network сразу после init .
мы не задокументировали, что именно происходит, если этот шаг пропущен, но ожидается, что кластер не будет работать должным образом ...

если кто-то считает, что эту проблему не следует закрывать, пожалуйста, откройте ее повторно.

neolit123 picture neolit123 10 июл. 2018

У меня точная проблема, хотя плагин Weave не помог. Я все еще вижу контейнеры coredns в статусе ContainerCreating . Прошёл почти час, так что ...

drpaneas picture drpaneas 14 авг. 2018 
linux-uwkw:~ # kubectl cluster-info
Kubernetes master is running at https://192.168.178.163:6443
KubeDNS is running at https://192.168.178.163:6443/api/v1/namespaces/kube-system/services/kube-dns:dns/proxy

To further debug and diagnose cluster problems, use 'kubectl cluster-info dump'.

linux-uwkw:~ # cat /var/lib/kubelet/kubeadm-flags.env
KUBELET_KUBEADM_ARGS=--cgroup-driver=cgroupfs --cni-bin-dir=/opt/cni/bin --cni-conf-dir=/etc/cni/net.d --network-plugin=cni
  • флаг --resolv-conf отсутствует. Думаю, это проблема. Как я могу настроить kubeqdm для его добавления?
  • --cni-bin-dir=/opt/cni/bin неверно. В моей системе этого нет.
linux-uwkw:~ # rpm -ql cni
/etc/cni
/etc/cni/net.d
/etc/cni/net.d/99-loopback.conf.sample
/usr/lib/cni
/usr/lib/cni/noop
/usr/sbin/cnitool
/usr/share/doc/packages/cni
/usr/share/doc/packages/cni/CONTRIBUTING.md
/usr/share/doc/packages/cni/DCO
/usr/share/doc/packages/cni/README.md
/usr/share/licenses/cni
/usr/share/licenses/cni/LICENSE

Думаю, мне нужно положить туда /usr/sbin , верно?

Также журналы из планировщика:

linux-uwkw:~ # docker logs k8s_kube-scheduler_kube-scheduler-linux-uwkw_kube-system_a00c35e56ebd0bdfcd77d53674a5d2a1_0
I0813 21:18:19.816990       1 server.go:126] Version: v1.11.2
W0813 21:18:19.821719       1 authorization.go:47] Authorization is disabled
W0813 21:18:19.821744       1 authentication.go:55] Authentication is disabled
I0813 21:18:19.821787       1 insecure_serving.go:47] Serving healthz insecurely on 127.0.0.1:10251
E0813 21:18:25.603025       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1.PersistentVolume: persistentvolumes is forbidden: User "system:kube-scheduler" cannot list persistentvolumes at the cluster scope
E0813 21:18:25.603122       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1.ReplicationController: replicationcontrollers is forbidden: User "system:kube-scheduler" cannot list replicationcontrollers at the cluster scope
E0813 21:18:25.603161       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1.Service: services is forbidden: User "system:kube-scheduler" cannot list services at the cluster scope
E0813 21:18:25.603253       1 reflector.go:205] k8s.io/kubernetes/cmd/kube-scheduler/app/server.go:176: Failed to list *v1.Pod: pods is forbidden: User "system:kube-scheduler" cannot list pods at the cluster scope
E0813 21:18:25.603286       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1.StorageClass: storageclasses.storage.k8s.io is forbidden: User "system:kube-scheduler" cannot list storageclasses.storage.k8s.io at the cluster scope
E0813 21:18:25.603335       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1.PersistentVolumeClaim: persistentvolumeclaims is forbidden: User "system:kube-scheduler" cannot list persistentvolumeclaims at the cluster scope
E0813 21:18:25.603364       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1beta1.StatefulSet: statefulsets.apps is forbidden: User "system:kube-scheduler" cannot list statefulsets.apps at the cluster scope
E0813 21:18:25.603437       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1beta1.PodDisruptionBudget: poddisruptionbudgets.policy is forbidden: User "system:kube-scheduler" cannot list poddisruptionbudgets.policy at the cluster scope
E0813 21:18:25.603491       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1beta1.ReplicaSet: replicasets.extensions is forbidden: User "system:kube-scheduler" cannot list replicasets.extensions at the cluster scope
E0813 21:18:25.605642       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1.Node: nodes is forbidden: User "system:kube-scheduler" cannot list nodes at the cluster scope
E0813 21:18:26.603723       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1.PersistentVolume: persistentvolumes is forbidden: User "system:kube-scheduler" cannot list persistentvolumes at the cluster scope
E0813 21:18:26.606225       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1.Service: services is forbidden: User "system:kube-scheduler" cannot list services at the cluster scope
E0813 21:18:26.606295       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1.ReplicationController: replicationcontrollers is forbidden: User "system:kube-scheduler" cannot list replicationcontrollers at the cluster scope
E0813 21:18:26.607860       1 reflector.go:205] k8s.io/kubernetes/cmd/kube-scheduler/app/server.go:176: Failed to list *v1.Pod: pods is forbidden: User "system:kube-scheduler" cannot list pods at the cluster scope
E0813 21:18:26.611457       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1.StorageClass: storageclasses.storage.k8s.io is forbidden: User "system:kube-scheduler" cannot list storageclasses.storage.k8s.io at the cluster scope
E0813 21:18:26.612777       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1.PersistentVolumeClaim: persistentvolumeclaims is forbidden: User "system:kube-scheduler" cannot list persistentvolumeclaims at the cluster scope
E0813 21:18:26.616076       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1beta1.StatefulSet: statefulsets.apps is forbidden: User "system:kube-scheduler" cannot list statefulsets.apps at the cluster scope
E0813 21:18:26.616779       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1beta1.PodDisruptionBudget: poddisruptionbudgets.policy is forbidden: User "system:kube-scheduler" cannot list poddisruptionbudgets.policy at the cluster scope
E0813 21:18:26.619308       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1beta1.ReplicaSet: replicasets.extensions is forbidden: User "system:kube-scheduler" cannot list replicasets.extensions at the cluster scope
E0813 21:18:26.620048       1 reflector.go:205] k8s.io/kubernetes/vendor/k8s.io/client-go/informers/factory.go:130: Failed to list *v1.Node: nodes is forbidden: User "system:kube-scheduler" cannot list nodes at the cluster scope
I0813 21:18:28.429769       1 controller_utils.go:1025] Waiting for caches to sync for scheduler controller
I0813 21:18:28.533687       1 controller_utils.go:1032] Caches are synced for scheduler controller
I0813 21:18:28.533868       1 leaderelection.go:185] attempting to acquire leader lease  kube-system/kube-scheduler...
I0813 21:18:28.539621       1 leaderelection.go:194] successfully acquired lease kube-system/kube-scheduler
drpaneas picture drpaneas 14 авг. 2018

У меня точная проблема

я не думаю, что это та же проблема.

KubeDNS работает на

CoreDNS - это DNS-сервер по умолчанию в 1.11.x. вы включили это намеренно?

cat /var/lib/kubelet/kubeadm-flags.env

/var/lib/kubelet/kubeadm-flags.env автоматически создается во время выполнения kubeadm и не подлежит редактированию.
вы можете добавить флаги в /etc/default/kubelet

см. информацию здесь:
https://github.com/kubernetes/kubernetes/blob/master/build/debs/10-kubeadm.conf

флаг --resolv-conf отсутствует.

он будет добавлен только в том случае, если ваш дистрибутив использует это:
https://www.freedesktop.org/software/systemd/man/systemd-resolved.service.html

--cni-bin-dir = / opt / cni / bin --cni-conf-dir = / etc / cni / net.d

это значения по умолчанию, но, AFAIK, это не должно автоматически добавляться во время выполнения.

Сложно сказать, в чем проблема в вашем случае.
лучше открыть новую проблему и следовать шаблону отчета о проблеме.

neolit123 picture neolit123 14 авг. 2018

Я все-таки нашел свою проблему. Мне не хватало двоичного файла loopback CNI в /opt/cni/bin .

cd /opt/cni/bin
curl -L -O https://github.com/containernetworking/cni/releases/download/v0.4.0/cni-amd64-v0.4.0.tgz
tar -xf cni-amd64-v0.4.0.tgz
systemctl restart kubelet
drpaneas picture drpaneas 14 авг. 2018

Я встретил ту же проблему и решил ее установкой фланели. После установки фланели можно правильно создать сердцевину и другие стручки.

Почему установка фланели может решить проблему?

Я также инициализирую свой кластер K8s с помощью kubeadm и добавляю --pod-network-cidr arg. Поэтому я думаю, что если flannel или другие надстройки сети pod не установлены, kubelet не может знать, как назначить ip для pod, и выдает ошибку.

Вы сказали, что видите следующее сообщение, используя journal -xeu kubelet :

26710 kubelet.go:2112] Container runtime network not ready: NetworkReady=false reason:NetworkPluginNotReady message:docker: network plugin is not ready: cni config uninit
Jul 09 21:54:49 beetlejuice kubelet[26710]: E0709 21:54:49.566069   26710 dns.go:131] Nameserver limits were exceeded, some nameservers have been omitted, the applied nameserver line is: 213.133.99.99 213.133.98.98 213.133.100.100
Jul 09 21:54:53 beetlejuice kubelet[26710]: W0709 21:54:53.884846   26710 cni.go:172] Unable to update cni config: No networks found in /etc/cni/net.d

Я также видел похожие журналы на своей машине, и поэтому я думаю, что это причина проблемы.

Yusen1997 picture Yusen1997 15 авг. 2018

Почему установка фланели может решить проблему?

должен быть установлен плагин CNI:
https://kubernetes.io/docs/setup/independent/create-cluster-kubeadm
Installing a pod network add-on
You must install a pod network add-on so that your pods can communicate with each other.

neolit123 picture neolit123 15 авг. 2018

должен быть установлен плагин CNI:
https://kubernetes.io/docs/setup/independent/create-cluster-kubeadm

Мои coredns не могут запуститься, потому что надстройка pod network не установлена ​​после инициализации kubernetes, и теперь я знаю это, спасибо.

Yusen1997 picture Yusen1997 16 авг. 2018

Жаль, что нет логов от планировщика.

Содержимое /var/lib/kubelet/kubeadm-flags.env

кажется, что добавлен флаг --resolv-conf , так что все в порядке.

К настоящему времени это будет куб с одним узлом.

вызовите kubeadm reset а затем снова kubeadm init ... .
затем скопируйте конфигурацию в свой пользовательский каталог и попробуйте установить сетевой плагин pod (weave):

kubectl apply -f "https://cloud.weave.works/k8s/net?k8s-version=$(kubectl version | base64 | tr -d '\n')"

и посмотрите, готовы ли dns pods. это может не иметь смысла, но попробуйте.

меня устраивает! большое спасибо

yixblog picture yixblog 13 мая 2019

Жаль, что нет логов от планировщика.

Содержимое /var/lib/kubelet/kubeadm-flags.env

кажется, что добавлен флаг --resolv-conf , так что все в порядке.

К настоящему времени это будет куб с одним узлом.

вызовите kubeadm reset а затем снова kubeadm init ... .
затем скопируйте конфигурацию в свой пользовательский каталог и попробуйте установить сетевой плагин pod (weave):

kubectl apply -f "https://cloud.weave.works/k8s/net?k8s-version=$(kubectl version | base64 | tr -d '\n')"

и посмотрите, готовы ли dns pods. это может не иметь смысла, но попробуйте.

serviceaccount / weave-net настроен
clusterrole.rbac.authorization.k8s.io/weave-net настроен
clusterrolebinding.rbac.authorization.k8s.io/weave-net настроен
role.rbac.authorization.k8s.io/weave-net настроен
rolebinding.rbac.authorization.k8s.io/weave-net настроен
невозможно распознать совпадений для вида "DaemonSet" в версии "extensions / v1beta1"

Невозможно настроить

sampleref picture sampleref 23 сент. 2019

невозможно распознать совпадений для вида "DaemonSet" в версии "extensions / v1beta1"

это ошибка на стороне плагина CNI.
попробуйте вместо этого плагин Callico CNI.

neolit123 picture neolit123 24 сент. 2019
Была ли эта страница полезной?
0 / 5 - 0 рейтинги

Смежные вопросы

ggee picture ggee  ·  4Комментарии
danderson picture danderson  ·  3Комментарии
helphi picture helphi  ·  3Комментарии
ep4eg picture ep4eg  ·  3Комментарии
kvaps picture kvaps  ·  3Комментарии