Kubernetes: एपिसर्वर 1.6 . में कंटेनर के अंदर शुरू करने में विफल रहता है

क्या यह बग रिपोर्ट या सुविधा अनुरोध है? (एक चुनें): बग रिपोर्ट

कुबेरनेट्स संस्करण ( kubectl version का उपयोग करें):
ग्राहक: v1.6.1
सर्वर: v1.6.1+coreos.0

पर्यावरण :

• क्लाउड प्रदाता या हार्डवेयर कॉन्फ़िगरेशन : नंगे धातु, 1 नोड (3 नोड्स के लिए भी परीक्षण किया गया = 1 मास्टर + 2 कर्मचारी)
• ओएस : कोरओएस 1298.7.0
• कर्नेल : 4.9.16-coreos-r1
• उपकरण स्थापित करें : quay.io/coreos/hyperkube:v1.6.1_coreos.0 सिस्टमड के रूप में छवि kubelet.service + मुख्य घटकों के लिए /etc/kubernetes/manifests में प्रकट होता है

kubelet.service है:

# /etc/systemd/system/kubelet.service
[Unit]
Description=Kubelet service of Kubernetes

[Service]
# Mounting /etc/hosts is required for kubelet to be able to resolve
# nodes via its aliases (which may be not DNS routable).
Environment="RKT_RUN_ARGS= \
  --volume=etc-hosts,kind=host,source=/etc/hosts --mount volume=etc-hosts,target=/etc/hosts \
  --volume=var-log,kind=host,source=/var/log --mount volume=var-log,target=/var/log \
  --volume=dns,kind=host,source=/etc/resolv.conf --mount volume=dns,target=/etc/resolv.conf \
  --uuid-file-save=/var/run/kubelet-pod.uuid"
Environment=KUBELET_IMAGE_URL=quay.io/coreos/hyperkube
Environment=KUBELET_IMAGE_TAG=v1.6.1_coreos.0
ExecStartPre=/usr/bin/mkdir -p /etc/kubernetes/manifests
ExecStartPre=/usr/bin/mkdir -p /var/log/containers
ExecStartPre=-/usr/bin/rkt rm --uuid-file=/var/run/kubelet-pod.uuid
# Specifying all node labels here is required for kubelet
# to let it know its node state for correct recovery/restarts
# before sychronization with kube-apiserver happens.
ExecStart=/usr/lib/coreos/kubelet-wrapper \
  --port=10250 \
  --tls-cert-file=/etc/kubernetes/ssl/kubelet.crt \
  --tls-private-key-file=/etc/kubernetes/ssl/kubelet.key \
  --kubeconfig=/etc/kubernetes/kubeconfig-kubelet.yaml \
  --require-kubeconfig \
  --register-node=true \
  --allow-privileged=true \
  --pod-manifest-path=/etc/kubernetes/manifests \
  --hostname-override=n1.myhost.net \
  --cluster-dns=10.3.0.10 \
  --cluster-domain=cluster.local \
  --node-labels=role/apiserver=true,role/application=true \
  --network-plugin= \
  --sync-frequency=30s
ExecStop=-/usr/bin/rkt stop --uuid-file=/var/run/kubelet-pod.uuid
Restart=always
RestartSec=10

[Install]
WantedBy=multi-user.target

/etc/kubernetes/manifests/kube-apiserver.yml है:

kind: Pod
apiVersion: v1
metadata:
  name: kube-apiserver
  namespace: kube-system
spec:
  hostNetwork: true
  containers:
    - name: kube-apiserver
      image: quay.io/coreos/hyperkube:v1.6.1_coreos.0
      command:
        - /hyperkube
        - apiserver
        - --bind-address=0.0.0.0
        - --secure-port=8443
        - --insecure-port=8081
        - --advertise-address=<public ip>
        - --external-hostname=n1.myhost.net
        - --client-ca-file=/etc/kubernetes/ssl/ca.crt
        - --tls-cert-file=/etc/kubernetes/ssl/apiserver.crt
        - --tls-private-key-file=/etc/kubernetes/ssl/apiserver.key
        - --service-account-key-file=/etc/kubernetes/ssl/apiserver.key
        - --service-cluster-ip-range=10.3.0.0/24
        - --etcd-servers=http://n1.myhost.net:4001
        - --etcd-cafile=/etc/ssl/etcd/ca.crt
        - --etcd-certfile=/etc/ssl/etcd/client.crt
        - --etcd-keyfile=/etc/ssl/etcd/client.key
        - --storage-backend=etcd2
        - --storage-media-type=application/json
        - --kubelet-https=true
        - --kubelet-certificate-authority=/etc/kubernetes/ssl/ca.crt
        - --kubelet-client-certificate=/etc/kubernetes/ssl/apiserver.crt
        - --kubelet-client-key=/etc/kubernetes/ssl/apiserver.key
        - --allow-privileged=true
        - --anonymous-auth=false
        - --admission-control=NamespaceLifecycle,LimitRanger,ServiceAccount,ResourceQuota
        - --runtime-config=extensions/v1beta1=true,extensions/v1beta1/thirdpartyresources=true
      ports:
        - name: https
          containerPort: 8443
          hostPort: 8443
        - name: local
          containerPort: 8081
          hostPort: 8081
      volumeMounts:
        - name: ssl-certs-kubernetes
          mountPath: /etc/kubernetes/ssl
          readOnly: true
        - name: ssl-certs-etcd
          mountPath: /etc/ssl/etcd
          readOnly: true
        - name: ssl-certs-host
          mountPath: /etc/ssl/certs
          readOnly: true
  volumes:
    - name: ssl-certs-kubernetes
      hostPath:
        path: /etc/kubernetes/ssl
    - name: ssl-certs-etcd
      hostPath:
        path: /etc/ssl/etcd
    - name: ssl-certs-host
      hostPath:
        path: /usr/share/ca-certificates

क्या हुआ :

kube-apiserver पॉड शुरू होता है और त्रुटि के साथ तुरंत बाहर निकलता है ( docker logs से):

F0408 09:01:03.289906       1 controller.go:128] Unable to perform initial IP allocation check: unable to refresh the service IP block: Get https://localhost:8443/api/v1/services: dial tcp: lookup localhost on 8.8.8.8:53: no such host

किसी तरह apiserver बाहरी DNS के माध्यम से localhost को हल करने का प्रयास करता है।

आपको क्या होने की उम्मीद थी :

kube-apiserver सामान्य रूप से शुरू होना चाहिए जैसा कि 1.5 Kubernetes संस्करणों पर होता है।

इसे कैसे पुन: पेश करें (जितना संभव हो उतना न्यूनतम और सटीक):

CoreOS पर Kubernetes क्लस्टर को बूट करके लेकिन v1.6.1 Kubernetes संस्करण के लिए।

हमें और कुछ जानने की जरूरत है :

जैसा कि मैंने जांच की है कि ClusterFirstWithHostNet मान को dnsPolicy पैरामीटर में PodSpec में 1.6 में जोड़ा गया था। इसे कहते हैं:

होस्टनेटवर्क के साथ डीएनएस विकल्प सेट करने के लिए, आपको स्पष्ट रूप से 'क्लस्टरफर्स्टविथहोस्टनेट' के लिए डीएनएस नीति निर्दिष्ट करनी होगी।

मैंने स्पष्ट रूप से dnsPolicy: ClusterFirstWithHostNet निर्दिष्ट करने का प्रयास किया, और एक अलग त्रुटि थी:

F0408 08:57:52.675808       1 controller.go:128] Unable to perform initial IP allocation check: unable to refresh the service IP block: Get https://localhost:8443/api/v1/services: dial tcp: lookup localhost on 10.3.0.10:53: write udp <public ip>:37836->10.3.0.10:53: write: operation not permitted

इसके अलावा, kube-apiserver सीएलआई विकल्पों को देखा और ट्यून किए जाने से संबंधित कुछ नहीं मिला।

मेरे इंस्टॉलेशन में KubeDNS को kube-system नेमस्पेस में सामान्य परिनियोजन के रूप में तैनात किया गया है, न कि /etc/kubernetes/manifests dir में क्लस्टर एडऑन के रूप में।