Trident: Échecs aléatoires du montage pvc dus à des délais d'attente blkid

Décrivez le bogue
Nous observons de nombreux pods bloqués au hasard à l'état ContainerCreating car ils ne peuvent pas monter les pvc netapp. La description des pods indique des délais d'attente lors de l'obtention d'informations sur le périphérique iSCSI et les journaux du démon de trident suggèrent que cela est dû à des délais d'attente lors de l'exécution de la commande blkid sur l'hôte.
Il s'agit d'un événement aléatoire et ne peut pas encore être corrélé avec certains pvc et hôtes.

Environnement

• Version Trident : 20.07.1
• Indicateurs d'installation de Trident utilisés : tridentctl install -n sys-trident --generate-custom-yaml (puis kubectl apply -f - pour les manifestes générés)
• Exécution du conteneur : docker://19.3.12
• Version de Kubernetes : v1.19.2
• Orchestrateur Kubernetes : aucun
• Portes de fonctionnalités activées par Kubernetes : valeurs par défaut de kubernetes uniquement
• Système d'exploitation : Flatcar Container Linux par Kinvolk 2605.6.0 (Oklo) 5.4.67-flatcar
• Types de backend NetApp : ontap-san, ONTAP 9.7.0

Reproduire
Nous pouvons l'observer au hasard sur nos nœuds de cluster (ne semble pas être lié à un groupe particulier d'hôtes)

Comportement attendu
Un comportement de montage cohérent dans une fenêtre de temps raisonnable.

Contexte supplémentaire
En décrivant un pod "bloqué", nous pouvons voir :

Events:
  Type     Reason       Age                  From     Message
  ----     ------       ----                 ----     -------
  Warning  FailedMount  51m (x5 over 72m)    kubelet  Unable to attach or mount volumes: unmounted volumes=[data], unattached volumes=[data thanos-storage vault-tls thanos-store-token-lj9j5]: timed out waiting for the condition
  Warning  FailedMount  42m (x3 over 56m)    kubelet  Unable to attach or mount volumes: unmounted volumes=[data], unattached volumes=[thanos-storage vault-tls thanos-store-token-lj9j5 data]: timed out waiting for the condition
  Warning  FailedMount  17m (x15 over 74m)   kubelet  Unable to attach or mount volumes: unmounted volumes=[data], unattached volumes=[vault-tls thanos-store-token-lj9j5 data thanos-storage]: timed out waiting for the condition
  Warning  FailedMount  14m (x22 over 74m)   kubelet  MountVolume.MountDevice failed for volume "pvc-e22cdf07-acfc-42af-a46a-bffd5ac32514" : rpc error: code = Internal desc = error getting iSCSI device information: process killed after timeout
  Warning  FailedMount  4m11s (x4 over 69m)  kubelet  Unable to attach or mount volumes: unmounted volumes=[data], unattached volumes=[thanos-store-token-lj9j5 data thanos-storage vault-tls]: timed out waiting for the condition

sur le même nœud à partir des journaux de pod respectifs du daemonset trident :

time="2020-10-14T14:32:41Z" level=debug msg=">>>> osutils.execCommandWithTimeout." args="[if=/dev/sdc bs=4096 count=1 status=none]" command=dd timeoutSeconds=5s
time="2020-10-14T14:32:41Z" level=debug msg="<<<< osutils.execCommandWithTimeout." command=dd error="<nil>"
time="2020-10-14T14:32:41Z" level=debug msg="<<<< osutils.ensureDeviceReadable"
time="2020-10-14T14:32:41Z" level=debug msg=">>>> osutils.getFSType" device=/dev/sdc
time="2020-10-14T14:32:41Z" level=debug msg=">>>> osutils.waitForDevice" device=/dev/sdc
time="2020-10-14T14:32:41Z" level=debug msg="Device found." device=/dev/sdc
time="2020-10-14T14:32:41Z" level=debug msg="<<<< osutils.waitForDevice" device=/dev/sdc
time="2020-10-14T14:32:41Z" level=debug msg=">>>> osutils.execCommandWithTimeout." args="[/dev/sdc]" command=blkid timeoutSeconds=5s
time="2020-10-14T14:32:46Z" level=error msg="process killed after timeout" process=blkid
time="2020-10-14T14:32:46Z" level=debug msg="<<<< osutils.execCommandWithTimeout." command=blkid error="process killed after timeout"
time="2020-10-14T14:32:46Z" level=debug msg="<<<< osutils.getFSType"
time="2020-10-14T14:32:46Z" level=debug msg="<<<< osutils.getDeviceInfoForLUN" iSCSINodeName="iqn.1992-08.com.netapp:sn.0205ffce026911ebb4d9d039ea1a7953:vs.9" lunID=1 needFSType=true
time="2020-10-14T14:32:46Z" level=debug msg="<<<< osutils.AttachISCSIVolume"
time="2020-10-14T14:32:46Z" level=debug msg="<<<< NodeStageVolume" Method=NodeStageVolume Type=CSI_Node
time="2020-10-14T14:32:46Z" level=debug msg="Released shared lock (NodeStageVolume-pvc-e22cdf07-acfc-42af-a46a-bffd5ac32514)." lock=csi_node_server
time="2020-10-14T14:32:46Z" level=error msg="GRPC error: rpc error: code = Internal desc = error getting iSCSI device information: process killed after timeout"

il semble que blkid ne puisse pas revenir dans la fenêtre de temps autorisée (?)
si nous nous connectons en ssh à l'hôte et essayons la même commande :

$ time sudo blkid /dev/sdc
/dev/sdc: UUID="f593b708-ed88-47b7-88ce-f9b8c85ab96b" TYPE="ext4"

real    0m36.393s
user    0m0.016s
sys     0m0.021s

notre configuration back-end json :
```
{
"version 1,
"storageDriverName": "ontap-san",
"managementLIF": "10.20.50.6",
"dataLIF": "10.20.50.4",
"svm": "dev_kube",
"igroupName": "dev_kube_trident",
"nom d'utilisateur": "xxxxxxxxx",
"mot de passe": "xxxxxxxxxxxx",
"par défaut": {
"cryptage": "vrai"
}
}
````

Nous sommes vraiment coincés ici, donc toute aide sur celui-ci sera très appréciée !