Cardano-db-sync: Kesalahan "pencarian DB gagal di insertABlock" acak

saya sudah melihat

DB lookup fail in insertABlock: block hash

sebelumnya, tetapi satu karena postgres kehabisan ruang disk dan yang lainnya setelah saya melakukan manipulasi database yang berpotensi tidak aman selama pengujian.

Adapun bagian FROZEN FOREVER , ini bukan sesuatu yang saya kendalikan langsung. Kode saya memanggil kode jaringan yang melakukan protokol ChainSync yang kemudian memanggil kembali ke bagian lain dari kode saya. Dalam contoh ini, kode dalam saya melemparkan pengecualian yang ditangkap oleh kode jaringan dan tidak disebarkan kembali ke kode saya. Mungkin ada perbaikan untuk ini, tetapi tidak mungkin sederhana.

Saran saya adalah:

• Pastikan mesin memiliki ruang disk yang cukup (disinkronkan sepenuhnya ke Epoch 220, instance db-sync saya menggunakan disk 6G).
• Jatuhkan dan buat ulang basis data (untuk memastikan korupsi yang ada telah dihapus).
• Pantau sinkronisasi secara manual (harus hingga sekitar 3 jam).

Maaf, saya lupa menyebutkan bahwa itu tidak terjadi lagi sejak saat itu dari log terlampir; itulah mengapa saya berasumsi itu bisa menjadi masalah luar biasa dengan instance postgres saya (saya sedang bermain dengan HA pada waktu itu IIRC).

Kita bisa membiarkan ini terbuka untuk sementara waktu untuk melihat apakah kita menemukan petunjuk yang lebih bermanfaat.

JFTR, saya menyinkronkan ulang mainnet dari awal dan menemukan bahwa itu benar-benar pulih setelah beberapa saat (setidaknya pada versi terbaru) dan itu mungkin disebabkan oleh beberapa cardano-node socket unavailability [0].
Masalah terakhir ini karena saya membagikan soket melalui TCP sehingga dapat diakses ke berbagai layanan yang berjalan dari pod k8s yang berbeda (tidak ada ipc bersama), dan saya mendapatkan beberapa ketidakstabilan (belum yakin dari mana asalnya, saya perlu melakukan lebih banyak penyetelan TCP) .

[0]

[db-sync-node:Info:217] [2020-10-20 08:09:02.03 UTC] epochPluginInsertBlock: epoch 182
[db-sync-node:Info:217] [2020-10-20 08:11:01.01 UTC] insertByronBlock: slot 3955000, block 3952915, hash d5941f934cf5eb5c3105b584c07aa6c872272dbd0d4fbe78efb36682ed59f211
[db-sync-node:Info:217] [2020-10-20 08:15:22.01 UTC] insertByronBlock: slot 3960000, block 3957915, hash 92494b54140f9db989618f93f11be579b1112d66c173d09cdfb5ac8f9ae6d9ce
[db-sync-node:Error:217] [2020-10-20 08:15:54.86 UTC] DB lookup fail in insertABlock: block hash 55f53f6ddf3546aa29079945eb995244c4a5a205bb287ca76c89a85e2f60ef6d
[db-sync-node:Info:217] [2020-10-20 08:15:54.86 UTC] Shutting down DB thread
[db-sync-node:Error:220] [2020-10-20 08:15:54.86 UTC] recvMsgRollForward: AsyncCancelled
[db-sync-node:Error:211] [2020-10-20 08:34:04.83 UTC] ChainSyncWithBlocksPtcl: AsyncCancelled
[db-sync-node.Subscription:Error:207] [2020-10-20 08:34:04.83 UTC] [String "Application Exception: LocalAddress {getFilePath = \"/node-ipc/node.socket\"} MuxError MuxBearerClosed \"<socket: 12> closed when reading data, waiting on next header True\"",String "SubscriptionTrace"]
[db-sync-node.ErrorPolicy:Warning:4] [2020-10-20 08:34:04.83 UTC] [String "ErrorPolicySuspendPeer (Just (ApplicationExceptionTrace (MuxError MuxBearerClosed \"<socket: 12> closed when reading data, waiting on next header True\"))) 20s 20s",String "ErrorPolicyTrace",String "LocalAddress {getFilePath = \"/node-ipc/node.socket\"}"]
[db-sync-node.Handshake:Info:1879] [2020-10-20 08:34:05.83 UTC] [String "Send MsgProposeVersions (fromList [(NodeToClientV_1,TInt 764824073),(NodeToClientV_2,TInt 764824073),(NodeToClientV_3,TInt 764824073)])",String "LocalHandshakeTrace",String "ConnectionId {localAddress = LocalAddress {getFilePath = \"\"}, remoteAddress = LocalAddress {getFilePath = \"/ipc/node.socket\"}}"]
[db-sync-node.Handshake:Info:1879] [2020-10-20 08:34:05.85 UTC] [String "Recv MsgAcceptVersion NodeToClientV_3 (TInt 764824073)",String "LocalHandshakeTrace",String "ConnectionId {localAddress = LocalAddress {getFilePath = \"\"}, remoteAddress = LocalAddress {getFilePath = \"/ipc/node.socket\"}}"]
[db-sync-node:Info:1883] [2020-10-20 08:34:05.85 UTC] Starting chainSyncClient
[db-sync-node:Info:1883] [2020-10-20 08:34:07.63 UTC] Cardano.Db tip is at slot 3960564, block 3958479
[db-sync-node:Info:1889] [2020-10-20 08:34:07.63 UTC] Running DB thread
[db-sync-node:Info:1889] [2020-10-20 08:34:08.16 UTC] Rolling back to slot 3960564, hash 55f53f6ddf3546aa29079945eb995244c4a5a205bb287ca76c89a85e2f60ef6d
[db-sync-node:Info:1889] [2020-10-20 08:34:08.17 UTC] Deleting blocks numbered: []
[db-sync-node:Info:1889] [2020-10-20 08:37:42.51 UTC] insertByronBlock: slot 3965000, block 3962915, hash c1fa47cd48391aa3774e61c8830b5d1e8bbf62c4720b856a952fdd6d95dcd5e6
[db-sync-node:Info:1889] [2020-10-20 08:41:59.70 UTC] insertByronBlock: slot 3970000, block 3967915, hash 71dcc988afa8fbf6e2f5c88b165f7ee7dbbe8a1a07141df8a5f2c42986494528
[db-sync-node:Info:1889] [2020-10-20 08:46:19.05 UTC] epochPluginInsertBlock: epoch 183
[db-sync-node:Info:1889] [2020-10-20 08:46:43.59 UTC] insertByronBlock: slot 3975000, block 3972915, hash 9be00c8a13eeaa21b24b070fe9254c6b30c3e1953e8625604c86e8c8d5695213
[db-sync-node:Info:1889] [2020-10-20 08:51:42.20 UTC] insertByronBlock: slot 3980000, block 3977915, hash ec3903b66e2a7638315e9d4b9a19ed904b71eae3e5e4cdd412a9b8ed5875b970
[db-sync-node:Info:1889] [2020-10-20 08:57:17.01 UTC] insertByronBlock: slot 3985000, block 3982915, hash 527077e870a8fa8648fb035107c906cc72e3ea2438a674020dc472ec9e2b8d50
[db-sync-node:Info:1889] [2020-10-20 09:01:33.12 UTC] insertByronBlock: slot 3990000, block 3987915, hash 2d6ed2788d5a694d05866d5c08002e46b9e119cab71c2e56d5b76432f37b8eda
[db-sync-node:Info:1889] [2020-10-20 09:05:17.18 UTC] insertByronBlock: slot 3995000, block 3992915, hash e043d137b267ed16b73b41cb92889b37cad381c53c80390598b547dc9fc58892
[db-sync-node:Info:1889] [2020-10-20 09:06:00.19 UTC] epochPluginInsertBlock: epoch 184
[db-sync-node:Info:1889] [2020-10-20 09:09:43.66 UTC] insertByronBlock: slot 4000000, block 3997915, hash a1f93a150ed43de21591124248b27ba0c830bed8c8e81c9a17d7823b5a6cfc97
[db-sync-node:Info:1889] [2020-10-20 09:14:39.01 UTC] insertByronBlock: slot 4005000, block 4002914, hash 3ad70e79c62b3f0cafac5a6bcce66702cac04ea16b7487ceb4627cd61eb9ca42

itu mungkin disebabkan oleh beberapa ketidaktersediaan soket cardano-node

Itu dengan sendirinya tidak akan menyebabkan pencarian DB gagal.

Namun, jika db-sync melakukan pencarian DB ketika soket menghilang, pengecualian yang dihasilkan dapat menyebabkan pencarian DB dihentikan lebih awal, yang pada gilirannya dapat dilaporkan sebagai pencarian yang gagal.

Anda akan melihat bahwa ketika soket kembali, soket kembali untuk memblokir hash 55f53f6d...2f60ef6d (hash yang sebelumnya gagal dicari) dan kali ini pencarian harus berhasil atau sinkronisasi rantai akan mati di sana.

Apakah layak untuk membiarkan ini tetap terbuka? Masalahnya adalah di hampir semua kasus, saya tidak dapat memperbaiki masalah yang tidak dapat saya reproduksi.