Fabric: Ubuntu16.04ホストで再起動が壊れています

run（ 'reboot'）とまったく同じです

手動のrunと同じであることは驚くべきことではありません。明らかに、Ubuntuの再起動やSSH接続などの処理に関して何かが変更されています。

明らかなことは何も思い浮かびませんが、 reboot() （LinuxではなくFab）は非常に基本的です-単にsudo('reboot')呼び出し、Fabricの一般的な再接続設定を一時的に微調整して、重要な再起動シーケンス後の再接続を処理できるようにします（デフォルトでは、すぐに諦めます）。

https://github.com/fabric/fabric/blob/c0224a52df59821f21a8c0bd47ce15e42c2046a4/fabric/operations.py#L1244を参照して

また、手がかりが得られる可能性があるため、Paramikoのロギングを有効にしてみてください（トラブルシューティングページの下部-http：//www.fabfile.org/troubleshooting.htmlを参照）。

実際には、考え直し上で、それはUbuntuのように聞こえるreboot何とか決して出ない、またはファブリックの実行ハンドラに終了コードを提出している（ run / sudo ）、あなたはその注意以来、 sudoは、待ってからEnterをマッシュすると怒ってしまうものです。

reboot()コードを見ると、 sudo('reboot')呼び出しが最終的に終了することが期待されているため、A）少し待って、B）再接続を開始できます。

Fabricの側では、実行がsudo内でぶらぶらしているという事実は、リモートで何かがその期待に違反していることを意味します。 ちょっと変だ。 ファブリック自体のバグかもしれませんが、リモートエンドでの動作が悪いように感じます。 （追記：これはどのファブリックバージョンで表示されていますか？）

オフハンドの考え-おそらくsudoにtimeout=を設定し、次にその周りにexcept TimeoutException: passを設定することができます。 これにより、この（奇妙な）状況でも、デフォルトで再接続を試みることが保証されます。

唯一の欠点は、 rebootが実際にハングしていて、システムsudo内ではなく、接続ループ。

Ubuntu 16.04で変更されたもう1つの非常に奇妙な動作は、次のとおりです。 sshセッションでpoweroffを実行すると、マシンの電源はオフになりますが、SSHセッションがハングします。 Ctrl + C、Ctrl + Dなどを実行する方法はありません。 私にできることは、_lot_を待ってから、sshが次のように中止することだけです。
packet_write_wait: Connection to 192.168.56.11: Broken pipe

私はSSH接続処理の深いポケットには本当に興味がありませんが、これは再起動の場合とまったく同じ問題である可能性があります。

再起動が壊れた（AWS上の最新のUbuntu 16.04、Fabric == 1.12.0）が、別の方法で発生しました。 私にとってそれはただ投げます：

Fatal error: sudo() received nonzero return code -1 while executing!

Requested: reboot
Executed: sudo -S -p 'sudo password:'  /bin/bash -l -c "reboot"

ターミナルでsudo rebootを手動で実行すると動作します（ホストが再起動します）。

注目に値するかもしれません：

$ readlink /sbin/reboot 
/bin/systemctl
$ readlink /sbin/shutdown
/bin/systemctl

そしてもう一つの奇妙なこと。 再起動コードをaws-cliを使用するように変更し、呼び出し後（約1秒かかり、非同期のようです）、 sudo('add-apt-repository --yes ppa:nginx/stable')を実行します。 常に機能していましたが、再起動後も-1が返されました。

sudo: add-apt-repository --yes ppa:nginx/stable

Fatal error: sudo() received nonzero return code -1 while executing!

Requested: add-apt-repository --yes ppa:nginx/stable
Executed: sudo -S -p 'sudo password:'  /bin/bash -l -c "add-apt-repository --yes ppa:nginx/stable"

次に、 fabric.network.disconnect_all()追加して、再接続するファブリックを作成しようとしました。 その結果、パスワードが要求されました（なぜ??）：

[...] sudo: add-apt-repository --yes ppa:nginx/stable
[...] Login password for 'ubuntu': 

そして、再起動後にtime.sleep(60 * 3)を追加した後にのみ機能し始めました。 これは明らかに貧弱なバンドエイドであり、今ではパスワードの問題を適切に処理する方法に戸惑っています。 この問題に関連しているようです。

問題は、コマンドのステータスがssh接続を介して戻る前に、「再起動」が「速すぎる」場合があることのようです。

（ヒント：結果としてssh接続がフリーズしている場合： \n~.別名enter、tilde、periodと入力します。これがデフォルトのsshエスケープ文字であり、sshの切断コマンドです。ctrl-を試すだけの場合cまたはctrl-dの場合、sshはそれを反対側で実行されているプロセスに渡そうとします。）

1つの解決策は、 shutdown -r +1を使用することです。これにより、次の1分間の再起動がスケジュールされ、起動が開始されるまで1分間待ってから、再接続の試行が開始されます。 確かに、1分待つのは素晴らしいことではありません。

試してみるハッキーなこと： shutdown -r +0はrebootと同等であるはずですが、VirtualBoxで実行されているUbuntu-16.04の限定テストでは、数分の1秒長くなる傾向があり、次のように表示されます手動sshセッションを切断する直前のシェルプロンプト。

これはおそらく＃1444の重複です

initデーモンがupstartに切り替えられた場合、再起動は期待どおりに機能します。 systemdがsshdをすぐに殺しているようです。

Debian / Ubuntuのsystemdパッケージにバグがあり、シャットダウン時に、SSHサービスの前にネットワークサービスを強制終了して、すべてがハングしました。
最新のポイントリリースで修正されました。 Ubuntuパッケージのステータスがわからない。

https://bugs.debian.org/cgi-bin/bugreport.cgi?bug=751636

Ubuntuのバグを報告しました：
https://bugs.launchpad.net/ubuntu/+source/openssh/+bug/1645002

一部のスクリプトでのreboot（）の使用に関する問題もありました。 パスワードで接続すると再起動が正しく機能することがわかりましたが、keyfile-authenticationを使用すると、接続がハングアップしました（再起動が実行されました）。

ubuntuのバグhttps://bugs.launchpad.net/ubuntu/+source/openssh/+bug/1645002は、16.10で修正済みとしてマークされてい

私の現在の動作では、paramiko / fabricはssh接続が閉じられたことを即座に検出しますが、paramiko / fabricが再起動コマンドの完了を確認する前です。 少なくとも、元のレポートのように無期限にハングすることはありません。

Fatal error: sudo() received nonzero return code -1 while executing!
...
Aborting.

プレーンなreboot()は、AW​​SEC2とローカルのvirtualboxVMに対するいくつかのテストで一貫してそれを行いました。 （私は常にキーファイル認証を使用していました。）

上記の詳細なしで提案したように、短くてエレガントな回避策を見つけました。

reboot(command="shutdown -r +0")

それは私にとって期待どおりに機能しました（AWSEC2とローカルvirtualboxVMに対する私の少数のテストでは、すべて最新のubuntu 16.04を実行しています）。 「shutdown-rnow」は「reboot」のように動作し、機能していないように見えることに注意してください。

freebsdとopenbsdのマニュアルページをざっと見てみたところ、これらのパラメータをサポートするshutdownコマンドがあるようです。 コマンド「shutdown-r + 0」は、「再起動」が機能したほとんどすべてのUNIXシステムで機能すると思います。 したがって、デフォルトのコマンドを変更したり、ドキュメントを更新したりすることを検討できます。 （しかし、最初にBSDシステムでのテストのレポートを見たいと思います。）

shutdown -r +0は私たちにとって十分ではありません。 再起動は手動タイムアウトを受け入れないため、次のようなことも試しました。

try:
    sudo("shutdown -r +0", timeout=300)
except NetworkError:
    pass
# in case the sudo times out during reboot
sleep(15)

このすべての手を振っているにもかかわらず、次のコマンドは無期限にハングします。 接続プールがデッド接続を保持（および使用）している可能性はありますか？ もしそうなら、回避策はありますか？ 接続レベルのタイムアウトを一時的に減らすことはできますか？

実際、 reboot()ように、既存の接続を置き換える必要があります。

https://github.com/fabric/fabric/blob/1.13.2/fabric/operations.py#L1289 -L1294

古い問題を復活させて申し訳ありませんが、LXCコンテナを再起動しようとしたときにこの問題が発生することも確認できます。 @ploxilnのcommand="shutdown -r +0"の使用に関する提案は、私たちにとってはうまくいきました。

bashがインストールされたFreeBSD11.1の新規インストールでこのエラーを確認する：

reboot(wait=1)結果：

Fatal error: sudo() received nonzero return code -1 while executing!

Requested: reboot
Executed: sudo -S -p 'sudo password:'  /usr/local/bin/bash -l -c "reboot"

Aborting.
Traceback (most recent call last):
…
    raise env.abort_exception(msg)
hosts.FabricException: sudo() received nonzero return code -1 while executing!

@ ambsw-technologyと@ploxilnのコメントを読んだ後、物事を進めるためにこれが必要になり

sudo('shutdown -r +0')
time.sleep(30)
fabric.state.connections.connect(env.host_string)

参考までに、これは18.04.2LTSサーバーに対しても見られます。

これに対する修正はありますか？ 16.04でも問題が発生する