Fabric: Как читать результаты в ThreadingGroup при частичных сбоях?

Привет @shadyabhi ,

Не уверен, пытаетесь ли вы поймать конкретное исключение или просто хотите поймать все исключения, происходящие в отдельных потоках. Я думаю, что объект ThreadingGroup уже обходит объекты исключений, используя очереди, и вызывает их, если они встречаются во время выполнения. Я смог увидеть трассировку стека, используя следующий фрагмент кода:

def run_data(c):
    c.run('date', hide='both')

<strong i="8">@task</strong>
def thread_exception_example(c):
    hosts = ['localhost', 'fakehost', 'localhost']

    # python list comprehension
    {c: run_data(c) for c in Group(*hosts)}

В командной строке я запустил: fab thread-exception-example

Привет @bossjones ,

Спасибо за ответ. Однако я не использую команду fab, а выполняю все это, используя ткань в качестве библиотеки. Таким образом, ответ все еще ожидает и будет оценен.

Другими словами, fab обрабатывает то, что я сам хочу обрабатывать в своем коде. Есть причины, по которым я не хочу использовать команду fab напрямую, поскольку я хотел бы иметь больше гибкости в том, как я вызываю задачи.

Спасибо

Всем привет,

Извините, я упустил из виду детали. Проверил код ткани и получил подробную информацию.

Аргумент с GroupException представляет собой словарь с ключом в виде объекта fabric.connection.Connection и значением в виде объекта fabric.runners.Result .

except GroupException as e:
         for c, r in e.result.items():
             print "Connection: {}, Result: {}".format(c, r)

Привет,

В дополнение к комментарию shadyabhi, вот способ, которым я пользуюсь для работы с GroupException.
Я надеюсь, это поможет !!

import logging, socket, paramiko.ssh_exception
from fabric import Connection, Config, ThreadingGroup, exceptions, runners

...

g = ThreadingGroup.from_connections(c)
try:
    result = g.run('hostname' )  # (just a basic command)
except exceptions.GroupException as e:
    i = 0
    for c, r in e.result.items():
        print("Host[{}] = [{}]".format(i,c.host) )
        if isinstance(r,runners.Result) :
            print("ok, fine")
        elif isinstance(r,socket.gaierror) :
            print("Network error")
        elif isinstance(r,paramiko.ssh_exception.AuthenticationException) :
            print("Auth failed")
        else:
            print("something else")
        i+=1

(получил от службы поддержки ActivCloud )

Спасибо @akiuni за ваш пример! Я новичок в Python/Fabric, и это помогло мне понять, как делать запросы с помощью ThreadedGroup и собирать результаты при возникновении исключения. Вот моя расширенная версия вашего примера. Очень признателен! Что бы это ни стоило, я также разместил это в Stackoverflow .

# requires fabric 2.x - run 'pip install fabric' to install it
import logging, socket, paramiko.ssh_exception
from fabric import Connection, Config, SerialGroup, ThreadingGroup, exceptions, runners
from fabric.exceptions import GroupException


# Note: You need to supply your own valid servers here to ssh to of course!
def main():
    testHosts("All should succeed", "validServer1,validServer2,validServer3")
    testHosts("Some should fail", "validServer1,validServer2,BADSERVER1,validServer3,BADSERVER2")

def testHosts(message, hostsAsString):
    print("")
    print(message)

    # Get list of hosts from somewhere, and convert them to connections
    hosts = hostsAsString.split(",")
    servers = [Connection(host=host) for host in hosts]

    # Create a thread group to run requests in parallel
    g = ThreadingGroup.from_connections(servers)
    try:
        command = "df -h / | tail -n1 | awk '{print $5}'"
        results = g.run(command, hide=True)
        for r in results:
            connection = results[r]
            print("{}".format(r.host) )
            print("  SUCCESS, " + connection.stdout.strip())
    except GroupException as e:
        # If an exception occurred, at least one request failed. 
        # Iterate through results here
        for c, r in e.result.items():
            print("{}".format(c.host) )
            if isinstance(r,runners.Result) :
                print("  SUCCESS, " + r.stdout.strip())
            elif isinstance(r,socket.gaierror) :
                print("  FAILED,  Network error")
            elif isinstance(r,paramiko.ssh_exception.AuthenticationException) :
                print("  FAILED,  Auth failed")
            else:
                print("  FAILED,  Something other reason")

main()