Mc: Uso del espacio del cubo

Creado en 6 mar. 2020  ·  20Comentarios  ·  Fuente: minio/mc

No estoy seguro de que https://github.com/minio/minio/issues/6577 responda la pregunta original por completo, mc admin info play no se muestra por uso de depósito, solo uso combinado de depósito de todo el clúster.

Otras soluciones proporcionadas por el equipo de minio se sienten hackeadas al escuchar las notificaciones del cubo.

Además, las notificaciones de depósito según la documentación no funcionan para el caso de uso cuando minio se usa como puerta de enlace para s3 , con o sin caché.

community medium stale

Comentario más útil

Aun relevante

Todos 20 comentarios

mc admin info uso del depósito basado en

@harshavardhana Estoy hablando aquí de clústeres regulares (implementaciones de servidores). No veo ningún uso por depósito, solo uso global.

Deje de abusar de la autoridad y descarte los problemas sin leerlos detenidamente.

Gateway fue solo un ejemplo de la falta de documentación.

@harshavardhana Estoy hablando aquí de clústeres regulares (implementaciones de servidores). No veo ningún uso por depósito, solo uso global.

@ s3rj1k que está disponible como admin API https://github.com/minio/minio/blob/master/pkg/madmin/info-commands.go#L172

Deje de abusar de la autoridad y descarte los problemas sin leerlos detenidamente.

El motivo para cerrar el problema es la falta de información: la plantilla del problema está ahí por una razón que no usaste. Te conviene proporcionarnos suficiente información, incluido lo que hiciste y lo que no, para ver el problema del que estás hablando, incluida la versión del servidor que estás ejecutando, etc. No veo nada en la descripción del problema que me permite entender cómo debo ayudarte.

Cerramos problemas todos los días que carecen de descripción del problema, así que tenga en cuenta nuestro tiempo, que es limitado.

Gateway fue solo un ejemplo de la falta de documentación.

Gateway no está documentando esto porque de todos modos no proporciona esta información. Nunca se dice que lo hará y por alguna razón no está presente.

2 depósitos, en un clúster distribuido de 4 nodos, sin uso de espacio por depósito, última versión minio .

mcli  --json admin info minio
{
    "status": "success",
    "info": {
        "mode": "online",
        "deploymentID": "737a11f9-bcdb-4859-bd33-20bde21ce38c",
        "buckets": {
            "count": 1
        },
        "objects": {
            "count": 1
        },
        "usage": {
            "size": 7554990080
        },
        "services": {
            "vault": {
                "status": "disabled"
            },
            "ldap": {},
            "notifications": null
        },
        "backend": {
            "backendType": "Erasure",
            "onlineDisks": 16,
            "rrSCData": 14,
            "rrSCParity": 2,
            "standardSCData": 8,
            "standardSCParity": 8
        },
        "servers": [
            {
                "state": "ok",
                "endpoint": "s2.local:9000",
                "uptime": 276205,
                "version": "2020-02-27T00:23:05Z",
                "commitID": "5d25b10f722165fcff5ee47b241ffbcd155eebbc",
                "network": {
                    "s1.local:9000": "online",
                    "s2.local:9000": "online",
                    "s3.local:9000": "online",
                    "s4.local:9000": "online"
                },
                "disks": [
                    {
                        "path": "/storage/1",
                        "state": "ok",
                        "uuid": "9cf14857-8f8b-41f6-ba37-a050859d95a4",
                        "totalspace": 477249253376,
                        "usedspace": 12877967360
                    },
                    {
                        "path": "/storage/2",
                        "state": "ok",
                        "uuid": "c99cab5e-10de-4547-b2bc-f6a4ac3fc8c7",
                        "totalspace": 477249253376,
                        "usedspace": 12877967360
                    },
                    {
                        "path": "/storage/3",
                        "state": "ok",
                        "uuid": "27d2545e-f6d8-4423-8134-2f9ea8dcc585",
                        "totalspace": 477249253376,
                        "usedspace": 12877967360
                    },
                    {
                        "path": "/storage/4",
                        "state": "ok",
                        "uuid": "e1c88dcb-5840-46ea-9dfc-2a76cb0f3615",
                        "totalspace": 477249253376,
                        "usedspace": 12877967360
                    }
                ]
            },
            {
                "state": "ok",
                "endpoint": "s3.local:9000",
                "uptime": 276205,
                "version": "2020-02-27T00:23:05Z",
                "commitID": "5d25b10f722165fcff5ee47b241ffbcd155eebbc",
                "network": {
                    "s1.local:9000": "online",
                    "s2.local:9000": "online",
                    "s3.local:9000": "online",
                    "s4.local:9000": "online"
                },
                "disks": [
                    {
                        "path": "/storage/1",
                        "state": "ok",
                        "uuid": "61bda9e2-b8cc-4f5b-8341-cc53781367ca",
                        "totalspace": 477249253376,
                        "usedspace": 12877877248
                    },
                    {
                        "path": "/storage/2",
                        "state": "ok",
                        "uuid": "cee3dcd8-5909-4b47-8ab6-db15b0e939d6",
                        "totalspace": 477249253376,
                        "usedspace": 12877877248
                    },
                    {
                        "path": "/storage/3",
                        "state": "ok",
                        "uuid": "703ffc85-6a65-4190-a7c1-0e1d549f5a50",
                        "totalspace": 477249253376,
                        "usedspace": 12877877248
                    },
                    {
                        "path": "/storage/4",
                        "state": "ok",
                        "uuid": "e3ee3f8f-3442-43f4-92a7-8dc22861f251",
                        "totalspace": 477249253376,
                        "usedspace": 12877877248
                    }
                ]
            },
            {
                "state": "ok",
                "endpoint": "s4.local:9000",
                "uptime": 276207,
                "version": "2020-02-27T00:23:05Z",
                "commitID": "5d25b10f722165fcff5ee47b241ffbcd155eebbc",
                "network": {
                    "s1.local:9000": "online",
                    "s2.local:9000": "online",
                    "s3.local:9000": "online",
                    "s4.local:9000": "online"
                },
                "disks": [
                    {
                        "path": "/storage/1",
                        "state": "ok",
                        "uuid": "06385345-a4ed-4c9e-bedc-ad5c88c47fcf",
                        "totalspace": 477249253376,
                        "usedspace": 12877897728
                    },
                    {
                        "path": "/storage/2",
                        "state": "ok",
                        "uuid": "3b750947-5bcd-4ea7-9a31-ead160c66c80",
                        "totalspace": 477249253376,
                        "usedspace": 12877897728
                    },
                    {
                        "path": "/storage/3",
                        "state": "ok",
                        "uuid": "a0a8b044-ab89-42e5-8c9b-cf0f99b25793",
                        "totalspace": 477249253376,
                        "usedspace": 12877897728
                    },
                    {
                        "path": "/storage/4",
                        "state": "ok",
                        "uuid": "3d34b747-c624-442e-b791-4202c823fa7e",
                        "totalspace": 477249253376,
                        "usedspace": 12877897728
                    }
                ]
            },
            {
                "state": "ok",
                "endpoint": "s1.local:9000",
                "uptime": 276203,
                "version": "2020-02-27T00:23:05Z",
                "commitID": "5d25b10f722165fcff5ee47b241ffbcd155eebbc",
                "network": {
                    "s1.local:9000": "online",
                    "s2.local:9000": "online",
                    "s3.local:9000": "online",
                    "s4.local:9000": "online"
                },
                "disks": [
                    {
                        "path": "/storage/1",
                        "state": "ok",
                        "uuid": "d0ac1875-d982-46d7-a6c8-49eb44a779f7",
                        "totalspace": 477249253376,
                        "usedspace": 12877910016
                    },
                    {
                        "path": "/storage/2",
                        "state": "ok",
                        "uuid": "1144cccd-bc74-4988-90ed-bc3bbe63c47b",
                        "totalspace": 477249253376,
                        "usedspace": 12877910016
                    },
                    {
                        "path": "/storage/3",
                        "state": "ok",
                        "uuid": "79bf1237-6b3f-46bd-89e9-d56040498ebf",
                        "totalspace": 477249253376,
                        "usedspace": 12877910016
                    },
                    {
                        "path": "/storage/4",
                        "state": "ok",
                        "uuid": "4b5d01d4-9fa4-4a67-af65-ad767f86a92d",
                        "totalspace": 477249253376,
                        "usedspace": 12877910016
                    }
                ]
            }
        ]
    }
}
mcli --json ls minio
{
 "status": "success",
 "type": "folder",
 "lastModified": "2020-03-06T20:39:13.654+02:00",
 "size": 0,
 "key": "mysql-backups/",
 "etag": ""
}
{
 "status": "success",
 "type": "folder",
 "lastModified": "2020-03-03T17:22:16.439+02:00",
 "size": 0,
 "key": "s3rj1k/",
 "etag": ""
}
 "buckets": {
        "count": 1
    },
    "objects": {
        "count": 1
    },
    "usage": {
        "size": 7554990080
    },

Este es el uso del depósito @ s3rj1k : debe usar la API directamente para ver el histograma de nivel bucket de objetos de varios tamaños. mc admin info solo está agregando todo.

@harshavardhana ¿

Aún no lo agregaremos en el futuro en mc ..

@harshavardhana Esto debería estar documentado en algún lugar como un problema abierto.
Gracias.

No dude en abrir uno en nuestro proyecto minio / mc.

O permítanme trasladar este tema a mc.

@ s3rj1k Pronto agregaremos este comando a mc. Hasta entonces puedes usar el siguiente comando

 $ mc du play/test
52B test

Esto mostrará una lista en tiempo real y mostrará el valor, pero puede llevar mucho tiempo si tiene millones de objetos.

Perdón por otro comentario + 1'ish, pero du está tardando muchísimo en grandes cantidades.
Si entiendo correctamente, ya se ha realizado alguna contabilidad por cubo, esperando la función: tada:

Este problema se ha marcado automáticamente como obsoleto porque no ha tenido actividad reciente. Se cerrará después de 21 días si no se produce más actividad. Gracias por sus aportaciones.

¿Hay noticias?

Este problema se ha marcado automáticamente como obsoleto porque no ha tenido actividad reciente. Se cerrará después de 21 días si no se produce más actividad. Gracias por sus aportaciones.

Aun relevante

Esto sería realmente útil.

Perdón por otro comentario + 1'ish, pero du está tardando muchísimo en grandes cantidades.
Si entiendo correctamente, ya se ha realizado alguna contabilidad por cubo, esperando la función

Puede obtener el uso por depósito de las métricas de prometheus https://docs.minio.io/docs/how-to-monitor-minio-using-prometheus.html

Los datos no siempre están actualizados, en mi configuración se demoran hasta 24 horas. Sin embargo, es una forma muy rápida de recuperar los datos 'du'.

Este problema se ha marcado automáticamente como obsoleto porque no ha tenido actividad reciente. Se cerrará después de 21 días si no se produce más actividad. Gracias por sus aportaciones.

Aun relevante

¿Fue útil esta página
0 / 5 - 0 calificaciones

Temas relacionados

kevinlul picture kevinlul  ·  13Comentarios

nikwen picture nikwen  ·  15Comentarios

fusengine picture fusengine  ·  22Comentarios

deekoder picture deekoder  ·  13Comentarios

teto picture teto  ·  7Comentarios