hadoop - descargar - hdfs commands

Comando disponible espacio libre HDFS (3)

¿Hay un comando hdfs para ver el espacio libre disponible en hdfs? Podemos ver eso a través del navegador en master: hdfsport en el navegador, pero por alguna razón no puedo acceder a esto y necesito algún comando. Puedo ver el uso de mi disco a través del comando ./bin/hadoop fs -du -h pero no puedo ver el espacio libre disponible.

Gracias por la respuesta de antemano.

Hadoop versión 1:

hadoop fs -df -h

hadoop dfsadmin -report

Hadoop versión 2:

hdfs dfs -df -h

hadoop dfsadmin -report

Métodos

1. dfsadmin

En las versiones más nuevas de HDFS, la CLI de hadoop para dfsadmin está en desuso:

$ sudo -u hdfs hadoop dfsadmin -report DEPRECATED: Use of this script to execute hdfs command is deprecated. Instead use the hdfs command for it.

Entonces debería usar solo hdfs en este punto. Además, cuando en sistemas donde se requiere sudo lo ejecuta de la siguiente manera:

$ sudo -u hdfs hdfs dfsadmin -report 2. fs -df

Usted tiene un método adicional disponible a través del módulo fs para hadoop también:

$ hadoop fs -df -h

Ejemplo de salida

dfsadmin

También para proporcionar una respuesta más completa, esta es la apariencia de la salida de una instalación de un solo nodo.

$ sudo -u hdfs hdfs dfsadmin -report Configured Capacity: 7504658432 (6.99 GB) Present Capacity: 527142912 (502.72 MB) DFS Remaining: 36921344 (35.21 MB) DFS Used: 490221568 (467.51 MB) DFS Used%: 93.00% Under replicated blocks: 128 Blocks with corrupt replicas: 0 Missing blocks: 0 Missing blocks (with replication factor 1): 0 ------------------------------------------------- Live datanodes (1): Name: 192.168.114.48:50010 (host-192-168-114-48.td.local) Hostname: host-192-168-114-48.td.local Decommission Status : Normal Configured Capacity: 7504658432 (6.99 GB) DFS Used: 490221568 (467.51 MB) Non DFS Used: 6977515520 (6.50 GB) DFS Remaining: 36921344 (35.21 MB) DFS Used%: 6.53% DFS Remaining%: 0.49% Configured Cache Capacity: 0 (0 B) Cache Used: 0 (0 B) Cache Remaining: 0 (0 B) Cache Used%: 100.00% Cache Remaining%: 0.00% Xceivers: 2 Last contact: Thu Feb 04 13:35:04 EST 2016

En el ejemplo anterior, el espacio HDFS HDD se ha utilizado al 100%.

fs -df

Ese mismo sistema con el subcomando -df del módulo fs :

$ hadoop fs -df -h Filesystem Size Used Available Use% hdfs://host-192-168-114-48.td.local:8020 7.0 G 467.5 M 18.3 M 7%

Prueba esto:

hdfs dfsadmin -report

Con versiones anteriores de Hadoop, intente esto:

hadoop dfsadmin -report