hadoop - descargar - hdfs commands
Comando disponible espacio libre HDFS (3)
¿Hay un comando hdfs para ver el espacio libre disponible en hdfs? Podemos ver eso a través del navegador en master: hdfsport en el navegador, pero por alguna razón no puedo acceder a esto y necesito algún comando. Puedo ver el uso de mi disco a través del comando ./bin/hadoop fs -du -h pero no puedo ver el espacio libre disponible.
Gracias por la respuesta de antemano.
Hadoop versión 1:
hadoop fs -df -h
O
hadoop dfsadmin -report
Hadoop versión 2:
hdfs dfs -df -h
O
hadoop dfsadmin -report
Métodos
1. dfsadminEn las versiones más nuevas de HDFS, la CLI de hadoop para dfsadmin está en desuso:
$ sudo -u hdfs hadoop dfsadmin -report
DEPRECATED: Use of this script to execute hdfs command is deprecated.
Instead use the hdfs command for it.
Entonces debería usar solo hdfs en este punto. Además, cuando en sistemas donde se requiere sudo lo ejecuta de la siguiente manera:
$ sudo -u hdfs hdfs dfsadmin -report
2. fs -df
Usted tiene un método adicional disponible a través del módulo fs para hadoop también:
$ hadoop fs -df -h
Ejemplo de salida
dfsadminTambién para proporcionar una respuesta más completa, esta es la apariencia de la salida de una instalación de un solo nodo.
$ sudo -u hdfs hdfs dfsadmin -report
Configured Capacity: 7504658432 (6.99 GB)
Present Capacity: 527142912 (502.72 MB)
DFS Remaining: 36921344 (35.21 MB)
DFS Used: 490221568 (467.51 MB)
DFS Used%: 93.00%
Under replicated blocks: 128
Blocks with corrupt replicas: 0
Missing blocks: 0
Missing blocks (with replication factor 1): 0
-------------------------------------------------
Live datanodes (1):
Name: 192.168.114.48:50010 (host-192-168-114-48.td.local)
Hostname: host-192-168-114-48.td.local
Decommission Status : Normal
Configured Capacity: 7504658432 (6.99 GB)
DFS Used: 490221568 (467.51 MB)
Non DFS Used: 6977515520 (6.50 GB)
DFS Remaining: 36921344 (35.21 MB)
DFS Used%: 6.53%
DFS Remaining%: 0.49%
Configured Cache Capacity: 0 (0 B)
Cache Used: 0 (0 B)
Cache Remaining: 0 (0 B)
Cache Used%: 100.00%
Cache Remaining%: 0.00%
Xceivers: 2
Last contact: Thu Feb 04 13:35:04 EST 2016
En el ejemplo anterior, el espacio HDFS HDD se ha utilizado al 100%.
fs -df Ese mismo sistema con el subcomando -df del módulo fs :
$ hadoop fs -df -h
Filesystem Size Used Available Use%
hdfs://host-192-168-114-48.td.local:8020 7.0 G 467.5 M 18.3 M 7%
Prueba esto:
hdfs dfsadmin -report
Con versiones anteriores de Hadoop, intente esto:
hadoop dfsadmin -report