Hasznos Hadoop Shell parancsok



Ez a blog az összes hasznos Hadoop Shell parancsról ismertet. A Hadoop Shell parancsokkal együtt képernyőképeket is tartalmaz, amelyek megkönnyítik a tanulást. Olvass tovább!

A HDFS jelentése: H hajlandó D elosztva F val vel S ystem ’. A HDFS az Apache Hadoop projekt alprojektje. Ez az Apache Software Foundation projekt olyan hibatűrő fájlrendszer biztosítására szolgál, amelyet áruhardvereken futtatnak. A HDFS héjparancsok segítségével érhető el, amelyeket ebben a bejegyzésben tárgyalunk.





Rövid megjegyzés az indulás előtt: A bin / hadoop szkript meghívja az összes Hadoop Shell parancsot.

Felhasználói parancsok:

  • Futtassa a DFS fájlrendszert:

Használat: hadoop fsck - /



Run-DFS-fájlrendszer (1)

hogyan lehet átadni referenciával a java-ban
  • C a Hadoop fene változata :

Használat: Hadoop verzió



FS Shell parancsok:

A Hadoop fs parancs egy általános fájlrendszer felhasználói klienst futtat, amely interakcióba lép a MapR fájlrendszerrel (MapR-FS).

  • Fájllista megtekintése:

Használat: hadoop fs -ls hdfs: /

  • Ellenőrizze a memória állapotát:

Használat: hadoop fs -df hdfs: /

  • Könyvtárak, fájlok és bájtok száma a megadott elérési útban és fájlmintában:

Használat: hadoop fs -szám hdfs: /

  • Fájl áthelyezése egyik helyről a másikra:

Használat: -mv

  • Fájl másolása a forrásból a célba :

Használat: -cp

  • Fájl törlése:

Használat: -rm

  • Helyezze a fájlt a helyi fájlrendszerből a Hadoop elosztott fájlrendszerbe:

Használat: -put…

  • Fájl másolása a Lokálról HDFS-re:

Használat: -copyFromLocal…

  • Fájl megtekintése a Hadoop Distributed File rendszerben :

Használat: -cat

Adminisztrációs parancsok:

  • Formázza a célt :

Használat: hadoop cél -formátum

  • Másodlagos célok indítása:

Használat: hadoop secondrynamenode

  • Fuss szándékosan :

Használat: hadoop cél

  • Fuss adatcsomópont :

Használat: hadoop datanode

  • Klaszter kiegyensúlyozása :

Használat: hadoop kiegyensúlyozó

  • Futtassa a MapReduce jobkövető csomópontot:

Használat: hadoop job tracker

hogyan állítsuk be az osztályútvonalat a Windows rendszerben

  • Futtassa a MapReduce feladatkövető csomópontot:

Használat: hadoop tasktracker

Van egy kérdésünk? Kérjük, említse meg őket a megjegyzések részben, és mi kapcsolatba lépünk Önnel.

Kapcsolódó hozzászólások:

Operátorok az Apache Pig-ben