Kasulikud Hadoop Shelli käsud

Selles ajaveebis kirjeldatakse kõiki kasulikke Hadoop Shelli käske. Koos Hadoop Shelli käskudega on sellel õppimise lihtsustamiseks ka ekraanipildid. Loe edasi!



HDFS tähistab H adoop D omistatud F koos S ystem ’. HDFS on Apache Hadoopi projekti alamprojekt. Selle Apache Software Foundationi projekti eesmärk on pakkuda rikketaluvat failisüsteemi, mis on mõeldud töötama kauba riistvaral. HDFS-ile pääseb juurde shellikäskude komplekti kaudu, mida käsitletakse selles postituses.



Lühike märkus enne alustamist: bin / hadoopi skript kutsub esile kõik Hadoop Shelli käsud.

Kasutaja käsud:

  • Käivitage DFS-failisüsteem:

Kasutamine: hadoop fsck - /



Käivita DFS-failisüsteem (1)

  • C kuradima versioon Hadoopist :

Kasutamine: Hadoopi versioon



FS Shelli käsud:

Hadoop fs käsk käivitab üldise failisüsteemi kasutajakliendi, mis suhtleb MapR-failisüsteemiga (MapR-FS).

  • Kuva failide loendid:

Kasutamine: hadoop fs -ls hdfs: /

  • Kontrollige mälu olekut:

Kasutamine: hadoop fs -df hdfs: /

__init__ python

  • Kataloogide, failide ja baitide arv määratud tees ja failimustris:

Kasutamine: hadoop fs - arv hdfs: /

  • Faili teisaldamine ühest asukohast teise:

Kasutamine: -mv

  • Kopeeri fail allikast sihtkohta :

Kasutamine: -cp

  • Kustuta fail:

Kasutamine: -rm

  • Pange fail kohalikust failisüsteemist Hadoopi hajutatud failisüsteemi:

Kasutamine: -put ...

  • Faili kopeerimine kohalikust HDFS-i:

Kasutamine: -copyFromLocal…

  • Kuva fail Hadoopi jaotatud failisüsteemis :

Kasutamine: -kass

Halduskäsklused:

  • Vormindage eesmärk :

Kasutamine: hadoop purpose -formaat

  • Sekundaarsete eesmärkide alustamine:

Kasutamine: hadoop secondrynamenode

  • Jookse meelega :

Kasutamine: hadoop eesmärk

  • Jookse andmesõlm :

Kasutamine: hadoop datanode

  • Klastrite tasakaalustamine :

Kasutamine: hadoopi tasakaalustaja

  • Käivitage MapReduce tööjälgimissõlm:

Kasutamine: hadoopi tööjälgija

  • Käivitage MapReduce ülesande jälgimise sõlm:

Kasutamine: hadoop tasktracker

Kas teil on meile küsimus? Palun mainige neid kommentaaride jaotises ja me võtame teiega ühendust.

Seonduvad postitused:

c ++ sorteerimismassiivid

Operaatorid Apache Pigis