Apache Falcon: Új adatkezelési platform a Hadoop ökoszisztémához



Az Apache Falcon egy új adatkezelési platform a Hadoop ökoszisztémához, amely leegyszerűsíti a takarmány-feldolgozást és a hadoop-fürtök feed-kezelését. Tudja meg, hogyan kell beállítani.

Az Apache Falcon egy keretrendszer az adatéletciklus kezelésére a Hadoop-fürtökben. Megállapítja a kapcsolatot a különféle adatok és feldolgozási elemek között egy Hadoop-környezetben, és olyan hírcsatorna-kezelési szolgáltatásokat is nyújt, mint a hírcsatorna megőrzése, a fürtökön keresztüli replikációk, archiválás stb.





Először beszéljük meg az Apache Falcon telepítésének módját. Futtassa az alábbi parancsot a Falcon git-tárának letöltéséhez:

Parancs: git klón https://git-wip-us.apache.org/repos/asf/falcon.git sólyom



git-command-apache-falcon

A sólyom futtatásához először fel kell építenie.

Parancs: cd sólyom



Parancs: export MAVEN_OPTS = ”- Xmx1024m -XX: MaxPermSize = 256m -noverify” && mvn tiszta telepítés -DskipTests

Parancs: mvn clean assembly: assembly -DskipTests -DskipITs

Miután elkészítette a sólymot, egy sólyom csomagot talál a / falcon / distro / target / könyvtárban.

A sólyom építésének parancsai nagyon egyszerűnek tűnnek, de sok problémával kell szembesülnie, mielőtt megjelenik az Építési siker üzenet. Nagyon sok problémával szembesültem, miközben a Hadoop-2.2.0-t fejlesztettem

Tehát, hogy kihagyjam a Falcon építésével járó fájdalmat, egy sikeresen elkészített solymacsomagot adok neked, amelyet az alábbi link segítségével letölthetsz.

https://edureka.wistia.com/medias/xw5cfzqmho/download?media_file_id=124642564

Csomagolja ki a fájlt a falcon-0.10 könyvtár megszerzéséhez.

Parancs: csomagold ki a sólyomot 0,10-SNAPSHOT.zip

Állítsa be a flacon környezeti változókat a .bashrc fájlban.

Parancs: sudo gedit .bashrc

Parancs: forrás .bashrc

Léphet a sólyom könyvtárba, és megtekintheti a benne található fájlokat és könyvtárakat.

Parancs: CD sólyom-0,10-SNAPSHOT /

Parancs: ls

A sólyom szkripteket a bin könyvtárban találja.

Futtassa a parancs alatt a Falcon elindításához.

Parancs: ./bin/falcon-start

Meglátja, hogy egy új démon FalconServer fut.

Parancs: jps

Parancs: ./bin/falcon admin -verzió

hívás hivatkozással a c ++ - ban

Nyissa meg a böngészőt, és lépjen a következőre: helyi gazda: 15000 . Láthatja a Falcon webes felhasználói felületét.

Van egy kérdésünk? Említse meg őket a megjegyzés rovatban, és kapcsolatba lépünk Önnel.

Kapcsolódó hozzászólások:

Az Apache Drill fúrása