Apache Falcon: nova platforma za upravljanje podatkov za ekosistem Hadoop



Apache Falcon je nova platforma za upravljanje podatkov za ekosistem Hadoop, ki poenostavlja vdelavo obdelave krme in upravljanja krme na grozdih hadoop. Naučite se, kako jo nastavite.

Apache Falcon je okvir za upravljanje življenjskega cikla podatkov v grozdih Hadoop. Vzpostavlja razmerje med različnimi podatki in elementi obdelave v okolju Hadoop, prav tako pa nudi storitve upravljanja krme, kot so zadrževanje krme, kopiranja v grozdih, arhiviranje itd.





Najprej se pogovorimo o tem, kako nastaviti Apache Falcon. Zaženite spodnji ukaz za prenos git repozitorija Falcon:

Ukaz: klon git https://git-wip-us.apache.org/repos/asf/falcon.git falcon



git-command-apache-falcon

Če želite zagnati sokola, ga morate najprej zgraditi.

Ukaz: cd sokol



Ukaz: izvoz MAVEN_OPTS = '- Xmx1024m -XX: MaxPermSize = 256m -noverify' && mvn čista namestitev -DskipTests

Ukaz: mvn čista montaža: montaža -DskipTests -DskipITs

Ko zgradite falcon, boste v imeniku / falcon / distro / target / našli falcon paket.

Ukazi za gradnjo falcona so videti zelo enostavno, vendar se boste morali soočiti z veliko težavami, preden boste videli sporočilo Build Success. Med gradnjo za Hadoop-2.2.0 sem se soočil z veliko težavami

Torej, če želite preskočiti bolečino pri gradnji Falcona, vam dajem uspešno zgrajen falcon paket, ki ga lahko prenesete s spodnjo povezavo.

https://edureka.wistia.com/medias/xw5cfzqmho/download?media_file_id=124642564

Razširite datoteko, da dobite imenik falcon-0.10.

Ukaz: unzip falcon-0.10-SNAPSHOT.zip

Nastavite spremenljivke okolja flacon v datoteki .bashrc.

Ukaz: sudo gedit .bashrc

Ukaz: vir .bashrc

Lahko odprete imenik falcon in si ogledate datoteke in imenike v njem.

Ukaz: cd falcon-0.10-SNAPSHOT /

Ukaz: ls

V bin imeniku lahko najdete skripte falcon.

php kako natisniti matriko

Zaženite spodnji ukaz, da zaženete Falcon.

Ukaz: ./bin/falcon-start

Zdaj boste videli nov demon FalconServer, ki deluje.

Ukaz: jps

Ukaz: ./bin/falcon admin -verzija

Odprite brskalnik in pojdite na localhost: 15000 . Ogledate si lahko spletni ukaz Falcon.

Imate vprašanje za nas? Omenite jih v oddelku za komentarje in javili se vam bomo.

Sorodne objave:

Vrtanje na vrtalniku Apache