Apache Falcon este un cadru pentru gestionarea ciclului de viață al datelor în clustere Hadoop. Stabilește relația dintre diferite date și elemente de procesare într-un mediu Hadoop și oferă, de asemenea, servicii de gestionare a alimentării, cum ar fi păstrarea feed-urilor, replicări în clustere, arhive etc.
Să discutăm mai întâi cum să configurăm Apache Falcon. Rulați comanda dată mai jos pentru a descărca depozitul git Falcon:
Comanda: git clone https://git-wip-us.apache.org/repos/asf/falcon.git falcon
Pentru a rula șoimul, trebuie mai întâi să-l construiești.
Comanda: cd falcon
Comanda: export MAVEN_OPTS = ”- Xmx1024m -XX: MaxPermSize = 256m -noverify” && mvn clean install -DskipTests
Comanda: mvn clean assembly: assembly -DskipTests -DskipITs
Odată ce ați construit șoim, veți găsi un pachet de șoim în directorul / falcon / distro / target /.
Comenzile pentru construirea șoimului arată foarte ușor, dar vă veți confrunta cu multe probleme înainte de a vedea mesajul Build Success. M-am confruntat cu o mulțime de probleme în timp ce o construiam pentru Hadoop-2.2.0
Deci, pentru a omite durerea de a construi Falcon, vă ofer un pachet de șoimi construit cu succes, pe care îl puteți descărca folosind linkul de mai jos.
https://edureka.wistia.com/medias/xw5cfzqmho/download?media_file_id=124642564
Dezarhivați fișierul pentru a obține directorul falcon-0.10.
Comanda: dezarhiva falcon-0.10-SNAPSHOT.zip
Setați variabilele de mediu flacon în fișierul .bashrc.
Comanda: sudo gedit .bashrc
hashmap vs hashtable în java
Comanda: sursa .bashrc
Puteți accesa directorul falcon și puteți vedea fișierele și directoarele din interior.
Comanda: cd falcon-0.10-SNAPSHOT /
Comanda: eu sunt
Puteți găsi scripturi de șoim în directorul bin.
Rulați comanda de mai jos pentru a porni Falcon.
Comanda: ./bin/falcon-start
Veți vedea acum un nou demon FalconServer care rulează.
Comandă: jps
Comanda: ./bin/falcon admin -version
Deschideți browserul și accesați localhost: 15000 . Puteți vedea Falcon web ui.
Ai o întrebare pentru noi? Menționați-le în secțiunea de comentarii și vă vom răspunde.
Postări asemănatoare: