Apache Hive este unul dintre cele mai importante cadre din ecosistemul Hadoop, ceea ce îl face foarte important . În acest blog, vom afla despre instalarea Apache Hive și Hive pe Ubuntu.
Ce este Apache Hive?
Apache Hive este o infrastructură de depozit de date care facilitează interogarea și gestionarea seturilor mari de date care se află în sistemul de stocare distribuită. Este construit deasupra Hadoop și dezvoltat de Facebook. Stup oferă o modalitate de a interoga datele utilizând un limbaj de interogare de tip SQL numit HiveQL (Limbaj de interogare Hive).
Intern, un compilator traduce HiveQL declarații în MapReduce locuri de muncă, care sunt apoi trimise la Cadrul Hadoop pentru executare.
Diferența dintre Hive și SQL:
Stup arată foarte asemănător cu baza de date tradițională cu SQL acces. Cu toate acestea, pentru că Stup se bazeaza pe Hadoop și MapReduce operațiuni, există mai multe diferențe cheie:
Deoarece Hadoop este destinat scanărilor secvențiale lungi și Stup se bazeaza pe Hadoop , v-ați aștepta ca interogările să aibă o latență foarte mare. Înseamnă că Stup nu ar fi adecvat pentru acele aplicații care necesită timpi de răspuns foarte rapizi, așa cum vă puteți aștepta cu o bază de date tradițională RDBMS.
In cele din urma, Stup este bazat pe citire și, prin urmare, nu este adecvat pentru procesarea tranzacțiilor care implică de obicei un procent mare de operațiuni de scriere.
cum se face testarea bazei de date
Instalarea Hive pe Ubuntu:
Vă rugăm să urmați pașii de mai jos pentru instalare Apache Hive pe Ubuntu:
Pasul 1: Descarca Gudron de stup.
Comanda: wget http://archive.apache.org/dist/hive/hive-2.1.0/apache-hive-2.1.0-bin.tar.gz
Pasul 2: Extrageți gudron fişier.
Comanda: tar -xzf apache-hive-2.1.0-bin.tar.gz
Comanda: eu sunt
Pasul 3: Editați fișierul „.Bashrc” fișier pentru a actualiza variabilele de mediu pentru utilizator.
Comanda: sudo gedit .bashrc
Adăugați următoarele la sfârșitul fișierului:
# Setați HIVE_HOME
export HIVE_HOME = / home / edureka / apache-hive-2.1.0-bin
export PATH = $ PATH: /home/edureka/apache-hive-2.1.0-bin/bin
De asemenea, asigurați-vă că și calea hadoop este setată.
Rulați comanda de mai jos pentru ca modificările să funcționeze în același terminal.
Comanda: sursa .bashrc
Pasul 4: Verificați versiunea stupului.
merge sort algoritm c ++
Pasul 5: Crea Stup directoare în HDFS . Directorul 'depozit' este locația pentru a stoca tabelul sau datele legate de stup.
Comanda:
- hdfs dfs -mkdir -p / utilizator / stup / depozit
- hdfs dfs -mkdir / tmp
Pasul 6: Setați permisiunile de citire / scriere pentru tabel.
Comanda:
În această comandă, acordăm permisiunea de scriere grupului:
- hdfs dfs -chmod g + w / utilizator / stup / depozit
- hdfs dfs -chmod g + w / tmp
Pasul 7: A stabilit Hadoop cale în h ive-env.sh
Comanda: cd apache-hive-2.1.0-bin /
Comanda: gedit conf / hive-env.sh
Setați parametrii așa cum se arată în instantaneul de mai jos.
Pasul 8: Editați | × hive-site.xml
Comanda: gedit conf / hive-site.xml
javax.jdo.option.ConnectionURL jdbc: derby: databaseName = / home / edureka / apache-hive-2.1.0-bin / metastore_dbcreate = adevărat șir de conectare JDBC pentru un metastore JDBC. Pentru a utiliza SSL pentru a cripta / autentifica conexiunea, furnizați un flag SSL specific bazei de date în adresa URL a conexiunii. De exemplu, jdbc: postgresql: // myhost / db? Ssl = true pentru baza de date postgres. hive.metastore.warehouse.dir / user / hive / locația depozitului bazei de date implicite pentru depozitul hive.metastore.uris Thrift URI pentru metastore-ul la distanță. Folosit de clientul metastore pentru a se conecta la metastore la distanță. javax.jdo.option.ConnectionDriverName org.apache.derby.jdbc.EmbeddedDriver Numele clasei driverului pentru un metastore JDBC javax.jdo.PersistenceManagerFactoryClass org.datanucleus.api.jdo.JDOPersistenceManagerFactory clasa care implementează jdo
Pasul 9: În mod implicit, Hive folosește Derby Bază de date. Inițializați baza de date Derby.
Comanda: bin / schematool -initSchema -dbType derby
Pasul 10 :Lansa Stup.
ce este moștenirea multiplă în java
Comanda: stup
Pasul 11 :Rulați câteva interogări în shell Hive.
Comanda: afișați baze de date
Comanda: creați tabelul angajat (șir de identificare, șir de nume, șir dept) format de rând câmpuri delimitate terminate de „stocate ca fișier text
Comanda: arata mese
Pasul 12: Pentru a ieși din Stup:
Comanda: Ieșire
Acum că ați terminat instalarea Hive, următorul pas înainte este să încercați comenzile Hive pe shell Hive. Prin urmare, următorul nostru blog „ Comenzi de top Hive cu exemple în HQL ”Vă va ajuta să stăpâniți comenzile Hive.
Postări asemănatoare: