Pitääkö minun opetella Hadoop for spark?
Pitääkö minun opetella Hadoop for spark?

Video: Pitääkö minun opetella Hadoop for spark?

Video: Pitääkö minun opetella Hadoop for spark?
Video: Opettelin kävelemään narua pitkin - kuinka kauan kesti? 2024, Marraskuu
Anonim

Ei, et täytyy opetella Hadoop to opiSpark . Kipinä oli itsenäinen projekti. Mutta YARNandin jälkeen Hadoop 2.0, Kipinä tuli suosittu, koska Kipinä voi toimia HDFS:n päällä muiden kanssa Hadoop komponentit. Hadoop on kehys, jossa kirjoitat MapReduce-työtä perimällä Java-luokkia.

Samoin kumpi on parempi oppia kipinä vai Hadoop?

Ensimmäinen ja tärkein ero on RAM-muistin kapasiteetti ja sen käyttö. Kipinä käyttää lisää Random Access Memorythan Hadoop , mutta se "syö" vähemmän Internet- tai levymuistia, joten jos käytät Hadoop , se on paremmin löytää tehokas kone suurella sisäisellä tallennustilalla.

Toiseksi, onko Hadoop helppo oppia? Hadoop ohjelmointi on helpompaa myös ihmisille, joilla on SQL-taitoja - kiitos Pig and Hivelle. Opiskelijat tai ammattilaiset, joilla ei ole ohjelmointitaustaa, joilla on vain perusSQL-taidot, voivat hallita Hadoop kattavan käytännön kautta Hadoop koulutusta, jos heillä on intoa ja halukkuutta oppia.

Kysyttiin myös, kuinka kauan Hadoopin oppiminen kestää?

noin 3-4 kuukautta

Korvaako kipinä Hadoopin?

Kipinä ei voi koskaan olla a korvaus varten Hadoop ! Kipinä on prosessointimoottori, joka toimii huippuluokan Hadoop ekosysteemi. Kuten yllä olevasta arkkitehtuurista näkyy, Kipinä tulee MapReducen tilalle Hadoop ekosysteemi. Siinä on muitakin komponentteja Hadoop arkkitehtuuri tietojen käsittelemiseksi, kuten Pig and Hive.

Suositeltava: