Sisällysluettelo:

Mistä tiedän, onko spark asennettuna Linuxiin?
Mistä tiedän, onko spark asennettuna Linuxiin?

Video: Mistä tiedän, onko spark asennettuna Linuxiin?

Video: Mistä tiedän, onko spark asennettuna Linuxiin?
Video: Автомобильный генератор BMW 12 В 180 А к генератору с помощью зарядного устройства для ноутбука 2024, Saattaa
Anonim

2 vastausta

  1. Avata Kipinä shell Terminal ja kirjoita komento.
  2. sc.versio Or kipinä -lähetä --versio.
  3. Helpoin tapa on käynnistää " kipinä -shell" komentorivillä. Se näyttää.
  4. nykyinen aktiivinen versio Kipinä .

Tietää myös, mistä tiedän, onko kipinä asennettu Ubuntu?

Sparkin asentaminen Ubuntuun

  1. Lataa Sparkin uusin julkaisu täältä.
  2. Pura arkisto.
  3. Siirrä tuloksena oleva kansio ja luo symbolinen linkki, jotta voit asentaa useita Spark-versioita.
  4. Testaa Spark-kuori.
  5. Ehkä Scala ei ole sinun kuppisi teetä ja haluat mieluummin käyttää Pythonia.

Toiseksi, mihin kipinä on asennettu EMR: hen? Alkaen emr -4,0. 0, kaikki sovellukset päällä EMR ovat hakemistossa /usr/lib. Kipinä on hakemistossa /usr/lib/ kipinä.

Näin ollen, miten asetat kipinän?

Sparkin asennuksen vaiheet

  1. Vaihe 1: Varmista, että Java on asennettu.
  2. Vaihe 2: Varmista, että Scala on asennettu.
  3. Vaihe 3: Lataa Scala.
  4. Vaihe 4: Asenna Scala.
  5. Vaihe 5: Lataa Apache Spark.
  6. Vaihe 6: Asenna Spark.
  7. Vaihe 7: Varmista, että Spark-sovellus on asennettu järjestelmääsi.

Pitääkö minun asentaa Scala kipinöitä varten?

Tulet tarve käyttää yhteensopivaa Scala versio (2.10. x). Java on pakollinen Kipinä + monia muita transitiivisia riippuvuuksia ( scala kääntäjä on vain JVM:n kirjasto). PySpark muodostaa vain etäyhteyden (socketin kautta) JVM:ään käyttämällä Py4J:tä (Python-Java-yhteistoiminta).

Suositeltava: