Obsah:

Jak zjistím, zda je spark nainstalován Linux?
Jak zjistím, zda je spark nainstalován Linux?

Video: Jak zjistím, zda je spark nainstalován Linux?

Video: Jak zjistím, zda je spark nainstalován Linux?
Video: Apache Spark - Install Apache Spark On Ubuntu |Spark Tutorial | Part 6 2024, Listopad
Anonim

2 Odpovědi

  1. Otevřeno Jiskra shell terminálu a zadejte příkaz.
  2. sc.verze Or jiskra -odeslat --verze.
  3. Nejjednodušší způsob je prostě spustit “ jiskra -shell“v příkazovém řádku. Zobrazí se.
  4. aktuální aktivní verze Jiskra .

Také je třeba vědět, jak zjistím, zda je spark nainstalován Ubuntu?

Instalace Spark na Ubuntu

  1. Stáhněte si nejnovější verzi Spark zde.
  2. Rozbalte archiv.
  3. Přesuňte výslednou složku a vytvořte symbolický odkaz, abyste mohli mít nainstalováno více verzí Spark.
  4. Vyzkoušejte Spark shell.
  5. Možná Scala není váš šálek čaje a raději byste použili Python.

Za druhé, kde je jiskra nainstalovaná na EMR? Do emr -4,0. 0, všechny aplikace zapnuty EMR jsou v /usr/lib. Jiskra je v /usr/lib/ jiskra.

Jak tedy nastavit jiskru?

Kroky k instalaci Spark

  1. Krok 1: Ujistěte se, že je nainstalována Java.
  2. Krok 2: Ujistěte se, že je nainstalována Scala.
  3. Krok 3: Stáhněte si Scala.
  4. Krok 4: Nainstalujte Scala.
  5. Krok 5: Stažení Apache Spark.
  6. Krok 6: Instalace Sparku.
  7. Krok 7: Ověřte instalaci aplikace Spark ve vašem systému.

Musím nainstalovat Scala pro jiskru?

Budeš potřeba použít kompatibilní Scala verze (2.10. x).“Java je nutností Jiskra + mnoho dalších tranzitivních závislostí ( scala kompilátor je pouze knihovna pro JVM). PySpark se pouze vzdáleně připojuje (pomocí zásuvky) k JVM pomocí Py4J (interoperace Python-Java).

Doporučuje: