Obsah:

Mohu spustit jiskru lokálně?
Mohu spustit jiskru lokálně?

Video: Mohu spustit jiskru lokálně?

Video: Mohu spustit jiskru lokálně?
Video: Apache Spark | Local Mode and work with Command Line REPL 2024, Listopad
Anonim

Může jiskra být běh pomocí vestavěného samostatného plánovače clusteru v místní režimu. To znamená, že všechny Jiskra procesy jsou běh v rámci stejného JVM efektivně, jedna vícevláknová instance Jiskra.

Jak v tomto ohledu spustím lokálně Apache spark?

Následující kroky ukazují, jak nainstalovat Apache Spark

  1. Krok 1: Ověření instalace Java.
  2. Krok 2: Ověření instalace Scala.
  3. Krok 3: Stažení Scala.
  4. Krok 4: Instalace Scala.
  5. Krok 5: Stažení Apache Spark.
  6. Krok 6: Instalace Sparku.
  7. Krok 7: Ověření instalace Sparku.

Navíc, můžeme spustit jiskru bez Hadoopu? Podle Jiskra dokumentace, Spark může běžet bez Hadoop . Vy smět spusť to jako samostatný režim bez jakýkoli správce zdrojů. Ale pokud vy chtít běh ve víceuzlovém nastavení, vy potřebujete správce zdrojů jako YARN nebo Mesos a distribuovaný souborový systém jako HDFS , S3 atd. Ano, jiskra může běžet bez hadoopu.

Kromě výše uvedeného, jak spustím jiskru v samostatném režimu?

Instalovat Režim Spark Standalone , jednoduše umístíte zkompilovanou verzi Jiskra na každém uzlu v clusteru. Můžete získat předpřipravené verze Jiskra s každým vydáním nebo si jej postavte sami.

Může jiskra běžet na Windows?

A Jiskra aplikace umět být Okna -shell skript nebo to umět být vlastní program v psané Javě, Scale, Pythonu nebo R. Potřebujete Okna spustitelné soubory nainstalované ve vašem systému běh tyto aplikace.

Doporučuje: