Obsah:

Jak naplánuji práci úlu v oozie?
Jak naplánuji práci úlu v oozie?

Video: Jak naplánuji práci úlu v oozie?

Video: Jak naplánuji práci úlu v oozie?
Video: Writing 2D Games in C using SDL by Thomas Lively 2024, Smět
Anonim

Na naplánovat práci Úlu použitím Oozie , musíte napsat a Úl -akce.

hql) v něm.

  1. Vytvořte adresář v HDFS spuštěním příkazu níže.
  2. hadoop fs -mkdir -p /user/ oozie /pracovní postupy/
  3. Umístěte pracovní postup. xml, Úl skript (create_table. hql) a úl -stránka. xml v adresáři vytvořeném v kroku 2. Můžete použít níže uvedený příkaz.

Jen tak, jak spustím skript Hive v oozie?

Spusťte Hive Jobs s Oozie

  1. Určete web úlu. xml v parametru job-xml.
  2. V parametru skriptu zadejte název skriptu (například script. q), který obsahuje dotaz na podregistr.
  3. Volitelně přidejte vlastnosti používané úlohou spouštěče Oozie. Přidejte předponu oozie. spouštěč na názvy vlastností.

Dále, jak spustím pracovní postup oozie? Spuštění pracovního postupu Oozie z příkazového řádku

  1. Přihlaste se do Web Console.
  2. Zkopírujte příklady oozie do svého domovského adresáře ve webové konzoli: cp /usr/hdp/current/oozie-client/doc/oozie-examples. dehet. gz.
  3. Extrahujte soubory z tar tar -zxvf oozie-examples.tar.gz.
  4. Zkopírujte adresář příkladů do HDFS hadoop fs -copyFromLocal příklady.

Jak v tomto ohledu naplánuji úlohu Hadoop?

Jak naplánovat úlohy v hadoop - Quora. Nejjednodušší způsob je zabalit kód do skriptu shellu a plán to jako cron práce na okrajovém uzlu (uzel, kam obvykle odesíláte svůj pracovní místa ). Obvykle se však kód zabalí do skriptu a spustí se jako a práce je těžké ladit. testovat a udržovat.

Co je to oozie workflow?

Oozie je Pracovní postup plánovací systém pro správu úloh Apache Hadoop. Oozie pracovní postup úlohy jsou řízené acyklické grafy (DAG) akcí. Oozie Práce koordinátora se opakují Oozie pracovní postup úlohy spouštěné časem (frekvence) a dostupností dat. Oozie je škálovatelný, spolehlivý a rozšiřitelný systém.

Doporučuje: