Obsah:

Ako si naplánujem prácu úľa v oozie?
Ako si naplánujem prácu úľa v oozie?

Video: Ako si naplánujem prácu úľa v oozie?

Video: Ako si naplánujem prácu úľa v oozie?
Video: Укладка плитки и мозаики на пол за 20 минут .ПЕРЕДЕЛКА ХРУЩЕВКИ от А до Я. #26 2024, Apríl
Anonim

Komu naplánovať prácu Úľa použitím Oozie , musíte napísať a Úľ -akcia.

hql) v ňom.

  1. Vytvorte adresár v HDFS spustením nižšie uvedeného príkazu.
  2. hadoop fs -mkdir -p /user/ oozie /pracovné postupy/
  3. Uveďte pracovný postup. xml, Úľ skript (create_table. hql) a úľ -stránka. xml v adresári vytvorenom v kroku 2. Môžete použiť nižšie uvedený príkaz.

Len tak, ako spustím skript Hive v oozie?

Spustite Hive Jobs s Oozie

  1. Zadajte lokalitu úľa. xml v parametri job-xml.
  2. V parametri skriptu zadajte názov skriptu (napríklad script. q), ktorý obsahuje dotaz podregistra.
  3. Voliteľne pridajte vlastnosti používané úlohou spúšťača Oozie. Pridajte predponu oozie. spúšťač k názvom vlastností.

Okrem toho, ako spustím pracovný postup oozie? Spustenie pracovného postupu Oozie z príkazového riadku

  1. Prihláste sa do Web Console.
  2. Skopírujte oozie príklady do svojho domovského adresára vo webovej konzole: cp /usr/hdp/current/oozie-client/doc/oozie-examples. decht. gz.
  3. Extrahujte súbory z tar tar -zxvf oozie-examples.tar.gz.
  4. Skopírujte adresár príkladov do HDFS hadoop fs -copyFromLocal príklady.

Ako v tomto ohľade naplánujem úlohu Hadoop?

Ako plánovať úlohy v hadoop - Quora. Najjednoduchším spôsobom je zabaliť kód do skriptu shellu a harmonogram to ako cron prácu na okrajovom uzle (uzol, kde zvyčajne odosielate svoje pracovných miest ). Ale zvyčajne zabalíte kód do skriptu a spustíte ho ako a prácu je ťažké ladiť. testovať a udržiavať.

Čo je to oozie workflow?

Oozie je a pracovný tok plánovací systém na správu úloh Apache Hadoop. Oozie Workflow úlohy sú riadené acyklické grafy (DAG) akcií. Oozie Úlohy koordinátora sa opakujú Oozie Workflow úlohy spúšťané časom (frekvenciou) a dostupnosťou údajov. Oozie je škálovateľný, spoľahlivý a rozšíriteľný systém.

Odporúča: