Мазмұны:

Oozie-де улья жұмысын қалай жоспарлауға болады?
Oozie-де улья жұмысын қалай жоспарлауға болады?

Бейне: Oozie-де улья жұмысын қалай жоспарлауға болады?

Бейне: Oozie-де улья жұмысын қалай жоспарлауға болады?
Бейне: Туповатый дрон ► 4 Прохождение Gears of War 2 (Xbox 360) 2024, Қараша
Anonim

Кімге Hive жұмысын жоспарлау қолдану Оози , сізге а жазу керек Ұя -әрекет.

hql) ішінде.

  1. Төмендегі пәрменді орындау арқылы HDFS ішінде каталог жасаңыз.
  2. hadoop fs -mkdir -p /пайдаланушы/ ойық /жұмыс процестері/
  3. Жұмыс процесін қойыңыз. xml, Ұя сценарий (create_table. hql) және ұя -сайт. xml каталогында 2-қадамда жасалған. Төмендегі пәрменді пайдалануға болады.

Сонымен, Hive сценарийін oozie-де қалай іске қосамын?

Oozie көмегімен Hive Jobs іске қосыңыз

  1. Ұяның орнын көрсетіңіз. xml тапсырма-xml параметрінде.
  2. Сценарий параметрінде ұя сұрауын қамтитын сценарий атын көрсетіңіз (мысалы, сценарий. q).
  3. Қажет болса, Oozie іске қосу жұмысы пайдаланатын сипаттарды қосыңыз. oozie префиксін қосыңыз. іске қосу құралын сипат атауларына.

Сонымен қатар, oozie жұмыс процесін қалай іске қосамын? Oozie жұмыс үрдісін пәрмен жолынан іске қосу

  1. Web Console жүйесіне кіріңіз.
  2. Oozie мысалдарын веб-консольдегі үй каталогына көшіріңіз: cp /usr/hdp/current/oozie-client/doc/oozie-examples. шайыр. gz.
  3. tar tar -zxvf oozie-examples.tar.gz ішінен файлдарды шығарып алыңыз.
  4. Мысалдар каталогын HDFS hadoop fs -copyFromLocal мысалдарына көшіріңіз.

Осыған байланысты Hadoop жұмысын қалай жоспарлауға болады?

Қалай жұмыстарды жоспарлау ішінде hadoop - Квора. Ең қарапайым әдіс - кодты қабық сценарийіне орау және кесте бұл крон ретінде жұмыс шеткі түйінде (әдетте өзіңізді жіберетін түйін жұмыс орындары ). Бірақ әдетте кодты сценарийге жинап, оны файл ретінде іске қосады жұмыс жөндеу қиын. сынау және сақтау.

Oozie жұмыс процесі дегеніміз не?

Оози Бұл жұмыс процесі Apache Hadoop тапсырмаларын басқаруға арналған жоспарлаушы жүйесі. Oozie жұмыс процесі тапсырмалар әрекеттердің бағытталған циклдік графиктері (DAG) болып табылады. Оози Үйлестіруші жұмыстары қайталанып отырады Oozie жұмыс процесі уақыт (жиілік) және деректер қолжетімділігі арқылы іске қосылған тапсырмалар. Оози масштабталатын, сенімді және кеңейтілетін жүйе болып табылады.

Ұсынылған: