Мазмуну:

Oozie уюк жумушун кантип пландаштырам?
Oozie уюк жумушун кантип пландаштырам?

Video: Oozie уюк жумушун кантип пландаштырам?

Video: Oozie уюк жумушун кантип пландаштырам?
Video: 15 полезных советов по демонтажным работам. Начало ремонта. Новый проект.# 1 2024, Ноябрь
Anonim

үчүн Уюк жумушун пландаштыруу колдонуу Oozie , жазуу керек Уюк -аракет.

hql) ичинде.

  1. Төмөнкү буйрукту аткаруу менен HDFSде каталог түзүңүз.
  2. hadoop fs -mkdir -p /user/ oozie /жумуш процесстери/
  3. Жумуш процессин коюу. xml, Уюк скрипт (create_table. hql) жана уюк -сайт. xml каталогунда 2-кадамда түзүлгөн. Сиз төмөндөгү буйрукту колдоно аласыз.

Ошентип, Hive сценарийин oozieде кантип иштетем?

Oozie менен Hive Jobs иштетиңиз

  1. Уюктун ордун белгилеңиз. xml жумуш-xml параметринде.
  2. Скрипт параметринде уюк суроосун камтыган скрипттин атын (мисалы, скрипт. q) көрсөтүңүз.
  3. Кошумча, Oozie ишке киргизгич жумушу колдонгон касиеттерди кошуңуз. oozie префиксин кошуңуз. мулк аталыштарына ишке киргизгич.

Андан тышкары, мен кантип oozie жумушчу агымын иштетем? Буйрук сабынан Oozie Workflow иштетүү

  1. Веб консолуна кириңиз.
  2. Oozie мисалдарын веб консолдогу үй каталогуңузга көчүрүңүз: cp /usr/hdp/current/oozie-client/doc/oozie-examples. чайыр. gz.
  3. tar tar -zxvf oozie-examples.tar.gz файлын чыгарып алыңыз.
  4. Мисалдар каталогун HDFS hadoop fs -copyFromLocal мисалдарына көчүрүңүз.

Ушуга байланыштуу, мен Hadoop жумушун кантип пландаштырам?

Кантип иштерди пландаштыруу ичинде hadoop - Quora. Эң жөнөкөй жолу - кодуңузду шел скриптине ороп коюу жана расписание аны крон катары жумуш четиндеги түйүндө (адатта сиз тапшырган түйүн жумуштар ). Бирок, адатта, кодду скриптке топтоп, аны иштетет жумуш мүчүлүштүктөрдү оңдоо кыйын. сыноо жана сактоо.

Oozie иш процесси деген эмне?

Oozie болуп саналат иш процесси Apache Hadoop жумуштарын башкаруу үчүн пландаштыргыч системасы. Oozie Workflow жумуштар аракеттердин багытталган циклдик графиктери (DAGs) болуп саналат. Oozie Координаторлордун жумушу кайталанып турат Oozie Workflow убакыт (жыштык) жана маалыматтардын болушу менен шартталган жумуштар. Oozie масштабдуу, ишенимдүү жана кеңейтилүүчү система болуп саналат.

Сунушталууда: