Mundarija:

Oozie-da uya ishini qanday rejalashtirishim mumkin?
Oozie-da uya ishini qanday rejalashtirishim mumkin?

Video: Oozie-da uya ishini qanday rejalashtirishim mumkin?

Video: Oozie-da uya ishini qanday rejalashtirishim mumkin?
Video: хомилани киз угилигини игна ип билан аниклаш.... 2024, May
Anonim

Kimga Hive ishini rejalashtirish foydalanish Oozie , a yozishingiz kerak Uya -harakat.

hql) ichida.

  1. Quyidagi buyruqni ishga tushirish orqali HDFS da katalog yarating.
  2. hadoop fs -mkdir -p /user/ oozie /ish jarayonlari/
  3. Ish jarayonini qo'ying. xml, Uya skript (create_table. hql) va uyasi -sayt. xml ni 2-bosqichda yaratilgan katalogga kiriting. Quyidagi buyruqdan foydalanishingiz mumkin.

Shunday qilib, Hive skriptini oozie-da qanday ishga tushiraman?

Oozie bilan Hive Jobsni ishga tushiring

  1. Uyaning joyini belgilang. xml-ni job-xml parametrida.
  2. Skript parametrida uya so'rovini o'z ichiga olgan skript nomini belgilang (masalan, skript. q).
  3. Majburiy emas, Oozie ishga tushirish ishi tomonidan ishlatiladigan xususiyatlarni qo'shing. Oozie prefiksini qo'shing. mulk nomlari uchun launcher.

Bundan tashqari, oozie ish jarayonini qanday boshqaraman? Buyruqlar satridan Oozie ish oqimini ishga tushirish

  1. Veb-konsolga kiring.
  2. Oozie misollarini veb-konsoldagi uy katalogingizga nusxalash: cp /usr/hdp/current/oozie-client/doc/oozie-examples. smola. gz.
  3. Tar tar -zxvf oozie-examples.tar.gz dan fayllarni chiqarib oling.
  4. Misollar katalogini HDFS hadoop fs -copyFromLocal misollariga nusxalash.

Shu munosabat bilan, men Hadoop ishini qanday rejalashtirishim mumkin?

Qanday ishlarni rejalashtirish ichida hadoop - Quora. Eng oddiy usul - kodingizni qobiq skriptiga o'rash va jadval u cron sifatida ish chekka tugunda (odatda siz yuboradigan tugun ish o'rinlari ). Lekin odatda kodni skriptga to'playdi va uni a sifatida ishga tushiradi ish disk raskadrovka qilish qiyin. sinovdan o'tkazish va saqlash.

Oozie ish jarayoni nima?

Oozie a ish jarayoni Apache Hadoop ishlarini boshqarish uchun rejalashtirish tizimi. Oozie ish jarayoni ishlar harakatlarning yoʻnaltirilgan siklik grafiklari (DAGs). Oozie Koordinator ishlari takrorlanadi Oozie ish jarayoni vaqt (chastota) va ma'lumotlar mavjudligi bilan tetiklanadigan ishlar. Oozie kengaytiriladigan, ishonchli va kengaytiriladigan tizimdir.

Tavsiya: