كيف يمكنني جدولة وظيفة خلية النحل في oozie؟

2024 مؤلف: Lynn Donovan | [email protected]. آخر تعديل: 2023-12-15 23:43

إلى جدولة وظيفة خلية النحل استخدام Oozie ، تحتاج إلى كتابة أ خلية نحل -عمل.

hql) فيه.

1. قم بإنشاء دليل في HDFS عن طريق إطلاق الأمر أدناه.
2. hadoop fs -mkdir -p / user / أوزي / سير العمل /
3. ضع سير العمل. xml ، خلية نحل النصي (create_table. hql) و خلية نحل -موقع. xml في الدليل الذي تم إنشاؤه في الخطوة 2. يمكنك استخدام الأمر أدناه.

فقط هكذا ، كيف يمكنني تشغيل Hive script في oozie؟

قم بتشغيل Hive Jobs مع Oozie

1. حدد موقع الخلية. xml في معلمة job-xml.
2. حدد اسم البرنامج النصي (على سبيل المثال ، البرنامج النصي. q) الذي يحتوي على استعلام الخلية في معلمة البرنامج النصي.
3. اختياريًا ، أضف الخصائص التي تستخدمها وظيفة Oozie launcher. أضف البادئة oozie. قاذفة لأسماء الممتلكات.

علاوة على ذلك ، كيف يمكنني تشغيل سير عمل oozie؟ تشغيل سير عمل Oozie من سطر الأوامر

1. تسجيل الدخول إلى وحدة تحكم الويب.
2. نسخ أمثلة oozie إلى الدليل الرئيسي في وحدة تحكم الويب: cp / usr / hdp / current / oozie-client / doc / oozie -amples. قطران. gz.
3. استخراج الملفات من tar -zxvf oozie -amples.tar.gz.
4. انسخ دليل الأمثلة إلى أمثلة HDFS hadoop fs -copyFromLocal.

في هذا الصدد ، كيف يمكنني جدولة وظيفة Hadoop؟

كيف جدولة الوظائف في هادوب - كورا. أبسط طريقة هي التفاف التعليمات البرمجية الخاصة بك في برنامج نصي شل و جدول انها كرون مهنة على عقدة الحافة (العقدة التي ترسل فيها عادةً ملف وظائف ). ولكن عادةً ما تقوم بتعبئة الكود في برنامج نصي وتشغيله كملف مهنة من الصعب تصحيحه. اختبار وصيانة.

ما هو سير عمل oozie؟

Oozie هو سير العمل نظام جدولة لإدارة وظائف Apache Hadoop. سير عمل Oozie الوظائف عبارة عن رسوم بيانية دورية موجهة (DAGs) للإجراءات. Oozie وظائف المنسق متكررة سير عمل Oozie الوظائف التي يتم تشغيلها حسب الوقت (التكرار) وتوافر البيانات. Oozie هو نظام قابل للتطوير وموثوق وقابل للتوسيع.