ما هو مخطط ومخفض في Hadoop؟
ما هو مخطط ومخفض في Hadoop؟

فيديو: ما هو مخطط ومخفض في Hadoop؟

فيديو: ما هو مخطط ومخفض في Hadoop؟
فيديو: Hadoop MapReduce - Part 1 - Hadoop big data tutorials 2024, يمكن
Anonim

الميزة الرئيسية لـ مابريديوس هو أنه من السهل توسيع نطاق معالجة البيانات عبر عقد حوسبة متعددة. تحت مابريديوس النموذج ، تسمى العناصر الأولية لمعالجة البيانات رسامي الخرائط و مخفضات . تفكيك تطبيق معالجة البيانات إلى رسامي الخرائط و مخفضات في بعض الأحيان غير بديهي.

بوضع هذا في الاعتبار ، ما هو المخطط والمخفض؟

يتكون MapReduce من وظيفتين رئيسيتين: مصمم الخرائط والمخفض . مخطط هي وظيفة تعالج بيانات الإدخال. ال مصمم الخرائط يعالج البيانات وينشئ عدة أجزاء صغيرة من البيانات.

ما هو مصمم الخرائط؟ أ مصمم الخرائط يمكن أن تصف البيانات مصمم الخرائط وكذلك الشخص الذي يقوم بإنشاء الخرائط الجغرافية. واجبات منطقة جغرافية مصمم الخرائط أو فني رسم الخرائط يشمل جمع ومعالجة البيانات الجغرافية لإنشاء خريطة للمنطقة.

بهذه الطريقة ، ما هو استخدام مخطط ومخفض في Hadoop؟

وفقًا لمؤسسة Apache Software Foundation ، فإن الهدف الأساسي لـ خريطة / خفض هو تقسيم مجموعة بيانات الإدخال إلى أجزاء مستقلة تتم معالجتها بطريقة متوازية تمامًا. ال Hadoop MapReduce يقوم framework بفرز مخرجات الخرائط ، والتي يتم إدخالها بعد ذلك إلى ملف خفض مهام.

ما فائدة رسام الخرائط في Hadoop؟

في الجري هادوب وظيفة ، وعادة ما تنفذ التطبيقات مخطط واجهات Reducer لتوفير الخريطة (تقوم المهام الفردية بتحويل سجلات الإدخال إلى سجلات وسيطة) وتقليل الطرق لتقليل مجموعة من القيم الوسيطة التي تشترك في مفتاح لمجموعة أصغر من القيم.

موصى به: