هل أحتاج إلى تعلم Hadoop من أجل Spark؟
هل أحتاج إلى تعلم Hadoop من أجل Spark؟

فيديو: هل أحتاج إلى تعلم Hadoop من أجل Spark؟

فيديو: هل أحتاج إلى تعلم Hadoop من أجل Spark؟
فيديو: Что такое big data hadoop? Лучший big data hadoop учебник для начинаю... 2024, ديسمبر
Anonim

لا ، لا تفعل بحاجة إلى تعلم Hadoop إلى LearnSpark . شرارة كان مشروعًا مستقلاً. ولكن بعد YARNand هادوب 2.0, شرارة أصبحت شائعة بسبب شرارة يمكن تشغيله على رأس HDFS مع الآخرين هادوب عناصر. هادوب هو إطار عمل تكتب فيه المهمة MapReduce عن طريق وراثة فئات Java.

وبالمثل ، أيهما أفضل أن تتعلم سبارك أم هادووب؟

الاختلاف الأول والأساسي هو سعة ذاكرة الوصول العشوائي واستخدامها. شرارة الاستخدامات أكثر ذاكرة الوصول العشوائي هادوب ، لكنه "يأكل" قدرًا أقل من الإنترنت أو ذاكرة القرص ، لذلك إذا كنت تستخدم هادوب ، إنه أفضل للعثور على آلة قوية ذات مساحة تخزين داخلية كبيرة.

ثانيًا ، هل Hadoop سهل التعلم؟ هادوب البرمجة أسهل للأشخاص الذين لديهم مهارات SQL أيضًا - بفضل Pig and Hive. يمكن للطلاب أو المحترفين الذين ليس لديهم أي خلفية برمجية ، مع معرفة أساسية فقط ، إتقان اللغة هادوب من خلال شامل هادوب التدريب إذا كان لديهم الحماس والرغبة في ذلك يتعلم.

سئل أيضًا ، كم من الوقت سيستغرق تعلم Hadoop؟

3-4 أشهر تقريبًا

هل شرارة تحل محل Hadoop؟

شرارة لا يمكن أن يكون إستبدال ل هادوب ! شرارة هو محرك معالجة يعمل على قمة هادوب النظام البيئي. كما هو مبين في الهندسة المعمارية أعلاه ، شرارة يأتي مكان MapReduce في ملف هادوب النظام البيئي. هناك مكونات أخرى في هادوب معمارية لمعالجة البيانات مثل Pig and Hive.

موصى به: