هل يعتمد s3 على HDFS؟
هل يعتمد s3 على HDFS؟

فيديو: هل يعتمد s3 على HDFS؟

فيديو: هل يعتمد s3 على HDFS؟
فيديو: Hadoop Storage Reloaded: the 5 lessons Ozone learned from HDFS 2024, أبريل
Anonim

S3 هو في الواقع مساحة تخزين لا نهائية في السحابة ولكن HDFS ليس. HDFS يتم استضافته على أجهزة فعلية ، لذا يمكنك تنفيذ أي برنامج هناك. لا يمكنك تنفيذ أي شيء S3 كمخزن كائن فقط وليس FS.

إذن ، هل s3 نظام ملفات موزع؟

S3 ليس نظام الملفات الموزعة . إنه مخزن كائنات ثنائي يقوم بتخزين البيانات في أزواج ذات قيمة مفتاح. إنه في الأساس نوع من قاعدة بيانات NoSQL. كل مجموعة عبارة عن "قاعدة بيانات" جديدة ، حيث تكون المفاتيح هي "مسار المجلد" والقيم هي الكائنات الثنائية ( الملفات ).

قد يتساءل المرء أيضًا ، هل تعتمد AWS على Hadoop؟ هادوب هو إطار عمل يساعد في معالجة مجموعات البيانات الكبيرة عبر أجهزة كمبيوتر متعددة. يتضمن خريطة / تقليل (معالجة متوازية) و HDFS (نظام الملفات الموزعة). AWS هو مستودع بيانات مبني بالإضافة إلى تقنية خاصة تم تطويرها في الأصل بواسطة ParAccel.

بجانب ذلك ، كيف يمكنني نقل الملفات من s3 إلى HDFS؟

إجابة. ليس هناك مباشر طريقة لنسخ الملفات من S3 إلى HDFS دون المرور عبر المحلية الملفات . ومع ذلك ، يمكنك استخدام مكون tSystem في مهمة قياسية لاستدعاء الأصل هادوب الأمر الذي تستخدمه عادةً نسخ الملفات ، على سبيل المثال، s3 -ديست- cp.

ما هي قاعدة بيانات s3؟

أمازون S3 أو Amazon Simple Storage Service هي خدمة تقدمها Amazon Web Services (AWS) توفر تخزينًا للكائنات من خلال واجهة خدمة الويب. أمازون S3 يستخدم نفس بنية التخزين القابلة للتطوير التي يستخدمها موقع Amazon.com لتشغيل شبكة التجارة الإلكترونية العالمية الخاصة به.

موصى به: