ما هو Emrfs؟

2024 مؤلف: Lynn Donovan | [email protected]. آخر تعديل: 2023-12-15 23:43

نظام ملفات EMR ( EMRFS ) هو تطبيق لـ HDFS تستخدمه جميع مجموعات Amazon EMR لقراءة وكتابة الملفات العادية من Amazon EMR مباشرةً إلى Amazon S3. يسمح لك تشفير البيانات بتشفير الكائنات التي EMRFS يكتب إلى Amazon S3 ، ويمكّن EMRFS للعمل مع الكائنات المشفرة في Amazon S3.

فيما يتعلق بهذا ، ما هي وجهة نظر Emrfs المتسقة؟

ال عرض EMRFS متسق ينشئ ويستخدم البيانات الوصفية في جدول Amazon DynamoDB للحفاظ على ملف عرض متسق من عناصر S3 الخاصة بك. يتتبع هذا الجدول عمليات معينة ولكنه لا يحتفظ بأي من بياناتك.

ما الفرق بين s3 و s3a؟ هذا ال الفرق بين الثلاثة: s3 هو تراكب قائم على الكتلة أعلى Amazon S3 ، بينما s3n / s3a غير صحيح. هذه هي أساس الكائن. يدعم s3n كائنات تصل إلى 5 جيجابايت عندما يكون الحجم مصدر قلق ، بينما s3a يدعم كائنات تصل إلى 5 تيرابايت ولديه أداء أعلى.

وفقًا لذلك ، هل تستخدم EMR HDFS؟

EMR نظام الملفات (EMRFS) أنت يمكن استخدام إما HDFS أو Amazon S3 كنظام ملفات في مجموعتك. في أغلب الأحيان ، Amazon S3 يكون تستخدم لتخزين بيانات الإدخال والإخراج ويتم تخزين النتائج الوسيطة في HDFS.

ما هو s3a؟

S3A (مخطط URI: s3a ) وريث ل S3 Native، s3n fs، the S3a : يستخدم النظام مكتبات Amazon للتفاعل معها S3 . هذا يسمح S3a لدعم الملفات الأكبر حجمًا (لا يزيد عن 5 جيجابايت) ، وعمليات ذات أداء أعلى والمزيد.