ما هو إصدار بايثون الذي يستخدم شرارة؟
ما هو إصدار بايثون الذي يستخدم شرارة؟

فيديو: ما هو إصدار بايثون الذي يستخدم شرارة؟

فيديو: ما هو إصدار بايثون الذي يستخدم شرارة؟
فيديو: سبب شرارة المحركات فحمات اثناء التشغيل 2024, أبريل
Anonim

شرارة يعمل على Java 8+ ، بايثون 2.7 + / 3.4 + و R 3.1+. بالنسبة إلى Scala API ، شرارة 2.3. 0 الاستخدامات Scala 2.11.2 تحديث سوف تحتاج إلى استعمال سكالا متوافق إصدار (2.11.

في المقابل ، هل تعمل سبارك مع بايثون 3؟

اباتشي شرارة هو إطار عمل للحوسبة العنقودية ، وهو حاليًا أحد أكثر الإطارات نشاطًا في مجال البيانات الضخمة مفتوح المصدر. منذ الإصدار الأخير 1.4 (يونيو 2015) ، شرارة يدعم R و بايثون 3 (لاستكمال الدعم المتاح سابقًا لـ Java و Scala و بايثون 2).

بجانب ما سبق ، كيف يمكنني تغيير إصدار شرارة من بايثون؟ في حال كنت تريد فقط يتغيرون ال نسخة بيثون للمهمة الحالية ، يمكنك استخدام أمر بدء pyspark التالي: PYSPARK_DRIVER_PYTHON = / home / user1 / anaconda2 / bin / الثعبان PYSPARK_PYTHON = / usr / local / anaconda2 / bin / الثعبان pyspark - ماجستير..

علاوة على ذلك ، ما هو أحدث إصدار سبارك؟

اباتشي سبارك

المؤلف الأصلي (ق) ماتي زهاريا
الإصدار الأولي 26 مايو 2014
إصدارة مستقرة 2.4.5 / 8 فبراير 2020
مخزن مستودع سبارك
كتبت في سكالا

ما هو سبارك بايثون؟

ترويض البيانات الضخمة باستخدام Apache شرارة و بايثون Py4J هي مكتبة شائعة مدمجة داخلها PySpark هذا يتيح الثعبان واجهة ديناميكية مع كائنات JVM (RDD). اباتشي شرارة يأتي مع غلاف تفاعلي لـ الثعبان كما هو الحال مع سكالا. قذيفة ل الثعبان معروف ب PySpark ”.

موصى به: