يناير 2019
تم إصدار هذه الميزات وتحسينات النظام الأساسي ل Azure Databricks في يناير 2019.
إشعار
يتم تنظيم الإصدارات. قد لا يتم تحديث حساب Azure Databricks الخاص بك حتى أسبوع بعد تاريخ الإصدار الأولي.
التغيير القادم: Python 3 ليصبح الافتراضي عند إنشاء مجموعات
29 يناير 2019
عند إصدار الإصدار 2.91 من النظام الأساسي Databricks في منتصف فبراير، سيتم تبديل إصدار Python الافتراضي للمجموعات الجديدة من Python 2 إلى Python 3. لن تغير المجموعات الموجودة إصدارات Python الخاصة بها، بطبيعة الحال. ولكن إذا كنت معتادا على أخذ الإعداد الافتراضي Python 2 عند إنشاء مجموعات جديدة، فستحتاج إلى البدء في الانتباه إلى تحديد إصدار Python الخاص بك.
Databricks Runtime 5.2 لإصدار التعلم الآلي (بيتا)
24 يناير 2019
تم إنشاء Databricks Runtime 5.2 ML أعلى Databricks Runtime 5.2 (EoS). يحتوي على العديد من مكتبات التعلم الآلي الشائعة، بما في ذلك TensorFlow وPyTorch وKeras وXGBoost، ويوفر تدريب TensorFlow الموزع باستخدام Horovod. بالإضافة إلى تحديثات المكتبة منذ Databricks Runtime ML 5.1، يتضمن Databricks Runtime 5.2 ML الميزات الجديدة التالية:
- يدعم GraphFrames الآن واجهة برمجة تطبيقات Pregel (Python) مع تحسينات أداء Databricks.
- يضيف HorovodRunner :
- في مجموعة GPU، يتم تعيين عمليات التدريب إلى وحدات معالجة الرسومات بدلا من العقد العاملة لتبسيط دعم أنواع مثيلات GPU متعددة. يسمح لك هذا الدعم المضمن بالتوزيع على جميع وحدات معالجة الرسومات على جهاز متعدد وحدات معالجة الرسومات بدون تعليمات برمجية مخصصة.
HorovodRunner.run()
تقوم الآن بإرجاع القيمة المرجعة من عملية التدريب الأولى.
راجع ملاحظات الإصدار الكاملة ل Databricks Runtime 5.2 ML. d
إصدار Databricks Runtime 5.2
24 يناير 2019
Databricks Runtime 5.2 متوفر الآن. يتضمن Databricks Runtime 5.2 Apache Spark 2.4.0 وميزات Delta Lake وBlybricks Streaming الجديدة والترقيات، ومكتبات Python وR وJava وSc scala التي تمت ترقيتها. للحصول على التفاصيل، راجع Databricks Runtime 5.2 (EoS).
طريقة عرض JSON لتكوين نظام المجموعة
15-22 يناير 2019
تدعم صفحة تكوين نظام المجموعة الآن طريقة عرض JSON:
طريقة عرض JSON للقراءة فقط. ومع ذلك، يمكنك نسخ JSON واستخدامه لإنشاء وتحديث المجموعات باستخدام واجهة برمجة تطبيقات المجموعات.
واجهة مستخدم نظام المجموعة
15-22 يناير 2019: الإصدار 2.89
تم تنظيف صفحة إنشاء نظام المجموعة وإعادة تنظيمها لسهولة الاستخدام، بما في ذلك تبديل خيارات متقدمة جديدة.
نشر Azure Databricks في شبكة Azure الظاهرية الخاصة بك (حقن الشبكة الظاهرية)
10 يناير 2019
النشر الافتراضي ل Azure Databricks هو خدمة مدارة بالكامل على Azure: يتم نشر جميع موارد مستوى الحوسبة، بما في ذلك شبكة ظاهرية (VNet) سيتم إقران جميع المجموعات بها، في مجموعة موارد مؤمنة. إذا كنت تحتاج إلى تخصيص الشبكة، ومع ذلك، يمكنك الآن نشر Azure Databricks في شبكتك الظاهرية (تسمى أحيانا حقن الشبكة الظاهرية)، مما يتيح لك:
- قم بتوصيل Azure Databricks بخدمات Azure الأخرى (مثل Azure Storage) بطريقة أكثر أمانا باستخدام نقاط نهاية الخدمة.
- الاتصال بمصادر البيانات المحلية للاستخدام مع Azure Databricks، والاستفادة من المسارات المعرفة من قبل المستخدم.
- قم بتوصيل Azure Databricks بجهاز ظاهري للشبكة لفحص جميع حركة المرور الصادرة واتخاذ الإجراءات وفقا لقواعد السماح والرفض.
- تكوين Azure Databricks لاستخدام DNS المخصص.
- تكوين قواعد مجموعة أمان الشبكة (NSG) لتحديد قيود حركة مرور الخروج.
- نشر مجموعات Azure Databricks في شبكتك الظاهرية الحالية.
يتيح لك نشر Azure Databricks على شبكتك الظاهرية أيضا الاستفادة من نطاقات CIDR المرنة (في أي مكان بين /16-/24 للشبكة الظاهرية وبين /18-/26 للشبكات الفرعية).
التكوين باستخدام واجهة مستخدم مدخل Azure سريع وسهل: عند إنشاء مساحة عمل، ما عليك سوى تحديد نشر مساحة عمل Azure Databricks في الشبكة الظاهرية، وتحديد شبكتك الظاهرية، وتوفير نطاقات CIDR لشبكتين فرعيتين. يقوم Azure Databricks بتحديث الشبكة الظاهرية بشبكتين فرعيتين جديدتين ومجموعات أمان شبكة باستخدام نطاقات CIDR التي توفرها، ويسمح بالوصول إلى حركة مرور الشبكة الفرعية الواردة والصادرة، وينشر مساحة العمل إلى الشبكة الظاهرية المحدثة.
إذا كنت تفضل تكوين الشبكة الظاهرية لحقن VNet بنفسك - على سبيل المثال، تريد استخدام الشبكات الفرعية الموجودة أو استخدام مجموعات أمان الشبكة الموجودة أو إنشاء قواعد الأمان الخاصة بك - يمكنك استخدام قوالب ARM المتوفرة من Azure-Databricks بدلا من واجهة مستخدم المدخل.
إشعار
كانت هذه الميزة متوفرة مسبقا عن طريق التسجيل فقط. يبقى في المعاينة ولكنه الآن كامل الخدمة الذاتية.
للحصول على التفاصيل، راجع نشر Azure Databricks في شبكة Azure الظاهرية (حقن الشبكة الظاهرية) وتوصيل مساحة عمل Azure Databricks بالشبكة المحلية.
واجهة مستخدم المكتبة
2-9 يناير 2019: الإصدار 2.88
تمت إعادة إصدار تحسينات واجهة مستخدم المكتبة التي تم إصدارها في الأصل في نوفمبر 2018 والتي أعيدت بعد ذلك بوقت قصير. تسهل هذه التحديثات تحميل المكتبات وتثبيتها وإدارتها لمجموعات Azure Databricks.
تدعم واجهة مستخدم Azure Databricks الآن مكتبات مساحة العمل والمكتبات المثبتة على نظام المجموعة. توجد مكتبة مساحة عمل في مساحة العمل ويمكن تثبيتها على مجموعة واحدة أو أكثر. المكتبة المثبتة على نظام المجموعة هي مكتبة موجودة فقط في سياق المجموعة التي تم تثبيتها عليها. بالإضافة إلى ذلك:
- يمكنك الآن إنشاء مكتبة من ملف تم تحميله إلى تخزين الكائن.
- يمكنك الآن تثبيت المكتبات وإلغاء تثبيتها من صفحة تفاصيل المكتبة وعلامة تبويب المكتبات الخاصة بالمجموعة.
- يتم الآن عرض المكتبات المثبتة باستخدام واجهة برمجة التطبيقات في علامة تبويب المكتبات الخاصة بالمجموعة.
للحصول على التفاصيل، راجع المكتبات.
أحداث نظام المجموعة
2-9 يناير 2019: الإصدار 2.88
تمت إضافة أحداث نظام مجموعة جديدة لتعكس حالة برنامج تشغيل Spark. للحصول على التفاصيل، راجع واجهة برمجة تطبيقات المجموعات.
التحكم في إصدار دفتر الملاحظات باستخدام خدمات Azure DevOps
2-9 يناير 2019: الإصدار 2.88
يجعل Azure Databricks الآن من السهل استخدام خدمات Azure DevOps (VSTS سابقا) للتحكم في إصدار دفاتر الملاحظات. المصادقة تلقائية، والإعداد مباشر، ويمكنك إدارة مراجعات دفتر الملاحظات تماما كما تفعل مع تكامل GitHub الخاص بنا.
للحصول على التفاصيل، راجع التحكم في إصدار Git لدفاتر الملاحظات (القديمة).