2020 يوليو
تم إصدار هذه الميزات وتحسينات النظام الأساسي ل Azure Databricks في يوليو 2020.
إشعار
يتم تنظيم الإصدارات. قد لا يتم تحديث حساب Azure Databricks الخاص بك حتى أسبوع بعد تاريخ الإصدار الأولي.
محطة ويب (معاينة عامة)
29 يوليو- 4 أغسطس 2020: الإصدار 3.25
توفر محطة الويب طريقة ملائمة وتفاعلية للغاية للمستخدمين الذين لديهم إذن CAN ATTACH TO على نظام مجموعة لتشغيل أوامر shell، بما في ذلك المحررين مثل Vim أو Emacs. تتضمن أمثلة استخدامات محطة الويب مراقبة استخدام الموارد وتثبيت حزم Linux.
للحصول على التفاصيل، راجع تشغيل أوامر shell في محطة ويب Azure Databricks.
إطار عمل البرنامج النصي ل init العالمي الجديد والأكثر أمانا (معاينة عامة)
29 يوليو - 4 أغسطس 2020: الإصدار 3.25
يجلب إطار عمل البرنامج النصي للتطوير العالمي الجديد تحسينات كبيرة على البرامج النصية العالمية القديمة للتطوير:
- البرامج النصية للتهيئة أكثر أمانا، وتتطلب أذونات المسؤول لإنشاء وعرض وحذف.
- يتم تسجيل حالات فشل التشغيل المتعلقة بالبرنامج النصي.
- يمكنك تعيين ترتيب تنفيذ عدة برامج نصية init.
- يمكن أن تشير البرامج النصية Init إلى متغيرات البيئة المتعلقة بالمجموعة.
- يمكن إنشاء البرامج النصية Init وإدارتها باستخدام صفحة إعدادات المسؤول أو واجهة برمجة تطبيقات REST ل Global Init Scripts الجديدة.
توصي Databricks بترحيل البرامج النصية للتطوير العمومي القديمة الحالية إلى إطار العمل الجديد للاستفادة من هذه التحسينات.
للحصول على التفاصيل، راجع البرامج النصية Global init.
قوائم الوصول إلى IP الآن GA
29 يوليو - 4 أغسطس 2020: الإصدار 3.25
واجهة برمجة تطبيقات قائمة الوصول إلى IP متاحة الآن بشكل عام.
يتضمن إصدار GA تغييرا واحدا، وهو إعادة تسمية list_type
القيم:
WHITELIST
إلىALLOW
BLACKLIST
إلىBLOCK
استخدم واجهة برمجة تطبيقات قائمة الوصول إلى IP لتكوين مساحات عمل Azure Databricks بحيث يتصل المستخدمون بالخدمة فقط من خلال شبكات الشركة الموجودة بمحيط آمن. يمكن لمسؤولي Azure Databricks استخدام واجهة برمجة تطبيقات قائمة الوصول إلى IP لتحديد مجموعة من عناوين IP المعتمدة، بما في ذلك قوائم السماح والحظر. تتطلب جميع الوصول الوارد إلى تطبيق الويب وواجهات برمجة تطبيقات REST أن يتصل المستخدم من عنوان IP معتمد، ما يضمن عدم إمكانية الوصول إلى مساحات العمل من شبكة عامة مثل مقهى أو مطار ما لم يستخدم المستخدمون VPN.
تتطلب هذه الميزة خطة Premium.
لمزيد من المعلومات، راجع تكوين قوائم الوصول إلى IP لمساحات العمل.
مربع حوار تحميل ملف جديد
29 يوليو - 4 أغسطس 2020: الإصدار 3.25
يمكنك الآن تحميل ملفات بيانات جدولية صغيرة (مثل CSVs) والوصول إليها من دفتر ملاحظات عن طريق تحديد إضافة بيانات من قائمة ملف دفتر الملاحظات. توضح لك التعليمات البرمجية التي تم إنشاؤها كيفية تحميل البيانات في Pandas أو DataFrames. يمكن للمسؤولين تعطيل هذه الميزة في علامة التبويب Admin Console Advanced.
لمزيد من المعلومات، راجع استعراض الملفات في DBFS.
تحسينات تصفية واجهة برمجة تطبيقات SCIM وفرزها
29 يوليو - 4 أغسطس 2020: الإصدار 3.25
تتضمن واجهة برمجة تطبيقات SCIM الآن تحسينات التصفية والفرز هذه:
- يمكن للمستخدمين المسؤولين تصفية المستخدمين على السمة
active
. - يمكن لجميع المستخدمين فرز النتائج باستخدام
sortBy
معلمات الاستعلام وsortOrder
. الإعداد الافتراضي هو الفرز حسب المعرف.
تمت إضافة مناطق Azure Government
25 يوليو 2020
أصبح Azure Databricks متاحا مؤخرا في منطقتي ولاية أريزونا الأمريكية وحكومة ولاية فرجينيا الأمريكية للكيانات الحكومية الأمريكية وشركائها.
Databricks Runtime 7.1 GA
21 يوليو 2020
يوفر Databricks Runtime 7.1 العديد من الميزات والتحسينات الإضافية عبر Databricks Runtime 7.0، بما في ذلك:
- موصل Google BigQuery
%pip
أوامر لإدارة مكتبات Python المثبتة في جلسة عمل دفتر ملاحظات- تم تثبيت Koalas
- العديد من تحسينات Delta Lake، بما في ذلك:
- تعيين بيانات تعريف التثبيت المعرفة من قبل المستخدم
- الحصول على إصدار التثبيت الأخير المكتوب بواسطة الحالي
SparkSession
- تحويل جداول Parquet التي تم إنشاؤها بواسطة Structured Streaming باستخدام
_spark_metadata
سجل المعاملات MERGE INTO
تحسينات الأداء
للحصول على التفاصيل، راجع ملاحظات إصدار Databricks Runtime 7.1 (EoS) الكاملة.
Databricks Runtime 7.1 ML GA
21 يوليو 2020
تم إنشاء Databricks Runtime 7.1 ل التعلم الآلي أعلى Databricks Runtime 7.1 ويجلب الميزات الجديدة التالية وتغييرات المكتبة:
- تمكين أوامر pip وconda السحرية بشكل افتراضي
- موزع spark-tensorflow: 0.1.0
- وسادة 7.0.0 -> 7.1.0
- pytorch 1.5.0 -> 1.5.1
- torchvision 0.6.0 -> 0.6.1
- horovod 0.19.1 -> 0.19.5
- mlflow 1.8.0 -> 1.9.1
للحصول على التفاصيل، راجع ملاحظات إصدار Databricks Runtime 7.1 الكاملة ل ML (EoS ).
Databricks Runtime 7.1 Genomics GA
21 يوليو 2020
تم إنشاء Databricks Runtime 7.1 ل Genomics أعلى Databricks Runtime 7.1 ويجلب الميزات الجديدة التالية:
- تحويل LOCO
- وظيفة إعادة تشكيل إخراج GloWGR
- مخرجات RNASeq محاذاة غير متناسقة
Databricks Connect 7.1 (معاينة عامة)
17 يوليو 2020
Databricks Connect 7.1 الآن في المعاينة العامة.
تحديثات واجهة برمجة تطبيقات قائمة الوصول إلى IP
15-21 يوليو 2020: الإصدار 3.24
تم تغيير خصائص واجهة برمجة تطبيقات قائمة الوصول إلى IP التالية:
updator_user_id
إلىupdated_by
creator_user_id
إلىcreated_by
تدعم دفاتر ملاحظات Python الآن مخرجات متعددة لكل خلية
15-21 يوليو 2020: الإصدار 3.24
تدعم دفاتر ملاحظات Python الآن مخرجات متعددة لكل خلية. وهذا يعني أنه يمكنك الحصول على أي عدد من عبارات العرض أو العرضHTML أو الطباعة في خلية. استفد من القدرة على عرض البيانات الأولية والرسم في الخلية نفسها، أو جميع المخرجات التي نجحت قبل أن تصل إلى خطأ.
تتطلب هذه الميزة Databricks Runtime 7.1 أو أعلى ويتم تعطيلها بشكل افتراضي في Databricks Runtime 7.1. قم بتمكينه عن طريق تعيين spark.databricks.workspace.multipleResults.enabled true
.
عرض التعليمات البرمجية لدفتر الملاحظات وخلايا النتائج جنبا إلى جنب
15-21 يوليو 2020: الإصدار 3.24
يتيح لك خيار عرض دفتر الملاحظات الجديد جنبا إلى جنب عرض التعليمات البرمجية والنتائج بجانب بعضها البعض. ينضم خيار العرض هذا إلى الخيار "قياسي" (المعروف سابقا باسم "التعليمات البرمجية") وخيار "النتائج فقط".
إيقاف جداول المهام مؤقتا
15-21 يوليو 2020: الإصدار 3.24
تحتوي جداول المهام الآن على أزرار إيقاف مؤقت وإلغاء الإيقاف المؤقت مما يسهل إيقاف المهام مؤقتا واستئنافها. الآن يمكنك إجراء تغييرات على جدول وظيفة دون تشغيل وظيفة إضافية تبدأ أثناء إجراء التغييرات. لا تتأثر عمليات التشغيل أو التشغيل الحالية التي تم تشغيلها بواسطة Run Now. للحصول على التفاصيل، راجع إيقاف مشغلات المهمة مؤقتا واستئنافها.
تتحقق نقاط نهاية واجهة برمجة تطبيقات الوظائف من صحة معرف التشغيل
15-21 يوليو 2020: الإصدار 3.24
jobs/runs/cancel
تتحقق نقطتا نهاية واجهة برمجة التطبيقات و jobs/runs/output
الآن من صحة المعلمةrun_id
. بالنسبة للمعلمات غير الصالحة، ترجع نقاط نهاية واجهة برمجة التطبيقات هذه الآن رمز حالة HTTP 400 بدلا من التعليمة البرمجية 500.
الرموز المميزة لمعرف Microsoft Entra لتخويل واجهة برمجة تطبيقات REST ل Databricks
15-21 يوليو 2020: الإصدار 3.24
استخدام الرموز المميزة لمعرف Microsoft Entra للمصادقة على واجهة برمجة تطبيقات مساحة العمل متاح الآن بشكل عام. تمكنك الرموز المميزة لمعرف Microsoft Entra من أتمتة إنشاء مساحات عمل جديدة وإعدادها. أساسيات الخدمة هي كائنات التطبيق في معرف Microsoft Entra. يمكنك أيضا استخدام كيانات الخدمة داخل مساحات عمل Azure Databricks لأتمتة مهام سير العمل. للحصول على التفاصيل، راجع مصادقة الوصول إلى موارد Azure Databricks.
تنسيق SQL في دفاتر الملاحظات تلقائيا
15-21 يوليو 2020: الإصدار 3.24
يمكنك الآن تنسيق خلايا دفتر ملاحظات SQL من اختصار لوحة المفاتيح وقائمة سياق الأمر وقائمة تحرير دفتر الملاحظات (حدد تحرير > تنسيق خلايا SQL). يسهل تنسيق SQL قراءة التعليمات البرمجية وصيانتها بأقل جهد. وهو يعمل مع دفاتر ملاحظات SQL بالإضافة %sql
إلى الخلايا.
ترتيب التثبيت القابل للتكرار لمكتبات Maven وCRAN
1-9 يوليو 2020: الإصدار 3.23
يعالج Azure Databricks الآن مكتبات Maven وCRAN بالترتيب الذي تم تثبيتها به على نظام المجموعة.
التحكم في رموز الوصول الشخصية للمستخدمين باستخدام واجهة برمجة تطبيقات إدارة الرمز المميز (معاينة عامة)
1-9 يوليو 2020: الإصدار 3.23
الآن يمكن لمسؤولي Azure Databricks استخدام واجهة برمجة تطبيقات إدارة الرمز المميز لإدارة رموز الوصول الشخصية الخاصة بالمستخدمين في Azure Databricks:
- مراقبة الرموز المميزة للوصول الشخصي للمستخدمين وإبطالها.
- التحكم في عمر الرموز المميزة المستقبلية في مساحة العمل الخاصة بك.
- التحكم في المستخدمين الذين يمكنهم إنشاء الرموز المميزة واستخدامها.
راجع مراقبة الرموز المميزة للوصول الشخصي وإبطالها.
استعادة خلايا دفتر الملاحظات المقصوصة
1-9 يوليو 2020: الإصدار 3.23
يمكنك الآن استعادة خلايا دفتر الملاحظات التي تم قصها إما باستخدام اختصار لوحة المفاتيح (Z
) أو عن طريق تحديد تحرير > التراجع عن قص الخلايا. تشبه هذه الوظيفة تلك للتراجع عن الخلايا المحذوفة.
تعيين الوظائف يمكن إدارة الإذن للمستخدمين غير المسؤولين
1-9 يوليو 2020: الإصدار 3.23
يمكنك الآن تعيين مستخدمين ومجموعات غير إدارية إلى إذن CAN MANAGE للمهام. يسمح مستوى الأذونات هذا للمستخدمين بإدارة جميع الإعدادات في الوظيفة، بما في ذلك تعيين الأذونات وتغيير المالك وتغيير تكوين نظام المجموعة (على سبيل المثال، إضافة المكتبات وتعديل مواصفات نظام المجموعة). راجع التحكم في الوصول إلى وظيفة.
يمكن لمستخدمي Azure Databricks غير المسؤولين عرض اسم المستخدم وتصفيته باستخدام واجهة برمجة تطبيقات SCIM
1-9 يوليو 2020: الإصدار 3.23
يمكن للمستخدمين غير المسؤولين الآن عرض أسماء المستخدمين وتصفية المستخدمين حسب اسم المستخدم باستخدام نقطة نهاية SCIM /Users.
ارتباط لعرض مواصفات نظام المجموعة عند عرض تفاصيل تشغيل الوظيفة
1-9 يوليو 2020: الإصدار 3.23
الآن عند عرض تفاصيل تشغيل مهمة، يمكنك النقر فوق ارتباط إلى صفحة تكوين نظام المجموعة لعرض مواصفات نظام المجموعة. في السابق، كان عليك نسخ معرف المهمة من عنوان URL والانتقال إلى قائمة نظام المجموعة للبحث عنه.