مشاركة عبر

أغسطس 2022

  • مقالة

تم إصدار هذه الميزات وتحسينات النظام الأساسي ل Azure Databricks في أغسطس 2022.

إشعار

يتم تنظيم الإصدارات. قد لا يتم تحديث حساب Azure Databricks الخاص بك إلا بعد أسبوع أو أكثر من تاريخ الإصدار الأولي.

يمكن لمستخدمي الحساب الوصول إلى وحدة تحكم الحساب

1-31 أغسطس 2022

يمكن لمستخدمي الحساب الوصول إلى وحدة تحكم حساب Azure Databricks لعرض قائمة بمساحات العمل الخاصة بهم. يمكن لمستخدمي الحساب عرض مساحات العمل التي تم منحهم حق الوصول إليها فقط. راجع إدارة حساب Azure Databricks الخاص بك.

مستخدمو الحساب

تتم مزامنة المستخدمين من مساحات العمل تلقائيا إلى حسابك كمستخدمي حساب. تتم مزامنة جميع مستخدمي مساحة العمل الحالية وكيانات الخدمة تلقائيا إلى حسابك كمستخدمين على مستوى الحساب وككيانات خدمة. راجع كيف يعين المسؤولون مستخدمين للحساب؟.

برنامج تشغيل Databricks ODBC 2.6.26

29 أغسطس 2022

لقد أصدرنا الإصدار 2.6.26 من برنامج تشغيل Databricks ODBC (تنزيل). يحدث هذا الإصدار دعم الاستعلام. يمكنك الآن إلغاء الاستعلامات بشكل غير متزامن على اتصالات HTTP بناء على طلب واجهة برمجة التطبيقات.

يعمل هذا الإصدار أيضا على حل المشكلة التالية:

  • عند استخدام الاستعلامات المخصصة في Spotfire، يصبح الموصل غير مستجيب.

برنامج تشغيل Databricks JDBC 2.6.29

29 أغسطس 2022

لقد أصدرنا الإصدار 2.6.29 من برنامج تشغيل Databricks JDBC (تنزيل). يحل هذا الإصدار المشكلات التالية:

  • عند استخدام وكيل HTTP مع تمكين "إحضار السحابة"، لا يقوم الموصل بإرجاع نتائج مجموعة بيانات كبيرة.
  • مشكلات النص الثانوي في نص ترخيص Databricks. كانت ارتباطات الوثائق مفقودة.
  • أسماء ملفات JAR غير صحيحة. بدلا من SparkJDBC41.jar كان يجب أن يكون DatabricksJDBC41.jar. بدلا من SparkJDBC42.jar، كان يجب أن يكون DatabricksJDBC42.jar.

عميل Databricks Feature Store متوفر الآن على PyPI

26 أغسطس 2022

يتوفر عميل 'متجر الميزات' الآن على PyPI. يتطلب العميل Databricks Runtime 9.1 LTS أو أعلى، ويمكن تثبيته باستخدام:

%pip install databricks-feature-store

تم حزم العميل بالفعل مع Databricks Runtime ل التعلم الآلي 9.1 LTS وما فوق.

لا يمكن تشغيل العميل خارج Databricks؛ ومع ذلك، يمكنك تثبيته محليا للمساعدة في اختبار الوحدة ودعم IDE الإضافي (على سبيل المثال، الإكمال التلقائي). لمزيد من المعلومات، راجع عميل Databricks Feature Store Python

كتالوج Unity هو GA

25 أغسطس 2022

يتوفر كتالوج Unity بشكل عام. للاطلاع على إعلانات الميزات والقيود التفصيلية، راجع ملاحظة إصدار GA كتالوج Unity.

Delta Sharing هي GA

25 أغسطس 2022

تتوفر الآن مشاركة دلتا بشكل عام، بدءا من Databricks Runtime 11.1. للحصول على التفاصيل، راجع ما المقصود بمشاركة دلتا؟.

  • تتم إدارة Databricks-to-Databricks Delta Sharing بالكامل دون الحاجة إلى تبادل الرموز المميزة.
  • إنشاء وإدارة الموفرين والمستلمين والمشاركات باستخدام واجهة مستخدم بسيطة الاستخدام.
  • إنشاء وإدارة الموفرين والمستلمين والمشاركات باستخدام واجهات برمجة تطبيقات SQL وREST مع دعم CLI وTerraform الكامل.
  • الاستعلام عن التغييرات على البيانات، أو مشاركة الإصدارات التزايدية مع موجزات تغيير البيانات.
  • تقييد وصول المستلم لتنزيل ملفات بيانات الاعتماد أو الاستعلام عن البيانات باستخدام قوائم الوصول إلى IP وقيود المنطقة.
  • يتم تمكين استخدام Delta Sharing لمشاركة البيانات داخل نفس حساب Azure Databricks بشكل افتراضي.
  • فرض فصل الواجبات عن طريق تفويض إدارة مشاركة دلتا لغير المسؤولين.

Databricks Runtime 11.2 (Beta)

23 أغسطس 2022

يتوفر وقت تشغيل Databricks 11.2 و11.2 Photon و11.2 ML الآن كإصدارات بيتا.

راجع ملاحظات الإصدار الكامل في Databricks Runtime 11.2 (EoS) وDatabricks Runtime 11.2 ل التعلم الآلي (EoS).

انخفاض حجم الرسالة في واجهة مستخدم Delta Live Tables للبنية الأساسية لبرنامج ربط العمليات التجارية المستمرة

22-29 أغسطس 2022: الإصدار 3.79

باستخدام هذا الإصدار، يتم عرض انتقالات الحالة للجداول المباشرة في البنية الأساسية لبرنامج ربط العمليات التجارية المستمرة Delta Live Tables في واجهة المستخدم فقط حتى تدخل الجداول في حالة التشغيل. لا يتم عرض أي انتقالات متعلقة بإعادة الحوسبة الناجحة للجداول في واجهة المستخدم، ولكنها متوفرة في سجل أحداث Delta Live Tables على مستوى METRICS. لا تزال تظهر أي انتقالات إلى حالات الفشل في واجهة المستخدم. في السابق، تم عرض كافة انتقالات الحالة في واجهة المستخدم للجداول المباشرة. يقلل هذا التغيير من حجم أحداث البنية الأساسية لبرنامج ربط العمليات التجارية المعروضة في واجهة المستخدم ويسهل العثور على الرسائل المهمة للبنية الأساسية لبرنامج ربط العمليات التجارية الخاصة بك. لمعرفة المزيد حول الاستعلام عن سجل الأحداث، راجع ما هو سجل أحداث Delta Live Tables؟.

تكوين نظام المجموعة الأسهل لخطوط أنابيب Delta Live Tables

22-29 أغسطس 2022: الإصدار 3.79

يمكنك الآن تحديد وضع نظام المجموعة، إما التحجيم التلقائي أو الحجم الثابت، مباشرة في واجهة مستخدم Delta Live Tables عند إنشاء البنية الأساسية لبرنامج ربط العمليات التجارية. في السابق، كان تكوين مجموعة التحجيم التلقائي يتطلب تغييرات على إعدادات JSON الخاصة بالبنية الأساسية لبرنامج ربط العمليات التجارية. لمزيد من المعلومات حول إنشاء مسار وإعداد وضع نظام المجموعة الجديد، راجع تشغيل تحديث على مسار Delta Live Tables.

تنسيق مهام dbt في مهام سير عمل Databricks (معاينة عامة)

22-29 أغسطس 2022: الإصدار 3.79

يمكنك تشغيل مشروع dbt الأساسي كمهمة في مهمة Azure Databricks مع مهمة dbt الجديدة، ما يسمح لك بتضمين تحويلات dbt في سير عمل معالجة البيانات. على سبيل المثال، يمكن لسير العمل استيعاب البيانات باستخدام "المحمل التلقائي"، وتحويل البيانات باستخدام dbt، وتحليل البيانات باستخدام مهمة دفتر ملاحظات. لمزيد من المعلومات حول مهمة dbt، بما في ذلك مثال، راجع استخدام تحويلات dbt في مهمة Azure Databricks. لمزيد من المعلومات حول إنشاء سير عمل يتضمن مهمة dbt وتشغيله وجدولته، راجع جدولة مهام سير العمل وتنسيقها.

اتحاد الهوية هو GA

25 أغسطس 2022

يبسط اتحاد الهوية إدارة Azure Databricks من خلال تمكينك من تعيين المستخدمين على مستوى الحساب وكيانات الخدمة والمجموعات إلى مساحات العمل الموحدة للهوية. يمكنك الآن تكوين وإدارة جميع المستخدمين وكيانات الخدمة والمجموعات مرة واحدة في وحدة تحكم الحساب، بدلا من تكرار التكوين بشكل منفصل في كل مساحة عمل. لمعرفة المزيد حول اتحاد الهوية، راجع كيف يعين المسؤولون المستخدمين لمساحات العمل؟. للبدء، راجع كيف يمكن المسؤولون اتحاد الهوية على مساحة عمل؟.

يدعم Partner Connect الاتصال ب Stardog

24 أغسطس 2022

يمكنك الآن إنشاء اتصال بسهولة بين Stardog ومساحة عمل Azure Databricks باستخدام Partner Connect. يوفر Stardog منصة رسم بياني معرفي للإجابة عن الاستعلامات المعقدة عبر مستودعات البيانات.

تكامل Databricks Feature Store مع الاستدلال في الوقت الحقيقي بلا خادم

22-29 أغسطس 2022: الإصدار 3.79

يدعم Databricks Feature Store الآن البحث التلقائي عن الميزات للاستدلال في الوقت الحقيقي بلا خادم. للحصول على التفاصيل، راجع البحث التلقائي عن الميزات باستخدام خدمة نموذج Databricks.

دعم نوع بيانات إضافي للبحث التلقائي عن الميزات في Databricks Feature Store

22-29 أغسطس 2022: الإصدار 3.79

يدعم BooleanType Databricks Feature Store الآن للبحث التلقائي عن الميزات. راجع البحث التلقائي عن الميزات باستخدام خدمة نموذج Databricks.

إحضار المفتاح الخاص بك: تشفير بيانات اعتماد Git

23-29 أغسطس 2022

يمكنك استخدام مفتاح تشفير لبيانات اعتماد Git ل Databricks Repos.

راجع إحضار المفتاح الخاص بك: تشفير بيانات اعتماد Git.

تحل معاينة واجهة مستخدم نظام المجموعة ووضع الوصول محل وضع الأمان

19 أغسطس 2022

واجهة مستخدم إنشاء نظام المجموعة الجديدة قيد المعاينة. راجع مرجع تكوين الحساب.

قيود كتالوج Unity (معاينة عامة)

16 أغسطس 2022

  • يتم دعم Scala وR وأحمال العمل باستخدام وقت تشغيل التعلم الآلي فقط على المجموعات التي تستخدم وضع وصول المستخدم الفردي. لا تدعم أحمال العمل بهذه اللغات استخدام طرق العرض الديناميكية للأمان على مستوى الصف أو مستوى العمود.
  • لا يتم دعم النسخ الضحلة عند استخدام كتالوج Unity كمصدر أو هدف للنسخة.
  • التجميع غير معتمد لجداول كتالوج Unity. ستطرح الأوامر التي تحاول إنشاء جدول مستودع في كتالوج Unity استثناء.
  • يتم دعم وضع الكتابة فوق لعمليات الكتابة DataFrame في كتالوج Unity فقط لجداول Delta، وليس لتنسيقات الملفات الأخرى. يجب أن يكون لدى المستخدم الامتياز CREATE على المخطط الأصل ويجب أن يكون مالك العنصر الموجود.
  • يحتوي الدفق حاليا على القيود التالية:
    • وهو غير مدعوم في أنظمة المجموعات باستخدام وضع الوصول المشترك. بالنسبة لأحمال العمل المتدفقة، يجب استخدام وضع وصول مستخدم واحد.
    • نقاط التفتيش غير المتزامنة غير مدعومة بعد.
    • ستطرح الاستعلامات المتدفقة التي تستمر أكثر من 30 يوما على جميع مجموعات اللب أو الوظائف استثناء. بالنسبة إلى استعلامات الدفق طويلة الأمد، قم بتكوين إعادة المحاولة التلقائية للمهمة.
  • الرجوع إلى جداول كتالوج Unity من خطوط أنابيب Delta Live Tables غير مدعوم حاليا.
  • لا يمكن استخدام المجموعات التي تم إنشاؤها مسبقا في مساحة عمل في عبارات منح كتالوج Unity. هذا لضمان عرض متناسق للمجموعات التي يمكن أن تمتد عبر مساحات العمل. لاستخدام المجموعات في عبارات GRANT، قم بإنشاء مجموعاتك في وحدة تحكم الحساب وتحديث أي أتمتة لإدارة الأساسي أو المجموعة (مثل موصلات SCIM و Okta وMicrosoft Entra ID وTerraform) للإشارة إلى نقاط نهاية الحساب بدلا من نقاط نهاية مساحة العمل.

يتوفر كتالوج Unity في المناطق التالية:

  • canadacentral
  • centralus
  • francecentral
  • germanywestcentral
  • japaneast
  • norwayeast
  • southafricanorth
  • swedencentral
  • switzerlandnorth
  • switzerlandwest
  • uaenorth
  • westcentralus
  • westus3
  • australiaeast
  • brazilsouth
  • centralindia
  • eastus
  • eastus2
  • koreacentral
  • northcentralus
  • northeurope
  • southeastasia
  • ukwest
  • westeurope
  • westus

لاستخدام كتالوج Unity في منطقة أخرى، اتصل بفريق حسابك.

الاستدلال في الوقت الحقيقي بلا خادم في المعاينة العامة

16 أغسطس 2022

يعالج الاستدلال بلا خادم في الوقت الحقيقي نماذج التعلم الآلي باستخدام MLflow ويعرضها كنقاط نهاية REST API. تستخدم هذه الوظيفة الحوسبة بلا خادم، ما يعني أن نقاط النهاية وموارد الحوسبة المقترنة تتم إدارتها وتشغيلها في حساب سحابة Azure Databricks. تكاليف الاستخدام والتخزين المتكبدة مجانية حاليا، ولكن Azure Databricks ستوفر إشعارا عند بدء الشحن.

يجب على مسؤولي مساحة العمل تمكين الاستدلال في الوقت الحقيقي بلا خادم في مساحة العمل الخاصة بك لتتمكن من استخدام هذه الميزة.

للمشاركة في المعاينة العامة للاستدلال في الوقت الحقيقي بلا خادم، اتصل بفريق حساب Azure Databricks.

البحث المحسن في مساحة العمل هو الآن GA

9 أغسطس 2022

يمكنك الآن البحث عن دفاتر الملاحظات والمكتبات والمجلدات والملفات والمستودعات حسب الاسم. يمكنك أيضا البحث عن محتوى داخل دفتر ملاحظات ورؤية معاينة للمحتوى المطابق. يمكن تصفية نتائج البحث حسب النوع. راجع البحث عن كائنات مساحة العمل.

استخدام الأعمدة التي تم إنشاؤها عند إنشاء مجموعات بيانات Delta Live Tables

8-15 أغسطس 2022: الإصدار 3.78

يمكنك الآن استخدام الأعمدة التي تم إنشاؤها عند تعريف الجداول في خطوط أنابيب Delta Live Tables. يتم دعم الأعمدة التي تم إنشاؤها بواسطة واجهات Delta Live Tables Python وSQL.

تحرير محسن لدفاتر الملاحظات باستخدام المحرر المستند إلى موناكو (تجريبي)

8-15 أغسطس 2022

يتوفر محرر تعليمات برمجية جديد يستند إلى موناكو لدفاتر ملاحظات Python. لتمكينه، حدد الخيار تشغيل محرر دفتر الملاحظات الجديد على علامة التبويب إعدادات المحرر في صفحة إعدادات المستخدم.

يتضمن المحرر الجديد تلميحات نوع المعلمة، وفحص العنصر عند المرور، وطي التعليمات البرمجية، ودعم المؤشر المتعدد، وتحديد العمود (المربع)، والعناصر الجانبية في محفوظات إصدار دفتر الملاحظات.

ينتهي دعم سلسلة Databricks Runtime 10.3

2 أغسطس 2022

انتهى دعم Databricks Runtime 10.3 وDatabricks Runtime 10.3 ل التعلم الآلي في 2 أغسطس. راجع دورة حياة دعم Databricks.

2 أغسطس 2022

يدعم Azure Databricks الآن تمكين اتصالات Azure Private Link للاتصال الخاص بين المستخدمين ومساحات عمل Azure Databricks الخاصة بهم، وأيضا بين المجموعات على مستوى الحوسبة والخدمات الأساسية على مستوى التحكم داخل البنية الأساسية لمساحة عمل Databricks. يتصل Azure Private Link بالخدمات مباشرة دون تعريض نسبة استخدام الشبكة للشبكة العامة. تتوفر هذه الميزة كمعاينة عامة. راجع تمكين اتصالات الواجهة الخلفية والواجهة الأمامية ل Azure Private Link.

تمكين مستودعات SQL بلا خادم لمساحة العمل الخاصة بك (معاينة عامة)

2 أغسطس 2022

تتوفر مستودعات SQL بلا خادم الآن للحسابات ومساحات العمل على Azure Databricks كمعاينة عامة. تتطلب هذه الميزة مستوى التسعير المتميز. قبل إنشاء مستودعات SQL بلا خادم، يجب على المسؤول تمكينها لمساحة العمل.

تدعم Delta Live Tables الآن تحديث الجداول المحددة فقط في تحديثات البنية الأساسية لبرنامج ربط العمليات التجارية

2-24 أغسطس 2022

يمكنك الآن بدء تحديث للجداول المحددة فقط في مسار Delta Live Tables. تعمل هذه الميزة على تسريع اختبار المسارات وحل الأخطاء من خلال السماح لك ببدء تحديث البنية الأساسية لبرنامج ربط العمليات التجارية الذي يقوم بتحديث الجداول المحددة فقط. لمعرفة كيفية بدء تحديث الجداول المحددة فقط، راجع تشغيل تحديث على مسار Delta Live Tables.

ينتظر تنفيذ المهمة الآن انتهاء تثبيت مكتبات نظام المجموعة

1 أغسطس 2022

عند بدء تشغيل نظام مجموعة، تنتظر مهام Databricks الآن حتى تكتمل مكتبات نظام المجموعة التثبيت قبل التنفيذ. في السابق، كانت عمليات تشغيل المهمة تنتظر المكتبات لتثبيتها على مجموعات جميع الأغراض فقط إذا تم تحديدها كمكتبة تابعة للوظيفة. لمزيد من المعلومات حول تكوين المكتبات التابعة للمهام، راجع تكوين مهام Databricks وتحريرها.