مشاركة عبر

أغسطس 2024

  • مقالة

تم إصدار هذه الميزات وتحسينات النظام الأساسي ل Azure Databricks في أغسطس 2024.

إشعار

يتم تنظيم الإصدارات. قد لا يتم تحديث حساب Azure Databricks الخاص بك حتى أسبوع أو أكثر بعد تاريخ الإصدار الأولي.

مراقبة استخدام كائن كتالوج Unity مقابل الحصص النسبية باستخدام واجهات برمجة التطبيقات الجديدة لحصص الموارد

30 أغسطس 2024

تمكنك واجهات برمجة التطبيقات الجديدة لحصص الموارد من مراقبة استخدامك للكتالوج Unity القابلة للتأمين مقابل حصص الموارد. قريبا، ستتمكن أيضا من تلقي إعلامات البريد الإلكتروني عند الاقتراب من حدود الحصة النسبية. راجع مراقبة استخدامك لحصص موارد كتالوج Unity ومرجع واجهة برمجة تطبيقات حصص الموارد.

MPT 7B Instruct وMPT 30B Instruct model retirements

30 أغسطس 2024

تم الآن إيقاف نموذجي MPT 7B Instruct وMPT 30B Instruct. راجع النماذج المتوقفة لنماذج الاستبدال الموصى بها.

تم استبدال AskSupport بمساعد Azure Databricks

29 أغسطس 2024

تم استبدال AskSupport، قناة الدعم المستندة إلى Databricks Slack، ب Databricks Assistant، المتوفر في مساحة عمل Databricks. استخدم مساعد Databricks للبحث في الوثائق التقنية وإنشاء التذاكر والحصول على دعم مدرك للسياق.

لاستخدام مساعد الذكاء الاصطناعي، يجب تمكين الذكاء الاصطناعي Assistant في وحدة تحكم حسابك.

تمت إضافة لوحة معلومات إدارة التكلفة القابلة للاستيراد إلى وحدة تحكم الحساب (المعاينة العامة)

28 أغسطس 2024

يمكن لمسؤولي الحساب الآن استيراد لوحة معلومات إدارة تكلفة قابلة للتخصيص من وحدة تحكم الحساب إلى أي مساحة عمل لكتالوج Unity في حسابهم. هناك إصداران من لوحة المعلومات: أحدهما يراقب الاستخدام على مستوى الحساب، والآخر لاستخدام مساحة عمل واحدة.

يتم توسيع جداول نظام Lakeflow بأعمدة إضافية

23 أغسطس 2024

يتم توسيع الجداول في system.lakeflow المخطط بأعمدة إضافية. تم إجراء التغييرات التالية:

  • jobs تم توسيعه بعمود description .
  • job_run_timelineيتم توسيعه بأعمدة run_typerun_nameو termination_code compute_idsjob_parameters.
  • job_task_run_timeline يتم توسيعها باستخدام job_run_idالأعمدة parent_run_id و و termination_code .

تغيير المخطط غير منقطع ولن يقطع مهام سير العمل الحالية. لن يتم إعادة تعبئة الأعمدة الجديدة للصفوف المنبعثة بالفعل. لمزيد من المعلومات، راجع مرجع جدول نظام الوظائف.

تمييز أخطاء تنسيق التعليمات البرمجية ل Python

23 أغسطس 2024

يمكن للتعليمات البرمجية ل Python في دفاتر الملاحظات ومحررات الملفات تمييز أخطاء التنسيق والتحذيرات مثل المسافة البادئة غير المتوقعة وطول الخط الطويل والمزيد. راجع تمييز تنسيق Python.

Delta Sharing: المزيد من ميزات Delta Lake المدعومة الآن من قبل موصلات Python وPower BI

21 أغسطس 2024

يدعم الآن موصل Delta Sharing Python 1.1.0+ وPower BI v2.132.908.0+ الآن:

  • وضع اسم تعيين العمود
  • متجهات الحذف
  • تنسيق موحد

تم دعم ميزات Delta Lake هذه بالفعل على Databricks Runtime 14.1+ وموصل Apache Spark 3.1+لمشاركة دلتا مفتوح المصدر.

راجع مصفوفة دعم ميزة Delta Lake.

تضيف Delta Sharing دعما ل TimestampNTZ

21 أغسطس 2024

تضيف Delta Sharing دعما ل TimestampNTZ على Databricks Runtime 14.1 والإصدارات الأحدث وموصل Apache Spark 3.3 وما فوق لمشاركة دلتا مفتوح المصدر.

راجع مصفوفة دعم ميزة Delta Lake.

مهمة وظائف For each Azure Databricks هي GA

21 أغسطس 2024

For each المهمة متاحة الآن بشكل عام. يمكنك استخدام For each المهمة لتشغيل مهمة أخرى في حلقة، وتمرير مجموعة مختلفة من المعلمات إلى كل تكرار للمهمة. For each يمكن تكرار المهمة عبر أي من مهام الوظيفة القياسية، مثل دفتر ملاحظات أو JAR أو برنامج Python النصي أو مهمة SQL. راجع تشغيل مهمة مهمة Azure Databricks ذات معلمات في حلقة.

إذن Azure RBAC لمسؤولي مساحة العمل

20 أغسطس 2024

في السابق، كان دور المساهم أو المالك في Azure RBAC المضمن (التحكم في الوصول المستند إلى الدور) مطلوبا لمنح المستخدم دور مسؤول مساحة عمل Azure Databricks من Azure. يمكنك الآن إنشاء دور Azure RBAC مخصص لديه الإذن Microsoft.Databricks/workspaces/assignWorkspaceAdmin/action لمنح المستخدم دور مسؤول مساحة عمل Azure Databricks. يمكن لهؤلاء المستخدمين إدارة خدمة Azure Databricks وتكوين التسجيل التشخيصي. لمزيد من المعلومات، راجع أذونات مسؤول Azure المطلوبة.

Databricks Runtime 15.4 LTS هو GA

19 أغسطس 2024

Databricks Runtime 15.4 LTS وDatabricks Runtime 15.4 LTS ML متاحان الآن بشكل عام.

راجع Databricks Runtime 15.4 LTS وDatabricks Runtime 15.4 LTS for التعلم الآلي.

الإكمال التلقائي لدفتر الملاحظات المخصص

19 أغسطس 2024

يعطي الإكمال التلقائي لدفتر الملاحظات الآن الأولوية للاقتراحات استنادا إلى بيانات التعريف والاستخدام الفردية لكتالوج Unity، ما يوفر تصنيفات اقتراحات مخصصة لكل مستخدم. راجع الإكمال التلقائي المخصص

تكوين وضع الوصول الافتراضي لمساحة العمل لحساب المهام

16 أغسطس 2024

يمكن لمسؤولي مساحة العمل الآن تكوين وضع الوصول الافتراضي لحساب المهام في مساحة العمل الخاصة بهم. يتم تطبيق وضع الوصول الافتراضي هذا لحساب الموارد دون وضع وصول محدد. لمزيد من المعلومات، راجع وضع الوصول الافتراضي لحساب الوظائف.

أوامر شرطة مائلة جديدة لمساعد Databricks

14 أغسطس 2024

أضاف مساعد Databricks الأوامر المائلة التالية كاختصارات للمهام الشائعة:

  • /findTables: البحث عن الجداول ذات الصلة استنادا إلى بيانات تعريف كتالوج Unity.
  • /findQueries: البحث عن الاستعلامات ذات الصلة استنادا إلى بيانات تعريف كتالوج Unity.
  • /prettify: تنسيق التعليمات البرمجية لسهولة القراءة.
  • /rename: يقترح أسماء محدثة لخلايا دفتر الملاحظات وعناصر أخرى، اعتمادا على السياق.
  • /settings: ضبط إعدادات دفتر الملاحظات مباشرة من مساعد.

لمزيد من المعلومات، راجع استخدام أوامر الشرطة المائلة للمطالبات.

يدعم البحث في مساحة العمل الآن وحدات التخزين

14 أغسطس 2024

يتم الآن تضمين وحدات التخزين في نتائج البحث. راجع البحث عن كائنات مساحة العمل.

نماذج Meta Llama 3.1 405B المدعومة في ضبط نموذج الأساس

14 أغسطس 2024

يتم الآن دعم نماذج Meta Llama 3.1 405B في ضبط نموذج الأساس. راجع النماذج المدعومة.

برنامج تشغيل Databricks JDBC 2.6.40

13 أغسطس 2024

Databricks JDBC Driver الإصدار 2.6.40 متوفر الآن من تنزيل برنامج تشغيل JDBC. يزيل هذا الإصدار رسائل السجل المكررة WARNING لزيادة إمكانية استخدام التسجيل والأمان.

يتضمن هذا الإصدار التحسينات التالية والميزات الجديدة:

  • دعم نقطة نهاية اكتشاف OIDC. يمكن لبرنامج التشغيل الآن تعيين نقطة نهاية اكتشاف OIDC لإحضار رمز مميز واسترداد نقطة نهاية تخويل.
  • دعم السهم المحدث. يستخدم برنامج التشغيل الآن الإصدار 14.0.2 من Apache سهم. استخدمت الإصدارات السابقة من برنامج التشغيل الإصدار 9.0.0 من Apache سهم.
  • ProxyIgnoreList دعم. يدعم ProxyIgnoreList برنامج التشغيل الآن الخاصية عند UseProxy تعيين إلى 1.
  • تحديث دعم الرمز المميز. يدعم برنامج التشغيل الآن رمز تحديث اختياري. يحفظ الرمز المميز للوصول ويعيد استخدامه للاتصالات الجديدة طالما أنه صالح. إذا تعذر على برنامج التشغيل تجديد الرمز المميز للوصول باستخدام رمز التحديث المميز، تسجيل الدخول مرة أخرى.
  • دعم المصادقة المحدث. يدعم برنامج التشغيل الآن مصادقة بيانات اعتماد العميل (M2M) المستندة إلى المستعرض (U2M) على Google Cloud.
  • تمت إضافة خيارات OAuth الافتراضية الموحدة.
  • يمكنك الآن تكوين منفذ إعادة توجيه OAuth. للقيام بذلك، قم بتعيين الخاصية OAuth2RedirectUrlPort إلى المنفذ الخاص بك.

للحصول على معلومات التكوين الكاملة، راجع دليل برنامج تشغيل Databricks JDBC المثبت مع حزمة تنزيل برنامج التشغيل.

تم إبطال رموز الوصول الشخصي ل Databricks إذا لم يتم استخدامها بعد 90 يوما

13 أغسطس 2024

تبطل Databricks الآن تلقائيا أي رموز وصول شخصية (PATs) لم يتم استخدامها في 90 يوما أو أكثر. لمزيد من التفاصيل، راجع مراقبة الرموز المميزة للوصول الشخصي وإبطالها.

تدعم واجهة برمجة تطبيقات المجموعات الآن تحديثات التكوين الجزئية

13 أغسطس 2024

يسمح لك استدعاء واجهة برمجة التطبيقات الجديد بتحديث تكوين نظام المجموعة جزئيا، مما يتطلب منك تحديد السمات التي تريد تحديثها فقط. راجع تحديث تكوين نظام المجموعة (جزئي) في مرجع واجهة برمجة تطبيقات REST.

التفاف الأسطر في خلايا دفتر الملاحظات

12 أغسطس 2024

يمكنك الآن تمكين التفاف الأسطر في خلايا دفتر الملاحظات أو تعطيله، مما يسمح للنص إما بالالتفاف على أسطر متعددة أو البقاء على سطر واحد مع التمرير الأفقي. راجع التفاف الخط.

12 أغسطس 2024

يمكنك الآن تحديد مجموعة فرعية من الأعمدة في جدول لاستخدامها في فهرس بحث متجه. تتم دائما مزامنة عمود المفتاح الأساسي وعمود التضمين. راجع كيفية إنشاء فهرس بحث متجه والاستعلام عنه.

لم يعد بإمكان الملفات أن تحتوي على أسماء متطابقة في مجلدات مساحة العمل

9 أغسطس 2024

يمنعك Databricks الآن من إنشاء الأصول أو إعادة تسميتها في مجلدات مساحة العمل عندما يتطابق اسم أحد الأصول مع اسم ملف آخر تماما، مما يمثل ملحق ملف الأصل. على سبيل المثال، لم يعد بإمكانك إنشاء ملف مسمى test.py إذا كان هناك بالفعل دفتر ملاحظات باسم test أساسي له ملحق .py في نفس مجلد مساحة العمل.

لمزيد من التفاصيل، راجع تسمية الأصول في مجلدات مساحة العمل.

تطبيق نهج الحساب متاح الآن

8 أغسطس 2024

يتيح فرض التوافق مع النهج لمسؤولي مساحة العمل تحديث موارد الحوسبة الخاصة بمساحة العمل الخاصة بهم للامتثال لأحدث إصدار من النهج. يمكن استخدام هذه الميزة في واجهة المستخدم أو من خلال واجهة برمجة تطبيقات نهج نظام المجموعة.

راجع فرض التوافق مع النهج أو واجهة برمجة تطبيقات نهج نظام المجموعة.

واجهات برمجة التطبيقات نموذج الأساس الدفع لكل رمز مميز هو الآن GA

7 أغسطس 2024

تتوفر الآن واجهات برمجة تطبيقات نموذج الأساس الدفع لكل رمز مميز بشكل عام. راجع واجهات برمجة تطبيقات نموذج أساس الدفع لكل رمز مميز.

التعاون في مشاريع البيانات بشكل آمن وخاصة باستخدام Databricks Clean Rooms (معاينة عامة)

6 أغسطس 2024

تستخدم غرف Databricks النظيفة Delta Sharing والحوسبة بلا خادم لتوفير بيئة آمنة ومحمية للخصوصية حيث يمكن لعدة أطراف مشاركة بيانات المؤسسة الحساسة والتعاون دون الوصول المباشر إلى بيانات بعضها البعض.

باستخدام Clean Rooms، يمكن للمستخدمين من حسابات Databricks الأخرى التعاون لإنشاء رؤى فريدة حول المشاريع المشتركة، مثل الحملات الإعلانية أو قرارات الاستثمار أو البحث والتطوير، دون نقل البيانات الحساسة أو الكشف عنها. تشغيل أحمال العمل المعقدة في بيئة سريعة الزوال باستخدام أي لغة تدعمها دفاتر ملاحظات Databricks، بما في ذلك Python، والتي توفر الدعم الأصلي لأحمال عمل التعلم الآلي.

لتجربة ذلك، تواصل مع ممثل Azure Databricks.

راجع ما هي غرف Azure Databricks النظيفة؟.

البحث عن متجهات الذكاء الاصطناعي الفسيفساء متوافق الآن مع HIPAA

6 أغسطس 2024

الفسيفساء الذكاء الاصطناعي Vector Search متوافقة الآن مع HIPAA في جميع المناطق.

تنسيق الأعمدة في جداول نتائج الاستعلام ودفتر الملاحظات

6 أغسطس 2024

يمكنك تخصيص جداول النتائج لتكون أكثر قابلية للقراءة باستخدام خيارات تنسيق الأعمدة مثل العملة والنسبة المئوية وعنوان URL والتحكم في المنازل العشرية والمزيد. راجع تنسيق الأعمدة.

عوامل تصفية الصفوف وأقنعة الأعمدة هي الآن GA، مع تحسينات

6 أغسطس 2024

تتوفر الآن القدرة على تطبيق عوامل تصفية الصفوف وأقنعة الأعمدة على الجداول بشكل عام على Databricks Runtime 12.2 وما فوق. تمنع عوامل تصفية الصفوف وأقنعة الكولوم الوصول إلى البيانات الحساسة من قبل مستخدمين محددين. يتم تنفيذ عوامل التصفية والأقنعة هذه كدالات يحددها المستخدم SQL (UDFs). توفر GA الدعم للوظائف التالية التي لم تكن متوفرة في المعاينة العامة:

  • التعبيرات الثابتة في معلمات النهج (السلاسل، الرقمية، الفواصل الزمنية، القيم المنطقية، القيم الخالية).

  • طرق العرض المجسدة وجداول الدفق (معاينة عامة).

  • عبارات MERGE.

  • أخذ عينات الجدول.

يعمل الإصدار المنفصل للدعم للتحكم في الوصول الدقيق على حساب مستخدم واحد أيضا على توسيع خيارات الحوسبة للعمل على الجداول باستخدام عوامل تصفية الصفوف وأقنعة الأعمدة المطبقة.

راجع تصفية بيانات الجدول الحساسة باستخدام عوامل تصفية الصفوف وأقنعة الأعمدة.

يتوفر اتحاد Lakehouse بشكل عام (GA)

1 أغسطس 2024

في Databricks Runtime 15.2 والإصدارات الأحدث وDatabricks SQL الإصدار 2024.30 والإصدارات الأحدث، تتوفر موصلات Lakehouse Federation عبر أنواع قواعد البيانات التالية بشكل عام (GA):

  • MySQL
  • PostgreSQL
  • Amazon Redshift
  • Snowflake
  • Microsoft SQL Server
  • Azure Synapse (مستودع بيانات SQL)
  • Databricks

يقدم هذا الإصدار أيضا التحسينات التالية:

  • دعم مصادقة تسجيل الدخول الأحادي (SSO) في موصلات Snowflake وMicrosoft SQL Server .

  • دعم Azure Private Link لموصل SQL Server من بيئات الحوسبة بلا خادم. راجع الخطوة 3: إنشاء قواعد نقطة نهاية خاصة.

  • دعم القوائم المنبثقة الإضافية (دالات السلسلة والرياضيات والوظائف المتنوعة).

  • معدل نجاح دفع محسن عبر أشكال استعلام مختلفة.

  • قدرات إضافية لتصحيح الأخطاء:

    • EXPLAIN FORMATTED يعرض الإخراج نص الاستعلام الذي تم دفعه لأسفل.
    • تعرض واجهة مستخدم ملف تعريف الاستعلام نص الاستعلام الذي تم دفعه لأسفل ومعرفات العقدة الموحدة وأوقات تنفيذ استعلام JDBC (في الوضع المطول). راجع عرض الاستعلامات الموحدة التي أنشأها النظام.