يوليو 2024

تم إصدار هذه الميزات وتحسينات النظام الأساسي ل Azure Databricks في يوليو 2024.

زيادة حد المهام المتزامنة

31 يوليو 2024

تم رفع حد مساحة العمل للمهام التي تعمل في وقت واحد إلى 2000. راجع حدود الموارد.

تضمين الصور وسحبها وإفلاتها في دفاتر الملاحظات

31 يوليو 2024

يمكنك الآن عرض الصور في دفاتر الملاحظات عن طريق تضمينها مباشرة في خلايا markdown. اسحب الصور وإفلاتها من سطح المكتب مباشرة إلى خلايا markdown لتحميلها وعرضها تلقائيا. راجع عرض الصور وسحب الصور وإفلاتها.

لوحة الأوامر متوفرة في دفاتر الملاحظات

31 يوليو 2024

يمكنك الآن تنفيذ الإجراءات بسرعة في دفتر الملاحظات باستخدام لوحة الأوامر. اضغط على Cmd + Shift + P على MacOS أو Ctrl + Shift + P على Windows أثناء وجودك في دفتر ملاحظات للوصول إلى الإجراءات المستخدمة بشكل متكرر. راجع لوحة الأوامر.

مخطط نظام سير العمل الذي تمت إعادة تسميته إلى lakeflow

31 يوليو 2024

workflow يتم تحديث المخطط إلى lakeflow. نوصي بالتبديل إلى lakeflow لأنه سيتضمن جميع الجداول الحالية بالإضافة إلى الجداول الجديدة في المستقبل، مثل المسارات. يجب على العملاء الاشتراك في lakeflow المخطط لجعله مرئيا في metastore الخاص بهم. راجع مرجع جدول نظام الوظائف.

LakeFlow Connect (معاينة عامة مسورة)

31 يوليو 2024

يوفر LakeFlow Connect موصلات أصلية تمكنك من استيعاب البيانات من قواعد البيانات وتطبيقات المؤسسة وتحميلها في Azure Databricks. يستفيد LakeFlow Connect من عمليات القراءة والكتابة التزايدية الفعالة لجعل استيعاب البيانات أسرع وقابلا للتطوير وأكثر كفاءة من حيث التكلفة، بينما تظل بياناتك حديثة لاستهلاك انتقال البيانات من الخادم.

Salesforce Sales Cloud وMicrosoft Azure SQL Database وAmazon RDS ل SQL Server و Workday مدعومة حاليا. راجع LakeFlow Connect.

دعم تخزين Cloudflare R2 هو GA

30 يوليو 2024

القدرة على استخدام Cloudflare R2 كمخزن سحابي للبيانات المسجلة في كتالوج Unity متاحة الآن بشكل عام. تم تصميم Cloudflare R2 بشكل أساسي لحالات استخدام "مشاركة دلتا" التي تريد فيها تجنب رسوم خروج البيانات التي يفرضها موفرو السحابة عندما تعبر البيانات المناطق. يدعم تخزين R2 جميع بيانات Databricks والأصول الذكاء الاصطناعي المدعومة في AWS S3 وAzure Data Lake Storage Gen2 وGoogle Cloud Storage. يتطلب دعم R2 مستودع SQL أو Databricks Runtime 14.3 أو أعلى. راجع استخدام النسخ المتماثلة Cloudflare R2 أو ترحيل التخزين إلى R2 وإنشاء بيانات اعتماد تخزين للاتصال ب Cloudflare R2.

مراقبة أنشطة مساعد Databricks باستخدام جداول النظام (معاينة عامة)

30 يوليو 2024

يمكنك الآن مراقبة أنشطة مساعد Databricks في لوحة معلومات باستخدام جداول النظام. لمزيد من المعلومات، راجع مرجع جدول نظام مساعد Databricks ومثاله.

مشاركة المخططات باستخدام Delta Sharing أصبحت الآن GA

30 يوليو 2024

القدرة على مشاركة المخططات باستخدام Delta Sharing هي GA. تتيح مشاركة المخطط بأكمله للمستلم إمكانية الوصول إلى جميع الجداول وطرق العرض في المخطط في اللحظة التي تشاركها فيها، إلى جانب أي جداول وطرق عرض تتم إضافتها إلى المخطط في المستقبل. تتطلب إضافة مخططات إلى مشاركة باستخدام أوامر SQL مستودع SQL أو مجموعة تعمل على Databricks Runtime 13.2 أو أعلى. القيام بنفس الشيء باستخدام مستكشف الكتالوج ليس لديه متطلبات حساب. راجع إضافة مخططات إلى مشاركة.

يتوفر إطار عمل عامل الذكاء الاصطناعي الفسيفساء في northcentral و centralus

29 يوليو 2024

يتوفر إطار عمل عامل الذكاء الاصطناعي الفسيفساء الآن في منطقتي northcentral و centralus . راجع الميزات ذات التوفر الإقليمي المحدود.

يمكن لمساعد Databricks تشخيص المشكلات المتعلقة بالوظائف (المعاينة العامة)

29 يوليو 2024

يمكن لمساعد Databricks الآن تشخيص المشكلات المتعلقة بالمهام الفاشلة. راجع تشخيص الأخطاء في الوظائف.

تحديثات مصادقة مجلدات Databricks Git وسلوكيات المشاركة

29 يوليو 2024

• معالجة المصادقة المستندة إلى مربع حوار Git: تم الآن تبسيط تجربة المستخدم لمساعدة المستخدمين في الاسترداد من أخطاء المصادقة عند فتح مربع حوار مجلد Git. في مربع الحوار، يمكنك تحديث بيانات اعتماد Git مباشرة، ما يؤدي إلى إعادة المحاولة التلقائية. يمكنك استخدام هذا الأسلوب للمساعدة في حل أخطاء المصادقة.
  • عند حدوث خطأ مصادقة، يعرض مربع حوار مجلد Git الآن موفر مجلد Git وعنوان URL في الخطأ. في السابق كان هذا مخفيا، مما يجعل من الصعب معرفة بيانات اعتماد Git التي يجب استخدامها لحل الخطأ.
• مشاركة مجلد Git: يمكن للمستخدمين الآن مشاركة ارتباط URL لمستخدمي مساحة العمل الآخرين. عند فتح عنوان URL في مستعرض المستلم، يفتح Databricks مربع حوار إضافة مجلد Git الموجود ويشغله بقيم مملوءة مسبقا (مثل موفر Git وعنوان URL لمستودع Git). هذا يبسط استنساخ مجلد Git لمستودعات Git شائعة الاستخدام بين مستخدمي مساحة العمل الخاصة بك. راجع أفضل الممارسات: التعاون في مجلدات Git لمزيد من التفاصيل.
  • تتم مطالبة المستخدمين الآن بإنشاء مجلدات Git الخاصة بهم في مساحة العمل الخاصة بهم بدلا من العمل بشكل تعاوني في مجلد Git الخاص بمستخدم آخر.
  • يتم الآن الاحتفاظ بحالة مربع حوار مجلد Git في عنوان URL الخاص بك. إذا قمت بنسخ عنوان URL من المستعرض عند فتح مربع حوار مجلد Git، فيمكن فتحه لاحقا أو مشاركته مع مستخدم آخر وسيتم عرض نفس المعلومات.
• طريقة عرض Git folder diff: في طريقة عرض Diff لمجلد Git، تمت إضافة تمييز أحمر وأخضر أدكن للنص المستبدل ولأسطر متعددة من التغييرات، مما يسهل تحديد ما تم تغييره عبر التغييرات غير الملتزم بها.
  • يؤدي فتح مربع حوار مجلد Git من دفتر ملاحظات أو محرر ملفات إلى تحديد دفتر الملاحظات أو الملف هذا في مربع حوار مجلد Git وعرض التغييرات (diffs) بشكل افتراضي.

مهلة تثبيت مكتبة نظام المجموعة

29 يوليو 2024

تثبيت المكتبة على المجموعات لديه الآن مهلة 2 ساعة. سيتم وضع علامة على المكتبة التي استغرق تثبيتها أكثر من ساعتين على أنها فاشلة. للحصول على معلومات حول مكتبات نظام المجموعة، راجع مكتبات نظام المجموعة.

يجب إضافة عناوين IP الصادرة لمستوى الحساب إلى قائمة السماح ب IP لمساحة العمل

29 يوليو 2024

عند تكوين اتصال نظام المجموعة الآمن وقوائم الوصول إلى IP على مساحة عمل جديدة، يجب عليك إضافة إلى قائمة السماح كافة عناوين IP العامة التي تستخدمها وحدة الحوسبة للوصول إلى مستوى التحكم إلى قائمة السماح أو تكوين ارتباط خاص خلفي. سيؤثر هذا التغيير على جميع مساحات العمل الجديدة في 29 يوليو 2024 ومساحات العمل الموجودة في 26 أغسطس 2024. لمزيد من المعلومات، راجع منشور مجتمع Databricks.

على سبيل المثال، إذا قمت بتمكين اتصال نظام المجموعة الآمن على مساحة عمل تستخدم حقن الشبكة الظاهرية، فإن Databricks توصي بأن مساحة العمل الخاصة بك تحتوي على IP عام خروج ثابت. يجب تضمين عنوان IP العام وأي عناوين أخرى في قائمة السماح. راجع Egress IP addresses عند استخدام اتصال نظام المجموعة الآمن. بدلا من ذلك، إذا كنت تستخدم شبكة ظاهرية مدارة بواسطة Azure Databricks وقمت بتكوين بوابة NAT المدارة للوصول إلى عناوين IP العامة، يجب أن تكون عناوين IP هذه في قائمة السماح.

راجع تكوين قوائم الوصول إلى IP لمساحات العمل.

تمديد دعم سلسلة Databricks Runtime 9.1

26 يوليو 2024

تم تمديد دعم Databricks Runtime 9.1 LTS وDatabricks Runtime 9.1 LTS التعلم الآلي من 23 سبتمبر 2024 إلى 19 ديسمبر 2024.

يتم دعم تسجيل الدخول الأحادي (SSO) في Lakehouse Federation ل SQL Server

25 يوليو 2024

يسمح لك كتالوج Unity الآن بإنشاء اتصالات SQL Server باستخدام مصادقة SSO. راجع تشغيل الاستعلامات الموحدة على Microsoft SQL Server.

تتوفر الآن مشاركة النماذج باستخدام "مشاركة دلتا" بشكل عام

26 يوليو 2024

دعم مشاركة دلتا لمشاركة نموذج الذكاء الاصطناعي هو الآن GA. يجب تمكين مساحات عمل الموفر والمستلم كتالوج Unity، ويجب تسجيل النماذج في كتالوج Unity.

راجع إضافة نماذج إلى مشاركة.

مشاركة التعليقات وقيود المفتاح الأساسي باستخدام Delta Sharing

25 يوليو 2024

تدعم Delta Sharing الآن مشاركة بيانات تعريف الكائن، بما في ذلك التعليقات وقيود المفتاح الأساسي:

• تم تضمين تعليقات النموذج وتعليقات إصدار النموذج في مشاركات Databricks إلى Databricks لبعض الوقت، ولكن لم يتم الإعلان عنها.

• يتم الآن تضمين تعليقات الجدول وتعليقات الأعمدة وقيود المفتاح الأساسي وتعليقات وحدة التخزين في مشاركات Databricks-to-Databricks التي تمت مشاركتها مع المستلم في 25 يوليو 2024 أو بعد ذلك.

  إذا كنت تريد تضمين تعليقات أو قيود في مشاركة تمت مشاركتها مع مستلم قبل ذلك التاريخ، فيجب عليك إبطال حق وصول المستلم وإعادة منحه لتشغيل مشاركة التعليقات والقيود.

راجع إنشاء مشاركات وإدارتها لمشاركة دلتا.

برنامج تشغيل Databricks JDBC الجديد (OSS)

25 يوليو 2024

تم إصدار برنامج تشغيل Databricks JDBC جديد مفتوح المصدر للمعاينة العامة. قام برنامج التشغيل هذا بتنفيذ واجهات برمجة تطبيقات JDBC ويوفر وظائف أساسية أخرى بما في ذلك OAuth وجلب السحابة وميزات مثل استيعاب وحدة تخزين كتالوج Unity. لمزيد من المعلومات، راجع برنامج تشغيل Databricks JDBC (OSS).

Databricks Runtime 15.4 LTS (Beta)

23 يوليو 2024

Databricks Runtime 15.4 LTS وDatabricks Runtime 15.4 LTS ML متاحان الآن كإصدارات بيتا.

راجع Databricks Runtime 15.4 LTS وDatabricks Runtime 15.4 LTS for التعلم الآلي.

Scala هو GA على الحوسبة المشتركة في كتالوج Unity

23 يوليو 2024

في Databricks Runtime 15.4 LTS والإصدارات الأحدث، يتوفر Scala بشكل عام على الحوسبة الممكنة لكتالوج Unity لوضع الوصول المشترك، بما في ذلك دعم الوظائف العددية المعرفة من قبل المستخدم (UDFs). الدفق المنظم، وHive UDFs، والوظائف التجميعية المعرفة من قبل مستخدم Apache Hive غير مدعومة. للحصول على قائمة كاملة بالقيود، راجع حساب قيود وضع الوصول لكتالوج Unity.

يدعم حساب المستخدم الفردي التحكم الدقيق في الوصول وطرق العرض المجسدة وجداول الدفق

23 يوليو 2024

يقدم Databricks Runtime 15.4 LTS دعما للتحكم في الوصول الدقيق على حساب مستخدم واحد، طالما تم تمكين مساحة العمل للحساب بلا خادم. عندما يصل استعلام إلى أي مما يلي، يمرر مورد حساب المستخدم الفردي على Databricks Runtime 15.4 LTS الاستعلام إلى حساب بلا خادم لتشغيل تصفية البيانات:

• طرق العرض المضمنة على الجداول التي لا يتمتع المستخدم بالامتياز عليها SELECT
• طرق العرض الديناميكية
• الجداول التي تم تطبيق عوامل تصفية الصفوف أو أقنعة الأعمدة عليها
• طرق العرض المجسدة وجداول الدفق

هذه الاستعلامات غير مدعومة على حساب مستخدم واحد يعمل على Databricks Runtime 15.3 وما دونه.

لمزيد من المعلومات، راجع التحكم في الوصول الدقيق على حساب مستخدم واحد.

جدول نظام المخطط الزمني للعقدة متوفر الآن (معاينة عامة)

23 يوليو 2024

system.compute يتضمن المخطط الآن جدولاnode_timeline. يسجل هذا الجدول مقاييس الاستخدام دقيقة تلو دقيقة لموارد حساب المهام والأغراض كافة التي يتم تشغيلها في حسابك. راجع مخطط جدول المخطط الزمني للعقدة.

Meta Llama 3.1 مدعوم الآن في خدمة النموذج

23 يوليو 2024

وقد اشتركت خدمة موزاييك الذكاء الاصطناعي Model Serving مع Meta لدعم Meta Llama 3.1، وهي بنية نموذجية تم إنشاؤها وتدريبها بواسطة Meta، ويتم توزيعها بواسطة Azure التعلم الآلي باستخدام كتالوج نموذج AzureML. يتم دعم Llama 3.1 كجزء من واجهات برمجة تطبيقات نموذج المؤسسة. راجع استخدام واجهات برمجة التطبيقات لنموذج الأساس.

• يتوفر Meta-Llama-3.1-405B-Instruct و Meta-Llama-3.1-70B-Instruct في مناطق نقطة نهاية خدمة الدفع لكل رمز مميز.
• يتوفر استخدام إنتاج المجموعة الكاملة من نماذج Llama 3.1 (8B و70B و405B) في الولايات المتحدة باستخدام معدل النقل المقدم.

بدءا من 23 يوليو 2024، يحل Meta-Llama-3.1-70B-Instruct محل دعم Meta-Llama-3-70B-Instruct في واجهات برمجة تطبيقات نموذج الأساس التي تدفع لكل نقطة نهاية للرمز المميز.

دفاتر الملاحظات: تبديل المزيد من عناوين الخلايا المرئية

18 يوليو 2024

يمكن للمستخدمين تمكين إظهار عناوين الخلايا التي تمت ترقيتها في إعدادات المطور لجعل عناوين خلايا دفتر الملاحظات أكثر وضوحا في واجهة المستخدم. راجع عناوين الخلايا التي تمت ترقيتها

/ في مساحة العمل يتم إهمال أسماء الأصول

17 يوليو 2024

لتجنب الغموض في سلاسل المسار، تم إهمال استخدام '/' في أسماء أصول مساحة العمل الجديدة (مثل دفاتر الملاحظات والمجلدات والاستعلامات). لا تتأثر الأصول الموجودة التي تحمل "/" في أسمائها، ولكن إعادة تسمية الأصول الحالية تتبع نفس القواعد التي تتبعها الأصول الجديدة.

تتيح لك "مشاركة دلتا" مشاركة الجداول التي تستخدم التجميع السائل

16 يوليو 2024

تتيح لك "مشاركة دلتا" الآن مشاركة الجداول التي تم تمكينها للتكتتل السائل، ويمكن للمستلمين تشغيل استعلامات الدفعات مقابلها. يعمل تكوين أنظمة المجموعات السائلة على تبسيط قرارات تخطيط البيانات وتحسين أداء الاستعلام. راجع استخدام التجميع السائل لجداول Delta ومصفوفة دعم ميزة Delta Lake.

جدول نظام محفوظات الاستعلام متوفر الآن (معاينة عامة)

16 يوليو 2024

تتضمن جداول نظام Azure Databricks الآن جدول محفوظات استعلام. يسجل هذا الجدول سجلات مفصلة لكل استعلام يتم تشغيله على مستودع SQL في حسابك. للوصول إلى الجدول، يجب على المسؤولين تمكين مخطط النظام الجديد query . راجع مرجع جدول نظام محفوظات الاستعلام.

يتم الآن إرسال تقارير فحص الثغرات الأمنية عبر البريد الإلكتروني إلى المسؤولين

16 يوليو 2024

يتم الآن إرسال تقارير فحص الثغرات الأمنية عبر البريد الإلكتروني إلى مسؤولي مساحة العمل في مساحات العمل التي تمكن مراقبة الأمان المحسنة. في السابق، كان على مسؤولي مساحة العمل طلبها من Azure Databricks. راجع مراقبة الأمان المحسنة.

تسجيل بيانات تعريف القسم للجداول الخارجية ل Unity Catalog

15 يوليو 2024

في Databricks Runtime 13.3 LTS والإصدارات الأحدث، يمكنك اختياريا تمكين تسجيل بيانات تعريف القسم للجداول الخارجية المسجلة في كتالوج Unity التي تستخدم Parquet أو ORC أو CSV أو JSON. تسجيل بيانات metatdata للقسم هو استراتيجية اكتشاف قسم متسقة مع Hive metastore . راجع اكتشاف القسم للجداول الخارجية.

الحوسبة بلا خادم لسير العمل هي GA

15 يوليو 2024

الحوسبة بلا خادم لسير العمل متاحة الآن بشكل عام. يسمح لك الحساب بلا خادم لسير العمل بتشغيل وظيفة Azure Databricks دون تكوين البنية الأساسية ونشرها. باستخدام الحوسبة بلا خادم لسير العمل، تدير Azure Databricks موارد الحوسبة التي تشغل وظيفتك بكفاءة، بما في ذلك تحسين الحساب وتحجيمه لأحمال العمل الخاصة بك. راجع تشغيل وظيفة Azure Databricks باستخدام حساب بلا خادم لسير العمل.

الحوسبة بلا خادم لدفاتر الملاحظات هي GA

15 يوليو 2024

تتوفر الآن الحوسبة بلا خادم لدفاتر الملاحظات بشكل عام. يمنحك الحساب بلا خادم لدفاتر الملاحظات إمكانية الوصول عند الطلب إلى الحوسبة القابلة للتطوير في دفاتر الملاحظات، مما يتيح لك كتابة وتشغيل التعليمات البرمجية ل Python أو SQL على الفور. راجع الحوسبة بلا خادم لدفاتر الملاحظات.

يدعم Databricks Connect ل Python الآن الحوسبة بلا خادم

15 يوليو 2024

يدعم Databricks Connect ل Python الآن الاتصال بالحوسبة بلا خادم. تتوفر هذه الميزة في المعاينة العامة. راجع تكوين اتصال بالحوسبة بلا خادم.

تصفية مخرجات البيانات باستخدام مطالبات اللغة الطبيعية

11 يوليو 2024

يمكنك الآن استخدام مساعد Databricks لتصفية مخرجات البيانات باستخدام مطالبات اللغة الطبيعية. على سبيل المثال، لتصفية جدول بيانات الناجين من تيتانيك، يمكنك كتابة "إظهار الذكور الذين تزيد أعمارهم عن 70 سنة فقط". راجع تصفية البيانات باستخدام مطالبات اللغة الطبيعية.

دعم البيانات السرية للنص العادي للنماذج الخارجية

11 يوليو 2024

يمكنك الآن إدخال مفاتيح API مباشرة كسلاسل نص عادي لنماذج نقاط نهاية خدمة تستضيف نماذج خارجية. راجع تكوين الموفر لنقطة نهاية.

التنبؤ ببيانات السلاسل الزمنية باستخدام ai_forecast()

11 يوليو 2024

تدعم ai_forecast()الذكاء الاصطناعي Functions الآن ، وظيفة Databricks SQL جديدة للمحللين وعلماء البيانات المصممة لاستقراء بيانات السلاسل الزمنية في المستقبل. راجع الدالة ai_forecast.

دعم مهمة ملف SQL للملفات ذات استعلامات SQL متعددة العبارات هو GA

10 يوليو 2024

يتوفر الآن بشكل عام دعم استخدام الملفات التي تحتوي على استعلامات SQL متعددة العبارات مع مهمة ملف SQL. يسمح لك هذا التغيير بتشغيل عبارات SQL متعددة من ملف واحد. في السابق، كنت بحاجة إلى إضافة ملف منفصل لكل عبارة. لمعرفة المزيد حول مهمة ملف SQL، راجع مهمة SQL للمهام.

يدعم Lakehouse Federation Salesforce Data Cloud (معاينة عامة)

10 يوليو 2024

يمكنك الآن تشغيل الاستعلامات الموحدة على البيانات التي تديرها Salesforce Data Cloud. راجع تشغيل الاستعلامات الموحدة على Salesforce Data Cloud.

جدول نظام مساعد Databricks متوفر الآن (معاينة عامة)

10 يوليو 2024

يتم الآن تسجيل أحداث مساعد Databricks في جدول نظام موجود في system.access.assistant_events. راجع مرجع جدول نظام مساعد Databricks ومثاله.

حساب SCIM API v2.1 (معاينة عامة)

10 يوليو 2024

يتم تحديث واجهات برمجة تطبيقات SCIM للحساب من الإصدار 2.0 إلى v2.1 للسرعة والموثوقية. يمكنك تنزيل ملف PDF لمرجع واجهة برمجة تطبيقات حساب SCIM v2.1.

زيادة الحصة النسبية للموارد للجداول لكل مخزن بيانات تعريف كتالوج Unity

3 يوليو 2024

يمكن الآن لمخزن بيانات تعريف كتالوج Unity تسجيل ما يصل إلى مليون جدول. راجع حصص الموارد النسبية.

يمكن لمساعد Databricks تشخيص أخطاء دفتر الملاحظات تلقائيا

2 يوليو 2024

يمكن الآن تشغيل /fix مساعد Databricks في دفاتر الملاحظات تلقائيا عندما يكتشف رسالة خطأ. يستخدم المساعد الذكاء الاصطناعي التوليدية لتحليل التعليمات البرمجية ورسالة الخطأ لاقتراح إصلاح مباشرة في دفتر الملاحظات. لمزيد من المعلومات، راجع تصحيح التعليمات البرمجية: أمثلة Python وSQL.

دعم بناء الجملة :param مع مهمة ملف SQL هو GA

1 يوليو 2024

يتوفر دعم استخدام بناء الجملة :param مع الاستعلامات ذات المعلمات في مهمة Azure Databricks Jobs SQL File بشكل عام. يمكنك الآن الرجوع إلى معلمات الاستعلام عن طريق بادئة أسمائها ب علامة النقطتين (:parameter_name). هذا بناء الجملة بالإضافة إلى الدعم الموجود لبناء جملة الأقواس المتعرجة المزدوجة ({{parameter_name}}). لمعرفة المزيد حول استخدام الاستعلامات ذات المعلمات مع مهمة ملف SQL، راجع تكوين معلمات المهمة.