مرجع جداول النظام للحساب

توفر لك هذه المقالة دليلا مرجعيا لجداول نظام الحوسبة. يمكنك استخدام هذه الجداول لمراقبة نشاط ومقاييس حساب جميع الأغراض والمهام في حسابك:

• clusters: يسجل تكوينات الحساب في حسابك.
• node_types: يتضمن سجلا واحدا لكل نوع من أنواع العقد المتوفرة حاليا، بما في ذلك معلومات الأجهزة.
• node_timeline: يتضمن سجلات دقيقة تلو دقيقة لمقاييس استخدام الحساب الخاص بك.

مخطط جدول نظام المجموعة

جدول نظام المجموعة هو جدول أبعاد متغير ببطء يحتوي على التاريخ الكامل لتكوينات الحوسبة بمرور الوقت لحساب جميع الأغراض والمهام.

مسار الجدول: يوجد جدول النظام هذا في system.compute.clusters

مخطط جدول أنواع العقد

يلتقط جدول نوع العقدة أنواع العقد المتوفرة حاليا بمعلومات الأجهزة الأساسية الخاصة بها.

مسار الجدول: يقع جدول النظام هذا في system.compute.node_types.

مخطط جدول المخطط الزمني للعقدة

يلتقط جدول المخطط الزمني للعقدة بيانات استخدام الموارد على مستوى العقدة بنقاوة الدقيقة. يحتوي كل سجل على بيانات لدقيقة معينة من الوقت لكل مثيل.

مسار الجدول: يقع جدول النظام هذا في system.compute.node_timeline.

القيود المعروفة

• لا تظهر موارد الحوسبة التي تم وضع علامة عليها محذوفة قبل 23 أكتوبر 2023 في جدول المجموعات. قد يؤدي ذلك إلى عدم تطابق الصلات من system.billing.usage الجدول مع السجلات في جدول المجموعات. تمت إعادة تعبئة كافة موارد الحساب النشطة.
• تتضمن هذه الجداول سجلات لجميع الأغراض وحساب الوظائف فقط. لا تحتوي على سجلات للحساب بلا خادم أو حساب Delta Live Tables أو مستودعات SQL.
• قد لا تظهر العقد التي تم تشغيلها لمدة أقل من 10 دقائق في node_timeline الجدول.

نماذج الاستعلامات

يمكنك استخدام نماذج الاستعلامات التالية للإجابة عن الأسئلة الشائعة:

• ربط سجلات نظام المجموعة بأحدث سجلات الفوترة
• سمات التكاليف إلى مالك نظام المجموعة
• تحديد موارد الحوسبة ذات أعلى متوسط استخدام وأقصى استخدام

ربط سجلات نظام المجموعة بأحدث سجلات الفوترة

يمكن أن يساعدك هذا الاستعلام على فهم الإنفاق بمرور الوقت. بمجرد تحديث usage_start_time إلى أحدث فترة فوترة، فإنه يستحوذ على آخر التحديثات لسجلات الفوترة للانضمام إلى بيانات المجموعات.

يقترن كل سجل مع مالك نظام المجموعة أثناء هذا التشغيل المحدد. لذلك، إذا تغير مالك نظام المجموعة، فستطرح التكاليف إلى المالك الصحيح استنادا إلى وقت استخدام نظام المجموعة.

SELECT
  u.record_id,
  c.cluster_id,
  c.owned_by,
  c.change_time,
  u.usage_start_time,
  u.usage_quantity
FROM
  system.billing.usage u
  JOIN system.compute.clusters c
  JOIN (SELECT u.record_id, c.cluster_id, max(c.change_time) change_time
    FROM system.billing.usage u
    JOIN system.compute.clusters c
    WHERE
      u.usage_metadata.cluster_id is not null
      and u.usage_start_time >= '2023-01-01'
      and u.usage_metadata.cluster_id = c.cluster_id
      and date_trunc('HOUR', c.change_time) <= date_trunc('HOUR', u.usage_start_time)
    GROUP BY all) config
WHERE
  u.usage_metadata.cluster_id is not null
  and u.usage_start_time >= '2023-01-01'
  and u.usage_metadata.cluster_id = c.cluster_id
  and u.record_id = config.record_id
  and c.cluster_id = config.cluster_id
  and c.change_time = config.change_time
ORDER BY cluster_id, usage_start_time desc;

سمات التكاليف إلى مالك نظام المجموعة

إذا كنت تبحث عن تقليل تكاليف الحوسبة، يمكنك استخدام هذا الاستعلام لمعرفة مالكي نظام المجموعة في حسابك الذين يستخدمون معظم وحدات DBUs.

SELECT
  u.record_id record_id,
  c.cluster_id cluster_id,
  max_by(c.owned_by, c.change_time) owned_by,
  max(c.change_time) change_time,
  any_value(u.usage_start_time) usage_start_time,
  any_value(u.usage_quantity) usage_quantity
FROM
  system.billing.usage u
  JOIN system.compute.clusters c
WHERE
  u.usage_metadata.cluster_id is not null
  and u.usage_start_time >= '2023-01-01'
  and u.usage_metadata.cluster_id = c.cluster_id
  and c.change_time <= u.usage_start_time
GROUP BY 1, 2
ORDER BY cluster_id, usage_start_time desc;

تحديد موارد الحوسبة ذات أعلى متوسط استخدام وأقصى استخدام

تحديد حساب جميع الأغراض والوظائف التي لديها أعلى متوسط لاستخدام وحدة المعالجة المركزية وأعلى ذروة استخدام وحدة المعالجة المركزية.

SELECT
        distinct cluster_id,
driver,
avg(cpu_user_percent + cpu_system_percent) as `Avg CPU Utilization`,
max(cpu_user_percent + cpu_system_percent) as `Peak CPU Utilization`,
        avg(cpu_wait_percent) as `Avg CPU Wait`,
        max(cpu_wait_percent) as `Max CPU Wait`,
        avg(mem_used_percent) as `Avg Memory Utilization`,
        max(mem_used_percent) as `Max Memory Utilization`,
avg(network_received_bytes)/(1024^2) as `Avg Network MB Received per Minute`,
avg(network_sent_bytes)/(1024^2) as `Avg Network MB Sent per Minute`
FROM
        node_timeline
WHERE
        start_time >= date_add(now(), -1)
GROUP BY
        cluster_id,
        driver
ORDER BY
        3 desc;