使用 Databricks 進行數據工程
Databricks 提供一組豐富的數據工程功能,包括強大的環境,可供數據科學家、工程師和分析師共同作業。 透過其中心是 內嵌 和 轉換 數據的管線。 為了輕鬆設計最有效率的管線,Databricks 提供結構化串流和 DLT。 請參閱 在 Azure Databricks 上串流、 和 什麼是 DLT?。
如需結構化串流和 DLT 所提供數據的增量串流處理為何是數據管線的最佳選項的概觀,請參閱 如何建置簡單、有效率且低延遲的數據管線。
其他數據工程資源
Databricks 為許多其他案例的數據工程工作提供功能:
- Databricks 筆記本 是共同作業的熱門工具。
- 使用 Databricks 作業排程和組織您的工作流程。
- 如果您要建構機器學習解決方案,請參閱 Databricks 馬賽克 AI。
注意
如果您主要使用 SQL 查詢和 BI 工具,請參閱 Databricks SQL。
如需入門教學課程和入門資訊,請參閱 開始使用 Azure Databricks 和 什麼是 Azure Databricks?。
名字 | 使用此功能時,當您希望… |
---|---|
DLT | 瞭解如何使用 Databricks DLT 建置數據管線來擷取和轉換。 |
結構化串流 | 了解如何在 Databricks 上使用結構化串流來處理串流、增量和即時的工作負載。 |