以下文章提供了 Azure Databricks 中数据工程的最佳做法。
- 优化 Azure Databricks 中的联接性能
- 数据建模
- 在 Azure Databricks 上配置 RocksDB 状态存储
- 有状态查询的异步状态检查点
- 异步进度跟踪
- 结构化流式处理的生产注意事项
- 在同一群集上运行多个结构化流式处理查询
- 使用批处理或流处理清理和验证数据
- Azure Databricks 中作业、Lakeflow 管道和 Lakeflow Connect 的可观测性
- Lakeflow 管道中的扇入和扇出架构
- Lakeflow 管道最佳实践
有关其他最佳做法文章(包括 开发人员和 CI/CD 工作流最佳做法)的链接,请参阅 最佳做法。