Databricks Runtime 11.x 迁移指南

本指南可帮助你将 Azure Databricks 工作负载迁移到 Databricks Runtime 11.x 的最新版本。 若要执行此操作,Databricks 建议你按以下顺序迁移工作负载:

  • 如果工作负载当前在 Databricks Runtime 10.4 LTS 或更高版本上运行,则可以直接迁移到最新版本的 Databricks Runtime 11.x,如本文后面所述。
  • 如果工作负载当前在 Databricks Runtime 9.1 LTS 上运行,请执行以下操作:
    1. 首先迁移到 Databricks Runtime 10.4 LTS。 请参阅 Databricks Runtime 10.x 迁移指南
    2. 按照本文中的指导从 Databricks Runtime 10.4 LTS 迁移到最新版本的 Databricks Runtime 11.x。

注意

LTS 表示此版本受长期支持。 请参阅 Databricks Runtime LTS 版本生命周期

Apache Spark 迁移指南

Databricks Runtime 的最新版本是 13.2,由 Apache Spark 3.4.0 提供支持。 有关 Spark 特定的迁移信息,请按 Databricks Runtime 版本单击以下一个或多个链接以查看相应的 Apache Spark 迁移指南。 Databricks Runtime 10.4 LTS 由 Apache Spark 3.2.1 提供支持,特此说明。

Databricks Runtime 版本 Apache Spark 版本
11.0 - 11.3 3.3.0
10.4 LTS - 10.5 3.2.1

Databricks Runtime 行为变更

以下值得注意的行为变更已引入到以下每个 DBR 11.x 版本中。

Databricks Runtime 系统环境属性、功能和库

有关从 Databricks Runtime 10.4 LTS 到最新版本 Databricks Runtime 11.x 的 Databricks Runtime 版本中的系统环境属性以及新增、更改和弃用的功能和库的信息,请参阅以下内容:

Databricks Runtime 维护更新中列出了发布后维护更新。