这些功能和Azure Databricks平台改进于 2022 年 6 月发布。
注意
发布分阶段进行。 在初始发布日期后的一周或更晚之前,你的Azure Databricks帐户可能不会更新。
ALTER TABLE Unity Catalog 的权限更改
2022 年 6 月 30 日
在 Unity Catalog 中,已更新运行 ALTER TABLE 语句所需的特权。 以前,需要表的 OWNERSHIP 来运行所有 ALTER TABLE 语句。 现在,只有更改所有者、授予对表的权限、更改表名和修改视图定义才需要对表具有 OWNERSHIP。 对于表的所有其他元数据操作(例如更新注释、属性或列),如果对表具有 MODIFY 权限,则可以进行更新。
请参阅 ALTER TABLE 和 ALTER TABLE。
Databricks Runtime 6.4 扩展支持停止支持
2022 年 6 月 30 日
对 Databricks Runtime 6.4 外延支持的支持于 6 月 30 日终止。 请参阅 Databricks 支持生命周期。
对 Databricks Runtime 10.2 系列的支持已终止
2022 年 6 月 22 日
对 Databricks Runtime 10.2 和 Databricks Runtime 10.2 for Machine Learning 的支持已于 6 月 22 日结束。 请参阅 Databricks 支持生命周期。
Databricks ODBC 驱动程序 2.6.24
2022 年 6 月 22 日
已发布 Databricks ODBC 驱动程序版本 2.6.24(下载)。 此版本添加了对配置 CTAS 语法的查询转换的支持,允许用户替代连接器中的 SQL_ATTR_QUERY_TIMEOUT,并更新 OpenSSL 库。
此版本还解决了以下问题:
- 连接器不允许使用没有 CRL 分发点 (CDP) 条目的服务器证书和中间证书。
- 使用代理时,连接器设置的用于 SSL 服务器名称指示 (SNI) 的主机名不正确。
Databricks Terraform 提供程序现已正式发布
2022 年 6 月 22 日
Databricks Terraform 提供程序现已正式发布。
使用 Terraform 可以通过 Terraform 现有的基础结构即代码 (IaC) 流程完全自动执行数据平台的部署。
可以使用 Databricks Terraform 提供程序在Azure Databricks工作区(例如群集和作业)中定义资产,并通过用户、组和服务主体的权限强制实施访问控制。
Databricks Terraform 供应商提供了完整的部署审计跟踪。 你可以以 Databricks Terraform 提供程序为基础,实现灾难恢复和业务连续性策略。
Databricks Terraform 提供程序还支持 Unity 目录(预览版),可轻松、大规模地部署这一关键治理功能。
Databricks Runtime 11.0 和 11.0 ML 均已推出正式版;11.0 Photon 目前为公共预览版
2022 年 6 月 16 日
Databricks Runtime 11.0 和 Databricks Runtime 11.0 ML 现已正式发布。 Databricks Runtime 11.0 Photon 目前为公共预览版。
请参阅 Databricks Runtime 11.0 (EoS) 和 Databricks Runtime 11.0 for Machine Learning (EoS)。
更改为 Databricks Runtime 11.0 中的Repos默认工作目录
2022 年 6 月 16 日
存储库中笔记本的 Python 工作目录默认设置为包含笔记本的目录。 例如,默认工作目录为 /databricks/driver,而不是 /Workspace/Repos/<user>/<repo>/<path-to-notebook>。 这允许在 Databricks Runtime 11.0 群集上默认启用从 Repos 中的文件导入和读取。
这也意味着写入当前工作目录失败并显示 Read-only filesystem 错误消息。 如果要继续写入群集的本地文件系统,请写入 /tmp/<filename> 或 /databricks/driver/<filename>。
对 Databricks Runtime 10.1 系列的支持已终止
2022 年 6 月 14 日
对 Databricks Runtime 10.1 和 Databricks Runtime 10.1 for Machine Learning 的支持已于 6 月 14 日结束。 请参阅 Databricks 支持生命周期。
DLT 现在支持 SCD 类型 2
2022 年 6 月 13 日 - 21 日:版本 3.74
DLT 管道现在可以使用 SCD 类型 2 捕获源数据更改,并保留记录更新的完整历史记录。 这增强了对 SCD 类型 1 的现有 DLT 支持。 请参阅 AUTO CDC API:使用管道简化变更数据捕获。
直接在 Azure Databricks UI 中创建 DLT 管道
2022 年 6 月 13 日 - 21 日:版本 3.74
现在可以从 Azure Databricks UI 边栏上的 Create 菜单创建 DLT 管道。
创建或编辑管道时选择 DLT 通道
2022 年 6 月 13 日 - 21 日:版本 3.74
现在,可以使用 “创建管道 ”和 “编辑管道设置 ”对话框为 DLT 管道配置通道。 以前,配置通道需要编辑管道的 JSON 配置中的设置。
使用任务值在Azure Databricks作业中的任务之间进行通信
2022 年 6 月 13 日
现在,您可以使用 任务值 在 Azure Databricks 作业中的任务之间传递数值。 例如,可以使用任务值将机器学习模型的输出传递到同一作业运行中的下游任务。 请参阅 taskValues 子实用工具 (dbutils.jobs.taskValues)。
在 Databricks UI 中启用帐户切换
2022 年 6 月 8 日
如果用户属于多个帐户,他们现在可以在 Databricks UI 中的帐户之间切换。 若要使用帐户切换器,请单击 Databricks UI 顶部的电子邮件地址,然后将鼠标悬停在“切换帐户”上。 然后选择要导航到的帐户。