我们很兴奋地宣布，由瑞奇的DataSpark运行时支持™. 版本4.2包括更新的Spark内部结构、新特性和对Databricks Delta的主要性能升级，以及对平台的总体质量改进。我们正在迅速向Databricks Delta通用可用性（GA）版本迈进，我们建议您升级到Databricks运行时4.2，以利用这些改进。我想花点时间来强调一下团队为持续改进Databricks Delta所做的一些工作：直接流式传输到增量表：现在可以使用df.writeStream.table(…).Delta命令的路径一致性：所有Databricks Delta命令和查询现在都支持使用表的路径作为标识符（即Delta.`/Path/to/table`）引用表。以前的优化和真空需要非标准使用字符串文字（即，"/path/to/table"）。我们还为结构化流媒体提供了强大的新功能：强大的流媒体管道触发器。一次：现在在Databricks Delta中受支持。指定为源选项或默认值的速率限制（例如maxOffsetsPerTrigger或maxFilesPerTrigger）可能会导致部分执行可用数据。当触发器。一次，允许处理所有当前可用的数据。文件可从以下网址获得：触发器。一次在Databricks Runtime 4.2发行说明中。使用foreachBatch（）灵活的流媒体接收到许多存储选项：现在可以定义一个函数，使用Scala中的DataFrame操作处理每个微批次的输出。文档位于：foreachBatch（）。这有助于提高灵活性，但最重要的是，foreachBatch（）可以让您写入一系列存储选项，即使它们不支持流媒体作为接收器。还添加了对Python中streaming foreach（）的支持。文档位于：foreach（）。我们包括对支持表访问控制的集群的sqldeny命令的支持。用户现在可以用授予权限的相同方式拒绝特定权限。被拒绝的许可将取代被授予的许可。详细的技术文档可在以下位置获得：sqldeny。要阅读有关以上新功能的更多信息，并查看Databricks Runtime 4.2中包含的改进的完整列表，请参阅以下位置的发行说明：Amazon Web Services:Databricks Runtime 4.2发行说明Azure:：Databricks Runtime 4.2发行说明免费试用Databricks。今天就开始吧