Databricks Lakeflow Designer 新增数据质量防护机制与无代码操作器

Databricks 宣布了 Lakeflow Designer 的 10 月增强功能,包括数据质量检查防护机制(可控制检查失败后的行为)、用于数据清洗和去重的无代码操作器、在单个操作器中实现多表连接、参数化输入与输出,以及用于审查工作流变更的可视化版本历史。
事件版本 1.
Key insights
数据质量防护机制
Lakeflow Designer 新增了数据质量检查防护机制,可控制检查失败后的行为。
无代码清洗与去重
此次更新引入了用于数据清洗和去重的无代码操作器。
单操作器多表连接
现在可以在单个操作器中执行多表连接。
参数化输入与输出
工作流支持参数化输入与输出。
可视化版本历史
可视化版本历史让用户可以轻松审查工作流变更。