What's New in Lakeflow Designer - October 2026 Roundup

Lakeflow Designer 新功能速览 - 2026 年 10 月 | Databricks 博客

跳至主要内容

公告

2026 年 10 月 13 日

Lakeflow Designer 新功能速览 - 2026 年 10 月

了解今年秋季将为您工作区带来创新的 Lakeflow Designer 最新功能

作者：Jason Messer、Emanuel Zgraggen、V Maharajh、Kyrylo Bakumenko、Xiao Yan 和 Matt Jones

摘要

• 新增和增强的操作符支持数据清洗、去重、质量检查、更灵活的连接以及参数化输入和输出。
• 扩展的输出选项和画布改进新增了物化视图、表合并、文件导出、可视化版本历史记录和实时光标位置。
• 即将推出的功能包括 Databricks Apps 集成、完整输出的数据分析、自定义报告操作符以及与 Lakebridge 的原生迁移工具。

我们在 2026 年 6 月将 Lakeflow Designer 推出至一般可用性阶段，自那时以来，已有超过 3,000 家客户使用它来解决数据工作中最大的瓶颈之一：进入的技术障碍。从传统自助式数据准备工具迁移的团队已简化了治理，简化了数据栈，加速了生产路径，并大幅降低了成本。凭借基于消耗的定价和无每用户许可费用，我们看到许多客户在采用 Lakeflow Designer 后将无代码工具的支出减少了 90%。

与这些客户的紧密合作帮助我们识别出让 Designer 更加实用的方法。我们最新的更新带来了新的无代码操作符、现有操作符的增强、更多的输出选项以及改进的画布，用于构建和管理更大型的工作流。

Lakeflow Designer 是直接构建在 Databricks 上的可视化、无代码、AI 原生体验，用于数据准备和分析。它允许分析师、领域专家和其他非技术人员通过拖放画布和自然语言准备和探索数据。

最新更新

以下是过去 4 个月我们在 Lakeflow Designer 中最喜欢的一些增强功能。

用于数据清洗和质量检查的新无代码操作符

Genie 代码、Python 和 SQL 操作符一直使 Designer 具有灵活性。然而，我们从早期客户那里了解到，他们希望有更多无代码方式来处理常见的任务，如去重、数据清洗和数据质量检查。

Prepare 操作符：清洗和标准化数据

使用 Prepare 操作符清洗和标准化数据。在单个操作符中更改文本大小写、转换数据类型、替换值、应用公式等。[了解更多关于 Prepare](#)

Unique 操作符：删除重复记录

快速删除整个数据集或选定列集中的重复项。设置顺序以控制保留的记录，例如每个客户的最新更新记录。[了解更多关于 Unique](#)

Guardrails 操作符：添加数据质量检查

通过 Guardrails 直接在工作流中添加数据质量检查。检查缺失值、重复值、意外值等，然后选择失败如何影响工作流：继续传递行、阻止通过输出或停止执行。[了解更多关于 Guardrails](#)

对现有 Join、Filter 和 Select 操作符的增强

我们扩展了现有操作符，以更好地处理高级用例和分支。

拆分和多连接

Join 操作符现在默认为匹配行、左未匹配行和右未匹配行分别提供独立输出，使您能够分支工作流并在出现意外值时触发警报。它还支持在单个操作符中连接多于两张表。了解更多关于 Join 的信息。

动态列选择

通过数据类型、名称模式或公式选择列，使工作流能够适应输入模式的变化。例如，保留所有以 sales_ 开头的列，包括之后新增的匹配列。了解更多关于 Select 的信息。

参数化输入和输出

源和输出操作符现在支持在配置中使用参数，使您无需重新配置操作符即可更改这些值。参数可以根据单个计划进行覆盖，例如测试和生产环境中的运行。了解更多关于参数的信息。

Filter 操作符中的分支

Filter 操作符现在为匹配条件的行和不匹配条件的行分别提供独立输出。使用这两个输出，可以从单个筛选器构建独立的处理路径。了解更多关于 Filter 的信息。

扩展的物化视图、表和文件输出

输出操作符现在为您提供了更多保存结果、更新现有数据以及为下游使用创建文件的方式。

创建物化视图

将结果作为 Unity Catalog 中的物化视图进行写入，以便在下游流程（如 AI/BI 仪表板或其他可视化数据准备文件）中快速计算。当可视化数据准备运行时，视图会自动刷新。了解更多关于物化视图输出的信息。

合并到现有表中

通过使用您指定的键合并结果，使现有表保持最新。匹配记录会被更新，新记录会被插入。您还可以将结果追加到现有表的末尾。了解更多关于表输出的信息。

直接写入文件

直接将 CSV、Excel 或 JSON 文件写入 Unity Catalog 卷。对于 Excel 输出，您还可以动态写入不同的工作表。了解更多关于文件输出的信息。

用于大型工作流导航和协作的画布改进

我们更新了画布，使大型工作流更易于导航、理解和维护。

通过视觉重新设计的画布导航大型工作流

画布采用全新设计，具有更高的视觉对比度、更大的连接目标以及更清晰的未配置操作符和缺失输入提示。我们还改进了包含数千个操作符的画布的滚动和缩放功能，使大型工作流的导航更加流畅。

通过可搜索的目录查找操作符

使用新的可搜索目录查找任何操作符，然后选择它跳转到画布上的位置。您还可以展开其生成的代码部分以检查底层代码。

通过视觉版本历史查看工作流更改

直接在画布上查看版本之间的差异。版本历史现在突出显示已添加、删除或修改的操作符，使工作流更改更易于审查。了解更多关于版本历史的信息。

通过实时光标存在跟踪协作者

实时光标存在功能使您能够在同一可视化数据准备文件中协作并跟踪同事的操作。

Lakeflow Designer 的下一步是什么？

我们正在持续投入，使 Lakeflow Designer 成为最优秀的自助式数据准备和自动化工具。以下是我们即将推出的几项令人兴奋的改进。

Databricks Apps 集成 我们正在将 Designer 与 Databricks Apps 进行集成，使作者能够通过简单的应用界面与非技术人员共享工作成果。用户将能够配置输入、运行工作流并查看结果，而无需查看底层工作流。

对完整输出进行数据剖析 我们正在扩展 Designer 现有的数据剖析功能，使您能够对操作符返回的所有数据运行剖析，并直接在输出表标题中查看结果。

使用报告操作符从多个输出创建自定义报告 新的报告操作符将允许您通过自定义图形（如公司标志）将多个输出的结果组合在一起。您可以直接将报告保存到工作区，或通过原生通知操作符通过电子邮件发送。

与 Lakebridge 集成的原生迁移工具 由 Databricks Lakebridge 提供支持的原生迁移工具将允许您批量将工作流从遗留的自助式数据准备工具直接迁移到 Lakeflow Designer。

关于 Lakeflow Designer 的常见问题

Lakeflow Designer 是否在 Databricks 免费版中可用？是的。在左侧导航栏中选择“Visual Data Prep”即可在免费版中开始使用。

Lakeflow Designer 的定价方式是什么？Lakeflow Designer 没有按用户计费或单独的授权费用。您只需为您使用的计算资源付费。

在哪里可以查看生成的代码？通过打开目录并展开“Generated code”部分，可以查看任何操作符的底层代码。您也可以通过“文件 > 导出”导出整个文件以检查底层代码。

Lakeflow Designer 是否支持 Git？是的。将 Lakeflow Designer 文件放入 Databricks Git 文件夹中，即可跟踪更改并与 Git 提供商同步。每个文件同时包含可视化布局和底层 Python 代码，因此两者会一起进行版本控制。

能否使用 Lakeflow Designer 处理 HIPAA 工作负载？是的。在配置为满足 Databricks HIPAA 要求的工作区中，Lakeflow Designer 支持 HIPAA 工作负载，包括所需的合规性控制和有效的业务关联协议（BAA）。有关要求和区域可用性的信息，请参阅 HIPAA 文档。

亲自体验，告诉我们您的想法

Lakeflow Designer 现已在全球所有 Databricks 工作区中提供。要试用，请点击工作区左上角的 + New，然后选择“Visual data prep”。

了解更多，请查看以下资源：

• 阅读我们的公开预览公告，了解 Lakeflow Designer 的概述以及团队如何使用它。
• 观看演示视频。
• 查看文档。
• 我们非常想听听您的想法，特别是关于本文中提到的设计理念。请通过 [email protected] 与我们联系。
• 想与我们一同解决这些问题吗？我们正在招聘。

订阅最新文章

订阅我们的博客，将最新文章直接发送到您的邮箱。

注册

查看所有博客

slice-start id="_gatsby-scripts-1"

slice-end id="_gatsby-scripts-1"