Lakeflow Designer 2026 年 10 月更新汇总

我们在6月正式发布了 Lakeflow Designer，此后已有超过3,000家客户使用它来解决数据处理中最大的瓶颈之一：技术门槛。从传统自助式数据准备工具迁移过来的团队简化了治理、精简了数据栈、加快了投产速度，并大幅降低了成本。凭借基于用量的定价模式和无需按用户收取的许可费用，我们看到许多客户在采用 Lakeflow Designer 后，将无代码工具方面的支出减少了90%。

与这些客户的紧密合作帮助我们找到了让 Designer 更加实用的方法。我们的最新更新带来了新的无代码算子、对现有算子的增强、更多输出选项，以及用于构建和管理更大工作流的改进画布。

Lakeflow Designer 直接构建在 Databricks 之上，是一种可视化、无代码、AI 原生的数据准备与分析体验。它让分析师、领域专家以及其他技术能力较弱的用户能够通过拖放式画布和自然语言来准备和探索数据。

有哪些新功能？

以下是我们过去4个月中对 Lakeflow Designer 所做的一些最受欢迎的增强。

用于数据清洗和质量检查的新无代码算子

Genie Code、Python 和 SQL 算子一直让 Designer 保持灵活。然而，我们从早期客户那里得知，他们希望有更多无代码方式来处理去重、数据清洗和数据质量检查等常见任务。

Prepare 算子：清洗和标准化数据

使用 Prepare 算子清洗和标准化数据。更改文本大小写、转换数据类型、替换值、应用公式等，全部在一个算子中完成。详细了解 Prepare。

Unique 算子：删除重复记录

快速删除整个数据集或选定列集中的重复项。设置排序规则来控制保留哪条记录，例如每位客户最近更新的记录。详细了解 Unique。

Guardrails 算子：添加数据质量检查

使用 Guardrails 将数据质量检查直接添加到工作流中。检查缺失值、重复项、意外值等，然后选择失败如何影响工作流：继续处理通过的行、阻止通过的输出，或停止执行。详细了解 Guardrails。

对现有 Join、Filter 和 Select 算子的增强

我们扩展了现有算子，以更好地处理高级用例和分支。

拆分和多表连接

Join 算子现在默认提供匹配行、左未匹配行和右未匹配行的独立输出，让你可以分支工作流并对意外值触发警报。它还支持在单个算子中连接两个以上的表。详细了解 Join。

动态列选择

按数据类型、名称模式或公式选择列，让你的工作流能够随着输入模式的变化而调整。例如，保留名称以 sales_ 开头的每一列，包括之后新增的匹配列。详细了解 Select。

参数化输入和输出

Source 和 Output 算子现在支持在其配置中使用参数，让你无需重新配置算子即可更改这些值。参数可以根据各个调度进行覆盖，例如在测试环境和生产环境中的运行。了解有关参数的更多信息。

Filter 算子中的分支

Filter 算子现在为匹配条件的行和不匹配条件的行分别提供了独立的输出。使用这两个输出，可以从单个过滤器构建独立的处理路径。了解有关 Filter 的更多信息。

物化视图、表和文件的扩展输出

Output 算子现在为你提供了更多方式来保存结果、更新现有数据以及创建供下游使用的文件。

创建物化视图

将结果写入 Unity Catalog 中的物化视图，以便在 AI/BI 仪表板甚至其他可视化数据准备文件等下游流程中快速计算。当你的可视化数据准备运行时，该视图会自动刷新。了解有关物化视图输出的更多信息。

合并到现有表

使用你指定的键合并结果，使现有表保持最新。匹配的记录会被更新，新记录会被插入。你还可以将结果追加到现有表的末尾。了解有关表输出的更多信息。

直接写入文件

将 CSV、Excel 或 JSON 文件直接写入 Unity Catalog 卷。对于 Excel 输出，你还可以动态写入不同的工作表。了解有关文件输出的更多信息。

画布改进：大型工作流导航与协作

我们更新了画布，使大型工作流更易于导航、理解和维护。

通过视觉重新设计的画布导航大型工作流

画布经过重新设计，具有更强的视觉对比度、更大的连接目标，以及针对未配置算子和缺失输入的更清晰提示。我们还改进了包含数千个算子的画布上的滚动和平移，使大型工作流导航更加流畅。

通过可搜索的目录查找算子

使用新的可搜索目录查找任意算子，然后选择它即可跳转到画布上的相应位置。你还可以展开其 Generated code 部分以检查底层代码。

通过可视化版本历史查看工作流更改

直接在画布上查看版本之间的变化。版本历史现在会高亮显示已添加、删除或修改的算子，使工作流更改更易于审查。了解有关版本历史的更多信息。

通过实时光标状态跟随协作者

实时光标状态让你在同一可视化数据准备文件中工作时能够协作并跟随同事的操作。

Lakeflow Designer 的下一步是什么？

我们将继续投入，使 Lakeflow Designer 成为处理数据的最佳自助式数据准备和自动化工具。以下是我们期待的一些即将推出的改进。

Databricks Apps 集成
我们正在将 Designer 与 Databricks Apps 集成，以便作者可以通过简单的应用界面向非技术用户分享他们的工作。用户将能够配置输入、运行工作流并查看结果，而无需查看底层工作流。

对完整输出进行数据剖析
我们正在扩展 Designer 现有的数据剖析能力，让你能够对某个算子返回的所有数据运行剖析，并直接在输出表头中查看结果。

使用 Report 算子从多个输出创建自定义报告
新的 Report 算子将让你能够将多个输出的结果与自定义图形（如公司徽标）组合在一起。你可以将报告直接保存到工作区，或通过原生通知算子以电子邮件方式发送。

借助 Lakebridge 的原生迁移工具
由 Databricks Lakebridge 提供支持的原生迁移工具，将让你能够将工作流从旧版自助式数据准备工具批量迁移到 Lakeflow Designer 中。

关于 Lakeflow Designer 的常见问题

Lakeflow Designer 在 Databricks Free Edition 中可用吗？
可用。在左侧导航中选择 Visual Data Prep 即可在 Free Edition 中开始使用。

Lakeflow Designer 如何定价？
Lakeflow Designer 没有按用户计费的许可证，也没有单独的许可费用。你只需为使用的计算资源付费。

在哪里可以查看生成的代码？
你可以打开目录并展开 Generated code，查看任何算子的底层代码。你也可以通过 File > Export 导出整个文件，以检查底层代码。

Lakeflow Designer 支持 Git 吗？
支持。将你的 Lakeflow Designer 文件放入 Databricks Git 文件夹，即可跟踪更改并与你的 Git 提供商同步。每个文件都同时包含可视化布局和底层 Python 代码，因此两者会一起进行版本管理。

我可以将 Lakeflow Designer 用于 HIPAA 工作负载吗？
可以。Lakeflow Designer 在配置为满足 Databricks HIPAA 要求的工作区中支持 HIPAA 工作负载，包括所需的合规控制措施和有效的商业伙伴协议（BAA）。有关要求和区域可用性，请参阅 HIPAA 文档。

试用一下，并告诉我们你的想法

Lakeflow Designer 已在所有 Databricks 工作区中正式发布。要试用，请点击工作区左上角的 + New，然后选择 Visual data prep。

要了解更多信息，请查看以下其他资源：

• 阅读我们的 Public Preview 公告，了解 Lakeflow Designer 是什么以及团队如何使用它。
• 观看演示视频。
• 查看文档。
• 我们很想听听你的想法，尤其是对本文中设计理念的看法。请通过 designer-feedback@databricks.com 联系我们。
• 想和我们一起解决这些问题吗？我们正在招聘。