面向 DataOps 的 Harness 工程化

William Guo

中文演讲 2026-08-08 10:30 GMT+8  (ROOM : 主会场 - 颐和厅) #keynote

在过去十年里,现代数据栈(Modern Data Stack)为数据工程师构建了一个丰富的工具生态,覆盖数据接入、湖仓架构、编排、治理、BI 和 AI。然而在 Agentic(智能体)时代,数据平台需要进一步演进:从"人类操作工具",走向"人类定义目标、由 Agent 编排执行"。

本次演讲将探讨一种新的平台范式:面向数据的 Harness 工程(Harness Engineering for Data)。它将讨论如何把数据接入、ETL/ELT、SQL 开发、编排、数据质量、元数据、血缘、监控,以及企业本体(ontology)统一起来,封装成 Agent 能够理解、调用并治理的工程能力。

通过将业务本体、技术元数据和执行上下文注入到 Agent 的工作流中,企业可以让 Agent 更好地理解数据对象和业务关系,更高效地执行 Skills,减少对上下文的猜测以及 token 消耗,并提升 ETL 管道生成、SQL 产出、数据建模和可视化分析的准确性。

最终,数据工程平台将从传统的工具集合,演进为一种面向人-Agent 协作而设计的 Data Engineering Harness,帮助企业在 Agentic 时代实现更高效、更可信、更可控的数据工程交付。

讲师:


William Guo:Apache Software Foundation Member

  • Apache Software Foundation Member
  • Apache IPMC Member
  • Apache DolphinScheduler PMC
  • Apache SeaTunnel(孵化中)Mentor
  • ClickHouse 中国社区创始人
  • ApacheCon Asia 2021/2022 工作流/数据治理 Track Chair

William 曾担任易观(Analysys)的 CTO、联想的大数据高级总监,以及万达的大数据总经理。他曾在 CIBM、IBM 和 Teradata 担任大数据总监/经理。他在大数据技术与数据管理领域拥有 20 年以上的经验。