从数据接入到数据湖:用 Apache SeaTunnel 构建现代湖仓

Lidong Dai

中文演讲 2026-08-08 14:30 GMT+8  (ROOM : 万春厅) #datalake

构建数据湖,早已不再只是选择 Iceberg、Hudi 还是 Paimon 的问题。 在真实系统中,最大的挑战往往更靠前一步:数据如何可靠、高效、持续地进入数据湖。 在本次演讲中,我们将探讨 Apache SeaTunnel 如何作为现代数据湖架构的统一数据接入与集成层。从常见的痛点出发——多源数据、Batch 与 CDC 共存、schema 演进,以及运维复杂度——我们将走查 SeaTunnel 如何简化进入数据湖与湖仓系统的数据流转。 通过真实的生产场景,你将看到 SeaTunnel 如何把事务型数据库、消息队列和文件系统接入基于 Iceberg 或湖仓的存储,从而构建可扩展、可维护、可演进的数据平台。本次演讲聚焦于务实的架构决策,而非特定厂商的方案。

本次演讲将涵盖:

  • 典型的数据湖架构演进与常见陷阱
  • 数据集成在数据湖与湖仓系统中的角色
  • Apache SeaTunnel 的架构与设计原则
  • 端到端的接入示例:把数据库、CDC 和流式数据接入数据湖
  • 运维考量与最佳实践
  • SeaTunnel 在数据湖生态中的路线图

讲师:


Lidong Dai:WhaleOps Technology 联合创始人

Apache 孵化器 Mentor,Apache DolphinScheduler PMC 成员 & Apache SeaTunnel PMC 成员