字节跳动开源数据集成引擎 BitSail 的演进历程与能力解析

时间:2022-11-03 14:08:39

导读

BitSail 是字节动开源数据集成引擎,支持多种异构数据源间的数据同步,并提供离线、实时、全量、增量场景下全域数据集成解决方案,目前支撑了字节内部和火山引擎多个客户的数据集成需求。经过字节跳动各大业务线海量数据的考验,在性能、稳定性上得到较好验证。

10 月 26 日,字节跳动宣布 BitSail 项目正式在 GitHub 开源,为更多的企业和开发者带来便利,降低数据建设的成本,让数据高效地创造价值。本篇内容将围绕 BitSail 演讲历程及重点能力解析展开,主要包括以下四个部分:

  • 字节跳动内部数据集成背景

  • BitSail 技术演进历程

  • BitSail 能力解析

  • 未来展望

字节跳动内部数据集成背景

字节跳动开源数据集成引擎 BitSail 的演进历程与能力解析