BitSail种子用户征集

BitSail是字节跳动自研的数据集成产品,支持多种异构数据源间的数据同步,并提供离线、实时、全量、增量场景下全域数据集成解决方案,目前支撑了字节内部几乎所有的业务线,同时也支撑了火山引擎多个客户的数据集成需求。

我们正在积极寻找BitSail种子用户,如果您对BitSail非常感兴趣,有切实的数据集成落地需求;或者在业务层面,您对目前的BitSail还有着其他能力需求及技术痛点,欢迎填写下方问卷,与研发团队进一步沟通和交流,我们将为有BitSail使用需求的用户,提供全程技术答疑及技术落地支持!


BitSail优势
BitSail基于字节内部的复杂场景和海量数据传输场景打造,在架构及功能层面的优化包括:
架构灵活性:Connector 层、框架层、引擎层,每一层都采取可插拔的设计,同时Connector 层、框架层做到完全与引擎解耦,整体结构比较清晰和灵活,可扩展性较强;
集成能力完善性:在框架层提供了丰富的基础能力,比如异构数据源类型转换、脏数据处理、流控、自动并发度推断、任务运行监控、事件时间归档等;
企业级稳定性:提供了更多的企业级特性,在性能、稳定性、成熟度上更有保障。比如 Kafka2Hive通道,针对大数据量场景做了相关优化,比如提升大并发场景一致性快照成功率、大并发场景的容错性、兼容乱序写入等等

BitSail引擎能力
一、开源已支持
1.数据同步场景
●离线数据同步
●实时数据同步
●增量数据同步
2.数据源种类
●MySQL、Oracle、PostgreSQL、Hive、HDFS、Hudi、Kafka、RocketMQ、Clickhouse、ElasticSearch、MongoDB、FTP
●具体参考 https://github.com/bytedance/bitsail,并在快速扩展中
3.大数据依赖
●大数据底座:不绑定固定底座,支持Hadoop、HDFS,Hive多版本
●引擎依赖:基于Flink 1.11,可使用项目内嵌Flink或者用户Flink环境
4.执行Runtime
●支持Yarn、Local、Standalone
5.使用方式
●基于Shell脚本启动,具体可参考https://bytedance.github.io/bitsail/zh/documents/start/deployment.html

二、开发支持中
●增量数据同步:基于CDC提供近实时同步能力
●K8S
●Flink引擎多版本

三、暂时不支持
●目前暂不支持前端产品
*
1.
目前的业务需求或痛点?
*
2.
您的联系方式?(微信或电话)
3.
您的公司/单位?(选填)
4.
您的姓名?(选填)
5.
您的职位(选填)
企业负责人
业务人员
技术研发
老师&学生
其他
问卷星提供技术支持
举报