ChunJun&OceanBase联合方案首次发布:构建一体化数据集成方案 ...

打印 上一主题 下一主题

主题 881|帖子 881|积分 2643

8月27日,ChunJun社区与OceanBase社区联合组织的开源线下Meetup成功举办,会上重磅发布了「OceanBase&ChunJun:构建一体化数据集成方案」。
这是OceanBase&ChunJun联合解决方案的首次发布,将针对分库分表的实时数据集成、跨集群/租户的数据集成、不同数据源的实时数据集成、日志类型数据的全增量一体化处理等诸多场景,提供高可靠数据集成解决方案。
下面为大家带来具体介绍,欢迎分享给更多的开发者和爱好者共同学习、探讨。
课件获取:
关注公众号“ChunJun”,后台私信“Meetup”获得分享课件
视频回看:
https://www.bilibili.com/video/BV1mG41137ZV?spm_id_from=333.999.0.0
ChunJun&OceanBase是什么

ChunJun:一款稳定、高效、易用的数据集成框架

ChunJun 是一款高效、稳定、易用的数据集成框架,目前基于Apache Flink 实时计算引擎实现批流一体的数据读取和写入。

ChunJun的核心能力

• 多数据源:目前已支持30+数据源,涵盖了各类数据库、文件系统等
•灵活的任务运行模式:支持开箱即用的local模式运行,也支持flink standalone、yarn、k8s等模式;支持Taier、DolphinScheduler、Dlinky等大数据调度平台
• 数据还原:支持 DML 和 DDL 同步,可以最大程度保证源端和目标端的数据和结构统一
• 断点续传:依托Flink的Checkpoint机制,可以从失败的位点重试
• 速率控制:支持多种分片方式,用户可根据自身业务调整分片逻辑;支持调整读取和写入的并发度,控制每秒读取的数据量
• 脏数据管理:支持多种方式存储脏数据,控制脏数据生命周期,并提供统计数据
OceanBase:企业级开源分布式 HTAP数据库

企业级开源分布式 HTAP(Hybrid Transaction/Analytical Processing)数据库,具有原生分布式架构,支持金融级高可用、透明水平扩展、分布式事务、多租户和语法兼容等企业级特性。
OceanBase的核心能力


• 高可用:基于 Paxos 协议,强一致性;少数副本故障,数据不丢,服务不停;RPO=0; RTO

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x
回复

使用道具 举报

0 个回复

倒序浏览

快速回复

您需要登录后才可以回帖 登录 or 立即注册

本版积分规则

我爱普洱茶

金牌会员
这个人很懒什么都没写!

标签云

快速回复 返回顶部 返回列表