一次性揭秘 IoTDB 端边云同步的 7 大特性!

打印 上一主题 下一主题

主题 958|帖子 958|积分 2874


  简朴操作+高性能成果,助你实现一站式、多终端数据活动!
  IoTDB,国内领先的时序数据库,其端边云同步技能与端边云架构完善融合,为端到云的数据活动提供了一站式的同步办理方案。你一定想知道:
  端边云同步技能如何助力企业实现端边云架构的高效构建
  端边云同步技能具备哪些关键特性
  如何使用简朴的一条 SQL 快速启动 IoTDB 的数据同步过程?
  请跟随我们的文章,我们为你揭秘 IoTDB 端边云同步的相干细节!了解我们如何资助企业实现更高效、可靠的端边云数据一站式管理!
  
  01 功能介绍:IoTDB 与端边云,天生一对的黄金搭档

  端边云架构是一种分层的盘算模子,优化了数据处置处罚流程并提拔了效率:
  

  • "端"代表广泛的终端设备,包括智能手机、智能家居设备、传感器和摄像头,它们负责收集原始数据。
  

  • "边"指的是靠近数据源的边缘盘算层,它在本地处置处罚和分析数据,降低对中央云的依靠。
  

  • "云"则是指会集式云盘算环境,负责大规模数据处置处罚和高级分析。
  

  IoTDB 的端边云同步技能与这一架构完善契合:IoTDB 提供了丰富的数据同步配置战略,结合其灵活的集群摆设形态,可以为差异场景下的数据同步提供开箱即用的定制化办理方案。
  场景一:团体型企业多级数据级联汇聚

  客户业务场景:
  

  • 工厂侧(边):涉及该团体中每个工厂各类设备产生的原始时序数据。工厂侧摆设 IoTDB 便于在工厂层面进行数据整合,同时可以进行开端的聚合、洗濯和异常检测等处置处罚。
  

  • 团体侧(云):涉及整个团体所有的时序数据,数据由各工厂汇聚而来,同时需要在汇聚时进行降频制止云侧数据量过大。云端的全面云盘算资源支持智能化服务,包括智能调理、运维和宏观决议支持,提供了跨工厂的数据分析和全局视角。
  通过 IoTDB “端边云同步”功能,用户完成了数据从设备到工厂到团体的汇聚过程,确保了数据的同等性和实时性,还对存储效率进行了优化,为该团体提供了高效、可靠的工业大数据基础设施,推动了客户工业互联和智能制造的发展。
  

  场景二:电力体系跨区多级同步

  在电力行业,为了网络安全,电力体系的网络被分别为四个具有差异安全等级的区域:安全区 Ⅰ 的生产控制区,负责关键的实时控制;安全区 Ⅱ 的生产非控制区,提供辅助性生产支持;安全区 Ⅲ 的生产管理区,处置处罚生产管理任务;以及安全区 Ⅳ 的管理信息区,专注于行政管理和决议支持。
  在安全区 Ⅱ 与安全区 Ⅲ 之间的体系,一样平常还需要通过单向网闸进行交互。正向隔离机制允许高安全等级的体系向低安全等级的体系发送操作指令。而反向隔离则允许低安全等级的体系向高安全等级体系传输数据。隔离网闸的存在物理上确保了生产控制区的安全,但是给安全区 Ⅱ 与安全区 Ⅲ 之间的数据同步带来了极大的挑衅。
  

  面对 II 区与 III 区之间的单向网闸,IoTDB 内置提供了跨网闸同步插件(可适配如 Syskeeper2000 在内的一系列网闸型号)。这些插件能够使用 SQL 一键配置,支持 IoTDB 在正反向网闸存在的条件下,在差异安全区域间实现数据同步。下面是 IoTDB 在某风电场景下跨网闸同步的现实应用。
  

  • 场站侧:场站 II 区摆设了一台 IoTDB,用于实时监控和处置处罚来自 SCADA 体系及辅助监测设备的数据。场站 III 区也摆设了一台 IoTDB,可能用于生产管理数据的处置处罚或作为 II 区的冗余。场站 II 区和 III 区间存在单向隔离网闸。
  

  • 集控侧:集控 III 区的 IoTDB 则会集管理来自各场站 III 区的数据,支持综合分析和调理决议。
  

  • 中央侧:中央私有云上摆设的 IoTDB 负责全局数据的整合与分析,为电力体系提供决议支持。
  

  在整个跨区多级的数据同步链路中,IoTDB 除了需要面对跨网闸同步的技能挑衅外,还需要面对单向网闸带宽小、场站到集控中央的流量费用高昂等问题。而 IoTDB 特有的 TsFile 文件批量同步技能、同步哀求多级压缩技能,可显著淘汰数据传输量,实现了数十倍于原始数据的传输压缩比,有效降低带脱期制和流量费用的影响。
  团体而言,这一数据同步办理方案还具备中断自动重试、断点自动续传和数据的终极同等性等关键特性,可完全满足电力行业复杂网络条件下的数据集成需求。
  
  02 功能特性:7 大特性为用户保驾护航

  IoTDB 作为一款国内领先的时序数据库,以其卓越的同步特性,成为确保工业数据管理可靠性的中坚力量。下面将深入探讨 IoTDB 的同步特性,揭示它们如何共同作用于提拔体系的团体性能和稳定性。
  (1)开箱即用
  

  • 无需额外摆设任何组件,运维简朴,维护成本低
  • SQL 一键配置一键启动
  (2)极致性能
  

  • 实时数据同步:单机可达数万万点/s
  • 历史数据同步:单机可达数亿点/s,吞吐达数百 MB/s
  (3)配置灵活
  

  • 时间范围选择:全量、历史、实时
  • 序列模式匹配:全量、按库、按设备、按序列
  (4)多同步模式
  

  • 实时同步:操作级数据转发
  • 批量同步:独创 TsFile 文件级别同步,高压缩、低流量
  • 智能同步:自适应实时、批量模式自动切换
  (5)多种传输协议
  

  • 支持多种主流网络协议
  • 支持跨正、反单向网闸传输
  • 支持 SSL 加密传输
  (6)流量控制
  

  • 提供 RPC 压缩

    • 支持 Snappy,LZ4,Zstd,LZMA2,GZip 算法,支持多级算法组合压缩
    • 实时同步 10 倍压缩,批量同步数十倍压缩

  • 流量限制

    • 单同步任务粒度限制
    • 全范围制

  (7)安全可靠
  

  • at-least-once 传输语义:确保端到端同等性支持自动重试,出现异常无需人工介入
  • 支持断点续传:发送端担当端异常排除、重启,皆可基于断点恢复
  • 全链路高可用:发送端或接收端为集群时,皆可容忍节点失效,制止任务中断
  • 看得见的可靠:提供 50+ 项监控指标,可在监控面板实时监测同步状态
  • 提供灵活的冲突处置处罚机制:无监督效果下实现端侧定义数据、云侧汇聚数据
  
  03 使用方式:仅需一条 SQL 即可开启数据同步

  

  下面,将展示使用最简朴的一条 SQL 来实现的 IoTDB 端到端的全量数据同步功能:它为企业提供了一键式数据迁移办理方案,适用于数据备份、跨数据中央迁移等场景。
  在 IoTDB A 中使用 SQL 创建一个 A 到 B 的全量数据同步管道,即可开启全量数据同步任务:
  1. CREATE PIPE A2B WITH SINK ('sink.node-urls' = '127.0.0.1:6668')
复制代码
在接下来的系列文章中,我们将过细探讨 IoTDB 在端边云同步方面的多样化应用,覆盖历史数据同步、双向数据同步、级联数据同步和跨网闸数据传输等差异场景。通过一系列简朴的 SQL 用例,我们将生动展示 IoTDB 在数据同步范畴的强大功能和灵活性!
  
  规上企业应用实例

  能源电力:中核武汉|国网信通财产团体|华润电力|大唐先一|上海电气国轩|清安储能|太极股份|绍兴安瑞思
  航天航空:中航机载共性|北邮一号卫星
  钢铁冶炼:宝武钢铁|中冶赛迪
  交通运输:中车四方|长安汽车|城建智控|德国铁路
  智慧工厂与物联:PCB 龙头企业|博世力士乐|德国宝马|京东|昆仑数据|怡养科技
  

  

  

  

  


免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x
回复

使用道具 举报

0 个回复

倒序浏览

快速回复

您需要登录后才可以回帖 登录 or 立即注册

本版积分规则

大连密封材料

金牌会员
这个人很懒什么都没写!
快速回复 返回顶部 返回列表