浅谈数据管理架构 Data Fabric（数据编织）及其关键特性、落地应用 ...

伴随着企业从数字化转型迈向更先进的数智化运营新阶段，对看数、用数的依靠越来越强，但数据的海量增长给数据管理带来一系列难题，如数据范例和加工链路日益复杂，数据存储和计算引擎更加分散，数据需求响应与数据质量、数据安全风险难以兼顾，数据流通过程中的合规性冲突，以及混淆多云环境下的“数据孤岛”等。
简言之，进入数智化时代，企业数据管理正变得异常复杂和艰难，传统的数据管理架构往往依靠于单一、物理集中的数据堆栈系统，这种架构体系已经很难适应企业发展需求。在此背景下，Data Fabric（数据编织）这一全新数据管理架构理念应运而生。
Data Fabric（数据编织）最早由 Forrester 的分析师 Noel Yuhanna 提出，Forrester 认为 Data Fabric（数据编织） “提供了一个统一的、集成的、智能的端到端的数据平台，以支持新出现的需求场景”。同样的，Data Fabric（数据编织）也获得 Gartner 高度认同，分别出现在 2019 年和 2021 年 Gartner 的十大数据分析技能趋势里，以及 2022 年 Gartner 的十大战略技能趋势里。
   Gartner 将 Data Fabric 定义为“一种新兴的数据管理设计理念，用于实现机动、可重用、增强的数据管道、数据语义和数据服务，需要利用主动元数据、知识图谱、数据语义和人工智能等来实现跨异构数据源的增强数据集成、编织和共享。”
  Gartner 还夸大，Data Fabric（数据编织）的真正代价在于它可以或许通过内置的分析技能动态改进数据的使用，同时通过将自动化本领添加到整个数据管理中，使数据管理工作量淘汰 70% 并加快代价实现速度。由此可见，Data Fabric（数据编织）并不是一种技能，也不是一种产物，而是一种全新的数据管理架构理念，它的主要目的是通过其内置分析本领，来动态改善数据的使用，打破企业内部的“数据孤岛”，最大化释放数据代价。
作为国内 Data Fabric（数据编织）架构理念的实践者和引领者，Aloudata 大应科技认为其关键特性包罗以下几点：

• 毗连数据，而非集中数据：通过数据虚拟化引擎，可以对外屏蔽数据源的位置和格式，无需数据搬运，实现多源异构、跨云、跨组织的数据集成。
  
• 语义建模，而非物理建模：数据集成是逻辑集成（Connect）而非物理集成（Collect），因此在数据建模、转换和准备上，也是基于数据语义的逻辑建模、转换和准备，终极交付的是逻辑数据集，而非物理表。
  
• 动态编排，而非人工编排：基于语义的逻辑数据集成和处理，逻辑数据链路会动态编织和自动化实行，而不是依靠 ETL 人工编排，提升计算查询性能，低落计算存储本钱，实现“按需计算”。
  
• 统一访问，而非多点访问：数据虚拟化可以更大范围地整合数据，打破原有物理集成架构下难以形成单中心的限定，形成统一的数据访问入口，而不是以不同的数据存储或查询引擎为中心形成各自的访问入口。
  
• 自助服务，而非专家服务：基于数据虚拟化引擎和数据语义引擎，以及背后的动态编织本领，可以破解现有 “ETL 驱动的集中式数据工程架构下，数据工程团队成为影响数智化运营效率的最大瓶颈”这一问题，让业务分析师和业务人员实现自助服务。
  
• 主动管理，而非被动管理：Data Fabric 夸大数据管理应更主动和智能，即基于主动元数据构建智能管理本领，融入到数据全生命周期的每个环节里去，实现主动、智能的数据管理。
  

那么，企业该怎样落地 Data Fabric（数据编织）架构呢？Aloudata 团结自身在 EB 级数据管理领域中深厚的实践履历，在业内首倡“NoETL”架构理念，推出了全新的“NoETL”驱动的 Data Fabric 数据架构，并以此为基础，自研了 Aloudata AIR 逻辑数据平台，资助企业通过零数据搬运，即可轻松实现全域数据的集成整合和自适应加快。
Aloudata AIR 逻辑数据平台采用数据虚拟化技能构建，可以或许资助企业无需移动数据、无需关注数据任务运维、无需担心查询性能，就可以实现多源异构数据的逻辑毗连与整合，并通过全局数据目次和统一数据服务为下游用户与应用提供统一的数据发现与访问入口，办理由“数据孤岛”带来的全局数据查找难、跨源联邦查询难和集中安全管理等问题。
同时，Aloudata AIR 逻辑数据平台通过 AI 增强的自适应加快技能，实现自动物化链路编排和智能查询下推，让用户无需担心虚拟化带来的大数据量查询性能问题，实现全域数据要素更低本钱、更实时地流通与消耗。

现在，Aloudata AIR 逻辑数据平台已在包括招商银行在内的多个头部企业生产场景中落地验证，实现了数据的统一访问和管理，显著提升了业务效率和数据管理的机动性，同时大幅低落存算本钱。点击了解更多。

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。