双标杆!Aloudata 两项成果获评 2023 信通院大数据“星河”案例标杆案例

为更好推进大数据技术产品及相关产业的繁荣,充分发挥数据作为生产要素的独特价值,中国信息通信研究院和中国通信标准化协会大数据技术标准推进委员会(CCSA TC601)连续七年共同组织大数据“星河(Galaxy)”案例征集活动。第七届大数据“星河(Galaxy)”案例征集包括行业数据应用、数据安全、数据资产管理等六大方向。案例征集自 9 月启动以来,受到了业界广泛关注和踊跃报名,共收到申报项目 706 份。

由信通院主办的 2023 数据资产管理大会于今日隆重召开,会上正式公布了 2023 大数据“星河(Galaxy)”案例征集入选结果。Aloudata 联合标杆客户招商银行共同申报的两项成果双双获评“标杆案例”。其中,《招商银行基于列算子血缘的模型优化和变更协同应用实践》入选“数据资产管理标杆案例”,《招商银行敏捷数据服务体系建设实践》入选“行业数据应用标杆案例”。

Aloudata No ETL
Aloudata Data Fabric

企业由数字化管理向数智化运营转型的过程中,数据资产的规范治理与高效应用已成为关键要务,是数字商业时代企业的核心竞争力。此次获奖充分展示了 Aloudata 在数据管理领域的技术领先性和两项案例成果的行业示范性。Aloudata 基于 Data Fabric 架构和 NoETL 理念,自主研发的 Aloudata AIR、Aloudata BIG、Aloudata CAN 产品体系,将自动化的数据管理能力成功实践于企业的实际“取数”、“用数”和“治数”中,在大型银行的复杂系统场景中实现了数据应用与治理的敏捷、一致和高效。

数据资产管理标杆案例:招商银行基于列算子血缘的模型优化和变更协同应用实践

随着招商银行业务数据化程度不断加深,数据规模快速扩大,数据关系日益复杂,其未来数据管理工作面临着如何持续有效保持数据架构先进性、如何高效开展全链路变更协同的挑战。

传统数据技术和专家主导的运动式治理方式已不能满足招商银行数据管理需要。为此,Aloudata 支持招商银行建设了契合其数据中台战略的新数据架构,形成了一套支持各中心开展模型设计、数据开发和数据服务的长效管理机制,主要举措如下:

1、元数据应用智能化:算子血缘、代码解构、图谱挖掘,将元数据智能化能力推广应用到业务场景中;

2、链路保障自动化:变更协同、精准评估、分级保障,将全链路质量保障能力沉淀到平台系统中;

3、架构治理长效化:数据去重、架构扁平、时效提升,将模型优化能力赋能到研发工具和工作中。

在该项目中,Aloudata BIG 主动元数据平台有力支撑招商银行构建了从源端到消费端的全链路算子血缘图谱,将列算子血缘分析技术和主动元数据管理能力整合到大数据研发平台,实现了 ETL Copilot 功能,并应用到模型优化和变更协同等场景,服务全行数据开发人员;在数仓重构项目中,辅助开发人员主动发现模型优化机会,大幅提升模型重构效率,判别重复资产,推动数仓快速实现资产数量下降 40%、平均链路缩短 50%;在日常链路保障场景中,自动监测上游变更,自动评估精准到字段的端到端影响,帮助运维人员预防或快速定位数据风险,让上下游协同丝滑衔接。

该方案为同业解决类似数据管理“老大难”问题提供了思路和方法,利用 Aloudata BIG 精准的列算子血缘分析能力,创新性地解决了以往依赖大量专家和经验才能实现效果的模型优化和链路保障难题。通过与研发平台等工具产品的集成,可以推广辅助更广泛的人群进行研发提效、质量保障和数据智能应用。

Aloudata BIG 解决了数据“看不清”、“管不住”的问题,其基于列算子级精准血缘构建的“主动元数据”能力也是国际前沿的 Data Fabric 架构主张的核心能力之一。该案例更是全球首个“算子级血缘”技术的落地实践,具有全球领先性。

行业数据应用标杆案例:招商银行敏捷数据服务体系建设实践

面对数据服务场景从“固化分析”需求向“数智化运营”的转变,业务运营过程中大量的“微决策”场景高度依赖及时、精准的数据。随着招商银行内部敏捷 BI 模式得到广泛推广,业务需求的灵活性给数据模型带来了空间和时间复杂度的挑战,主要表现在报表查询和自助分析的响应速度、总分机构之间的数据交付效率、数据同步和共享时的语义一致性问题等方面。

秉承 Data Fabric 架构理念自主研发的 Aloudata AIR 逻辑数据平台,通过关系投影、智能数据编排、增强查询下推等技术创新,实现了预计算与即席计算的弹性自适应,突破了传统技术在多源异构场景下的计算性能瓶颈和数据规模瓶颈,帮助招商银行实现全场景自助化用数流程,构建低门槛分析工具,实现真正的敏捷数据准备、计算与查询加速和 50% 以上的存算成本节约。

作为国内首个 Data Fabric 逻辑数据平台,Aloudata AIR 具有多源异构数据集成、逻辑化数据整合、自适应数据加速等核心特性。它在招商银行对公、零售业务上得到了广泛应用,在场景适配度、服务稳定性上得到了深度验证,在技术创新和成果应用上都具备较高的示范意义。

方案还利用 Aloudata CAN 自动化指标平台强大的数据语义服务能力,为招商银行构建了独立的指标语义层,实现了指标“定义即生产”和“管、研、用一体化”,提升指标的协同与交付效率,并实现 100% 的口径一致;同时将数据集语义以 API、JDBC、文件等多种形式提供开放服务,实现指标的共享与复用。

Aloudata CAN 是国内首个基于 Headless BI 理念的商用自动化指标平台,为企业面临着的指标管理的困境:指标口径乱、交付效率慢、重复开发成本高、分析不灵活、口径解释难等难点、痛点提供了全新的思路与方案。

由此,Aloudata 为招商银行构建了敏捷数据准备与分析体系,通过自助化的数据探索、准备工具和海量数据自适应加速引擎,实现数据需求交付模式的创新,并为海量数据分析提供了新思路。同时,业务化的“数据集、指标”支持跨 BI 工具、跨总分机构、跨业务条线的复用,有效推进企业级业务逻辑的沉淀和使用的一致性。

依托于公司团队 20 年的大数据技术实践积累,并通过三款产品的商业化落地,Aloudata 在国内率先实现了 Data Fabric 的最佳实践。本次两项案例双双入选,充分验证了 Aloudata 的产品成熟度与商业价值,同时也代表着整个 Data Fabric 细分领域在国内最前沿的进展。

Aloudata CEO 周卫林表示:“本次‘星河案例’入选是对 Aloudata 技术能力和持续创新的认可和鼓舞,团队将继续专注自动化数据管理领域,为客户业务提供强有力的数据赋能。” 他还特别提到,Aloudata 开创性提出并正在践行的 NoETL 数据工程架构与 Data Fabric 理念高度一致,NoETL 将有望成为企业数据自动化管理的新范式。

“NoETL 会重构数据生产力”,周卫林说。

目前,Aloudata 各产品已在多家头部企业的复杂数据环境中落地,成功交付了多个 Data Fabric 最佳实践。以“NoETL 重构数据生产力”为信念,以“让数据随时就绪”为使命,Aloudata 将持续输出行业引领性的创新成果,让更多客户和合作伙伴共享数字化的数据红利。

想要了解案例详情或更多 Aloudata 相关信息,您可关注公众号或登陆官网,我们将持续为您进行内容更新。