Aloudata 技术副总裁余俊受邀在 DataFunSummit 2023 分享数据虚拟化的前沿应用

<p align=left>在 10 月 28 日举行的 DataFunSummit 2023 现代数据栈技术峰会上,Aloudata 技术副总裁余俊受邀发表了关于数据虚拟化技术的前沿应用的演讲。余俊凭借其深厚的大数据平台架构经验,为听众带来了关于数据虚拟化和数据编织(Data Fabric)的深入洞见。</p>

图片

<p align=left>DataFunSummit 2023 作为业界重要的数据技术交流活动,汇集了众多数据领域的专家和领军人物。在此次活动中,余俊先生以其 18 年互联网技术和大数据平台相关架构领域的丰富经验,分享了他对数据工程未来趋势的见解。</p>

<p align=left>作为 Aloudata 的技术副总裁兼逻辑数据平台研发负责人,余俊先生在数据虚拟化技术研发领域有着深厚的积累和杰出贡献。在加入 Aloudata 之前,他在蚂蚁集团担任大数据研发平台技术负责人,主导了蚂蚁第一代和第二代数据研发平台产品体系的建设。</p>

<p align=left>余俊先生的演讲聚焦于数据虚拟化技术的应用,特别是如何解决传统数据仓库体系中的效率和成本问题。通过一个真实案例,阐释了 Aloudata 如何利用数据虚拟化技术为客户提供低成本、高效率的敏捷数据集成与分析解决方案。</p>

<p align=left>传统数据仓库体系经过多年演进,沉淀了一套成熟的理论、架构和技术,但随着数智化转型的深入,面临着数据需求、数据源和用数人群爆发式增长的巨大挑战,在效率、成本和合规方面难以满足与日俱增的敏态创新用数需求。在此背景下,Data Fabric 数据架构思想应运而生,它包含了数据虚拟化、Data Ops、主动元数据等多种技术与概念,其核心理念是通过优化跨源异构数据的发现与访问,将可信数据从所有数据源中以灵活且业务可理解的方式交付给所有相关数据消费者,让数据消费者自助服务和高效协作,实现极致敏捷的数据交付,同时通过主动、智能、持续的数据治理让数据架构持续健康。</p>

<p align=left>而数据虚拟化技术是 Data Fabric 理念的基石技术,在逻辑数仓的实践中扮演着关键角色。它通过将多个数据源(如数据库、文件系统、云存储等)的数据实现逻辑整合,使得用户可以像访问单一数据源一样来查询、分析和操作数据。数据虚拟化技术可以在不复制数据的情况下,将不同数据源、不同位置和不同格式的数据进行整合,它隐藏了底层数据存储位置、技术接口、如何实现、使用平台等技术的复杂性和差异性,并通过逻辑视图层提供统一的数据服务,为多个应用和用户提供支持,从而实现实时的数据访问,减少数据复制搬运成本,提高数据开发与变更的敏捷性。</p>

Aloudata AIR 逻辑数据平台正是 Data Fabric 理念和数据虚拟化技术的承载,除了上述能力外,其独有的关系投影(Relational Projection,RP)和 PRP(Predictive Relational Projection)技术实现了重大突破,可以实现多层 RP 构建与调度、数据的多版本能力、自适透明应加速和 RP 的自动回收等功能,帮助企业在通过逻辑集成打破数据孤岛的基础上,轻松应对超大数据量的查询性能挑战,并获得比传统 ETL 方案至少 50% 的成本节约。

<p align=left>余俊在演讲中强调,数据虚拟化技术和逻辑数据平台不是同传统数据仓库的替代者,而是补充者。通过灵活结合二者的优势,企业可以同时完美应对传统稳态和创新敏态的用数需求。</p>

<p align=left>余俊先生的演讲在 DataFunSummit 2023 上引起了广泛的关注和讨论,展现了 Aloudata 在数据工程领域的深厚实力和创新精神。通过包括数据虚拟化在内的多项领先技术,Aloudata 正在帮助众多头部企业打破数据孤岛,实现更高效率和成本效益的数据管理。</p>