首页 数据库管理 滴普科技 Gartner与滴普科技联合发布《湖仓一体演进与实践》白皮书

Gartner与滴普科技联合发布《湖仓一体演进与实践》白皮书

2023-10-18 14:05 浏览量 浏览量:436

近日,滴普科技联合Gartner发布《湖仓一体演进与实践》白皮书,对湖仓一体关键技术趋势、典型应用场景、实践案例等进行了全面解读,旨在帮助企业构建面向未来的数据智能基础设施。白皮书强调,“数据要素越来越重要的当下,企业逐渐开始建设或升级融合数据湖和数据仓库的数据平台,以实现企业大数据能力及数据应用效能的提升。”

白皮书提到,随着大规模数据量的快速增长、数据量类型的多样变化,企业底层数据基础设施迎来新的挑战:一方面,数据处理是一个提升数据结构化程度和信息密度的过程,企业数据是否具有统一的存储格式、统一的存储标准、高效的读取性能,将直接决定数据挖掘和价值的成效;另一方面,数据仓库的规范性和数据湖的灵活性固然很好,但依然存在着数据重复性、高存储成本、数据停滞等局限性,带来一系列数据管理难题。

回归本质,企业数据平台的建设是为了更好地管理使用数据,因而需聚焦在快速的数据融合去应对AI时代数据分析的需求,在存储形态、计算引擎、数据处理和分析、开放性上进行迭代升级。在此背景下,湖仓一体应用而生。

作为一种新型开放式架构,湖仓一体结合数据湖和数据仓库的优势,构建在数据湖低成本的数据存储架构之上,又继承了数据仓库的数据处理和管理功能,让数据和计算在湖和仓之间自由流动,可帮助企业应对大规模、高时效、智能化数据发展趋势,实现数据驱动下的企业数据智能创新。

从技术特点出发,湖仓一体是一次技术迭代,必须具备整体的架构迭代和技术迭代能力。作为湖仓一体数据智能基础软件独角兽,滴普科技以实时湖仓平台FastData为核心进行了大量技术沉淀,帮助诸多客户升级数据基础设施实现技术迭代,提升企业数据管理能力。

FastData作为业内首个基于Data Fabric架构的实时湖仓平台,具备云原生、流批一体、强事务特性、全链路CDC、统一元数据管理、DataOps六大产品特性,以及整库数据入湖、湖仓管理、多租户和多湖管理等核心产品功能,可以支持国产化基础设施平台的迭代,帮助企业建立统一治理、流批一体、湖仓一体的云原生数据智能平台。

尤其是FastData底层核心组件——滴普科技自研的Tarim存储计算引擎,可以实现PB级数据的亚秒级存储计算,并基于DLink Mesh架构扩展支持分布式多级数据湖,具备统一的多租户权限和安全管控机制,实现加速查询和联邦数据分析。

基于上述产品优势,滴普科技形成了湖仓一体技术解决方案。以某商业企业客户为例,在该客户完成统一数仓建设的基础上,滴普科技将其多个数仓整合为统一数仓,完成底层数据平台升级统一,并将海量的多模数据存储入湖,进而从数据湖中抓取数据分析,使得数据的管理和使用效率得到提升,全面支撑企业未来大规模业务智能落地。

面向数据智能时代,随着湖仓一体技术应用的逐步深入,未来还将面对更大的数据体量和更多场景诉求。滴普科技将继续发挥湖仓一体架构优势,支持企业优化自身底层数据架构,满足实时数仓、多级分布式数据湖、海量数据分析等场景需求,支撑企业的数据存储与分析,助力企业建立数据资产、实现数据业务化、推进全线业务智能化。

Title
x
咨询留言
请填写以下信息,方便与您取得联系,已开启隐私保护

提交
x
企业认领

姓名:

电话:

验证码:

职务:

邮箱:

提交
x
图形验证码
填写图形验证码发送短信

发送短信