8月16日-18日,由IT168联合旗下ITPUB、ChinaUnix两大技术社区主办的第14届中国数据库技术大会(DTCC2023)将在北京举行
作为国内云原生数据仓库代表厂商,酷克数据受邀亮相DTCC 2023,与广大数据库领域从业人士共同分享云原生数仓发展趋势,探讨数据仓库提升实时性的路径。
精彩话题 不容错过!
8 月 16 日下午14:50,酷克数据资深解决方案架构师陈义贤将在“数据库内核•技术创新”专场发表题为“分布式数仓的TP能力探索—HashData UnionStore”的演讲,介绍HashData以Log is Database的思路在分布式数据仓库改造中的具体技术方案及未来发展规划。
OLTP和OLAP是数据库领域最为重要的应用场景划分。过去,人们认为这两大场景不能同时兼顾,而实时数仓和HTAP的出现像一座桥梁,打破了二者的分界线。
传统的数据仓库更多地服务于批处理和分析型业务,对实时业务的支持并不理想。近年来,随着企业对实时数据分析需求的提升,仅依靠传统数据仓库已越来越难以满足企业需求。如何构建既能支撑分析业务,又能支撑实时业务(OLTP)的HTAP数据仓库,成为一个重要课题。
时间旅行,让数据可回溯
日志作为数据库系统中的重要组成部分,记录了数据库所有的变更信息。HashData通过UnionStore对底层数据存储的快照化设计,结合重做日志,赋予数据仓库“时间旅行”的能力,支持用户回溯到任意历史时间点,查看数据状态,为云原生数据仓库提供了强大的可回溯性,使得数据库更容错、更可靠,应用也更容易开发。
更强的并发能力与拓展性
Log is database的理念可以大幅优化OLTP能力,通过将数据随机写入的操作剥离,计算集群只将WAL日志提交至UnionStore集群,由UnionStore集群处理日志数据,并重放生成新的页数据,这样减少了复杂的锁定和同步操作,可以大幅提升并发能力,同时也减少随机访问。
UnionStore是一种新的工作负载,相比于传统的HTAP解决方案,UnionStore最大的创新之处在于它是基于OLAP系统打造的HTAP数据库,TP与AP负载共用一套系统和一套数据,数据按需使用行存与列存,通过对象存储进行灵活转换,实现了加载、同步、查询、计算的事务级实时性,显著降低了用户的IT资源投入和跨场景使用的成本。
本次演讲中,陈义贤老师将为参会者介绍酷克数据以Log is Database的思路在分布式数据仓库改造中的具体技术方案,以及这一方案如何帮助企业更好地支撑实时数仓和HTAP业务。
演讲内容干货满满,敬请关注!
观展交流 等您前来!
在DTCC 现场,设有酷克数据展位(展位号:F5),展示HashData云数仓产品架构、解决方案及丰富的应用案例。真诚邀请您莅临展台参观咨询,并有机会获取精美礼品。