StarRocks Friends 上海站活动回顾(含 PPT 下载链接)

news2024/9/28 11:22:19

6月17日, StarRocks & Friends 上海站活动如期而至,近百位社区小伙伴参与交流活动;针对 StarRocks 存算分离、StarRocks 在业界的应用实践、以及 StarRocks 与 BI 结合、湖仓一体规划等话题展开激烈的交流互动。

本文总结了技术交流活动的关键内容和视频资料,感谢社区每一位小伙伴的支持和参与,未来我们也会继续与大家分享更多优质的内容!

StarRocks & Friends 上海站精彩回顾

议题一:深入探索 StarRocks 存算分离架构

讲师简介:蔡小华,StarRocks Active Contributor

StarRocks 3.0 版本正式支持存算分离架构,能更好的解决存算一体架构面临的成本、弹性、资源隔离等挑战。基于存算分离架构,通过采用S3/HDFS等共享存储,帮助用户节省 80% 的存储成本,并实现秒级弹性伸缩,在后续版本还会提供 Multi-warehouse 的能力,不同的 workload 通过不同的 Warehouse 来承载,实现资源隔离,按需弹性。

当前多位社区用户已在真实业务场景测试了存算分离架构,导入、查询性能均能满足业务需求,在开启本地 Cache 时,存算分离架构能达到跟存算一体架构相同的性能。

深入探索 StarRocks 存算分离架构_哔哩哔哩_bilibili

议题二:StarRocks 在携程的应用实践

讲师简介:魏宁,携程大数据平台开发专家

在携程 OLAP 系统演进中,StarRocks 凭借其极速查询性能、架构简单易运维、支持标准 SQL等特点,在酒店实时业务数据、酒店调价、机票 fltinsight、火车票指标平台和酒店核算等十几个业务中得到了广泛应用,基于 StarRocks 的方案相比原有方案有10+倍性能提升。

随着 StarRocks 在携程的使用规模不断扩大,携程大数据平台通过 Tablet 治理、大表治理、导入治理、SQL 优化等手段确保 StarRocks 在携程的稳定运行,上线至今0故障。未来携程会继续与 StarRocks 社区深入合作,推进湖仓融合一体化,实现高效的数据管理。

StarRocks 在携程的应用实践_哔哩哔哩_bilibili

议题三:利用 StarRocks 构建中欧财富未来数仓

讲师简介:崔深圳,中欧财富数据平台负责人

面对不断增加的数据复杂度、业务模块增多以及数据要求提高等需求,经过一年多的探索,StarRocks 已成为中欧财富数据平台的统一 OLAP 引擎,通过 StarRocks 特有的主键模型(2000+张主键模型表上线服务),在保证高查询性能的情况下支持实时更新/删除,成功支持理财师服务、数据分析服务、用户服务等多个业务场景的稳定运行。

StarRocks 的应用降低了系统整体复杂性、运维成本,中欧财富将持续关注 StarRocks 物化视图、存算分离、主从集群同步等功能,并与 StarRocks 社区共同探索未来数仓解决方案。

利用 StarRocks 构建中欧财富未来数仓_哔哩哔哩_bilibili

议题四:StarRocks 在唯品会的自动化同步实践

讲师简介:聂凡博,唯品会大数据组件研发负责人

随着唯品会 Business Report、Business Decision、System Monitor 等不断增加的 OLAP 应用场景,现有架构无法满足需求,StarRocks 凭借其优秀的架构设计和性能表现脱颖而出。 基于 StarRocks ,唯品会实现了自动化出仓方案,基于统一的 Hive 元数据,与 Spark、Flink 集成,实现数据的自动同步和更新,实现对业务的透明查询加速。

唯品会将持续关注 StarRocks 外表物化视图、存算分离等能力,与社区一同探讨查询路由、离线环境和存算分离等方面的发展,进一步优化数据处理和分析的能力。

StarRocks 在唯品会的自动化同步实践_哔哩哔哩_bilibili

议题五:大数据时代 BI 的挑战与应对

讲师简介:武鹏,观远数据后端开发专家

在面对数据规模增加、数据质量保证、数据多样性处理等挑战时,观远在应对复杂数据处理挑战方面采取了一系列策略,通过存算分离架构实现灵活的数据计算,直接对接数据湖来简化数据管理,内置多种计算引擎来满足不同应用场景的查询需求。 观远将积极探索与开源组件的合作,与 StarRocks 进行更深度的连接,充分发挥 StarRocks 的极速查询、物化视图等能力优势;同时持续关注技术趋势、新兴技术如人工智能和机器学习在 BI 中的应用,以及数据驱动决策的进一步发展。

观远数据-大数据时代 BI 的挑战与应对_哔哩哔哩_bilibili

PPT 资料下载

https://forum.mirrorship.cn/t/topic/7388

现场精彩照片

​如果还没听过瘾, 第三站-广州站即将在 7 月开启。广州小伙伴们记得关注 StarRocks 公众号第一时间获取活动信息!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/688217.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

未来的彩电,彩电的未来

疫情后的首个线上大促已经结束,“史上投入最大618”也没能抵住彩电市场整体的需求疲软。 根据奥维云网线上推总数据,2023年618期间,中国彩电线上市场零售量规模为249.9万台,同比下降12.9%;零售额规模为79.7亿元&#…

配电柜(箱)使用防雷浪涌保护器的作用和方案

配电箱是电力系统中的重要组成部分,负责将电力从供电系统输送到各个电器设备。然而,由于天气状况和其他因素的影响,电力系统可能会受到雷击引起的浪涌电压的威胁。为了保护配电箱和其中的设备免受浪涌电压的破坏,我们需要在配电箱…

Redis中3大特殊数据结构(2)-HyperLogLog

HyperLogLog算法是法国人Philippe Flajolet 教授发明的一种基数计数概率算法,每个 HyperLogLog 键只需要花费 12 KB 内存,就可以计算接近 2^64 个不同元素的基数。HyperLogLog 适用于大数据量的去重统计,HyperLogLog 提供不精确的去重计数方案…

基于Java+Swing实现餐厅点餐系统

基于JavaSwing实现餐厅点餐系统 一、系统介绍二、系统展示1.主页2.点菜3.下单4.结算5.销售情况(管理员) 三、系统实现四、其他系统五、获取源码 一、系统介绍 该系统针对两个方面的用户,一个是用餐客户,另一个是餐厅管理员。将功…

iOS 17 beta 2有哪些BUG?iOS 17 beta 2推荐升级吗?

虽然iOS 17 beta 2 带来了大量的功能更新,但毕竟是测试版,海量的适配BUG也一同随之而来。 想升级iOS 17 beta 2的用户不妨先查看下目前存在的问题汇总! 一:存储空间更小了 升级beta1后存储空间缩小了大概3G左右,bet…

k8s网络通信

详解Kubernetes网络模型 Kubernetes 是为运行分布式集群而建立的,分布式系统的本质使得网络成为 Kubernetes 的核心和必要组成部分,了解 Kubernetes 网络模型可以使你能够正确运行、监控和排查应用程序故障。 网络所涉及的内容很多,拥有许多…

人人都能生成火爆全网的最不像二维码的二维码!

Sealos 公众号已接入了 GPT-4,完全免费!欢迎前来调戏👇 最近有人展示了使用 Stable Diffusion 创建的艺术二维码。这些二维码是使用定制训练的 ControlNet模型生成的。 但是操作门槛有点高。 你需要 GPU,还需要学习如何使用 Stabl…

diffusion model(二)—— DDIM技术小结

论文地址:Denoising Diffusion Implicit Models github地址:https://github.com/ermongroup/ddim 背景 去噪扩散概率模型 (DDPM1) 在没有对抗训练的情况下实现了高质量的图像生成,但其采样过程依赖马尔可夫假设,需要较多的时间…

SoapUI实践:自动化测试、压力测试、持续集成

因为项目的原因,前段时间研究并使用了 SoapUI 测试工具进行自测开发的 api。下面将研究的成果展示给大家,希望对需要的人有所帮助。 如果你想学习自动化测试,我这边给你推荐一套视频,这个视频可以说是B站播放全网第一的自动化测试…

Android View的渲染过程

原文链接 Android View的渲染过程 对于安卓开发猿来说,每天都会跟布局打交道,那么从我们写的一个布局文件,到运行后可视化的视图页面,这么长的时间内到底 发生了啥呢?今天我们就一起来探询这一旅程。 View tree的创建…

A Survey on In-context Learning

这是LLM系列相关综述文章的第二篇,针对《A Survey on In-context Learning》的翻译。 上下文学习综述 摘要1 引言2 概述3 定义和公式4 模型预热4.1 监督上下文训练4.2 半监督上下文训练 5 示例设计5.1 示例组织5.1.1 示例选择5.1.2 示例排序 5.2 示例形式化5.2.1 指…

Segment Anything Model Geospatial (SAM-Geo) 创建交互式地图

SAM-Geo是一个用于地理空间数据的Python 包,可在 PyPI 和 conda-forge 上使用。本节教程是SAM-Geo官网的一个教程,根据输入提示范围创建mask遮罩。后面还有一种基于提示词创建的方式,如只输出房屋、道路、树木等,下一期我们专门写…

IEEE Transactions的模板中,出现subfig包和fontenc包冲突的问题,怎么解决?

IEEE Transactions的模板中,出现subfig包和fontenc包冲突的问题,怎么解决? 本文章记录如何在IEEE Transactions的模板中,出现了subfig包和fontenc包冲突的问题,该怎么解决。 目录 IEEE Transactions的模板中&#xff…

ubuntu系统解压.rar文件问题与解决办法

ubuntu20.04解压rar文件 问题解决办法 问题 在ubuntu系统中,直接解压rar文件可能会报错,或者一直在提取文件中,无法结束。 例如直接右件该rar文件,将文件提取到此处 一直显示这个,无法结束 解决办法 需要安装一些软…

架构师进阶之路 - 架构优化为什么难

目录 业务迭代和技术优化难以兼顾 缺少“上帝”视角思维 系统架构腐化 缺少架构师视角 系统迭代机制 设计规范把控 最近在组织团队内的系统架构优化,总而言之就是难,至于为什么难我这边总结了以下六个方面,记录一下自己的架构师进阶之路吧。&…

css基础知识九:说说flexbox(弹性盒布局模型),以及适用场景?

一、是什么 Flexible Box 简称 flex,意为”弹性布局”,可以简便、完整、响应式地实现各种页面布局 采用Flex布局的元素,称为flex容器container 它的所有子元素自动成为容器成员,称为flex项目item 容器中默认存在两条轴&#xf…

微服务04 分布式搜索引擎 elasticsearch DSL数据聚合 自动补全 数据同步 集群

微服务03 分布式搜索引擎 elasticsearch ELK kibana RestAPI 索引库 DSL查询 RestClient 黑马旅游 分布式搜索引擎03 1.数据聚合 聚合(aggregations)可以让我们极其方便的实现对数据的统计、分析、运算。例如: 什么品牌的手机最受欢迎&#x…

【Redis】Redis cluster 集群原理

前言 介绍优点: redis cluster集群模式,既拥有哨兵模式高可用、自动主从切换、高性能的特点,又解决了其只有单主结点承载数据量小的缺点。集群模式可以有多主结点,数据分散到多个主节点上,可以动态扩容。 槽分区的特点…

Rust in Action笔记 第七章 文件和存储

serde 库提供序列化(serialize)和反序列化(deserialize)的特征,通过derive生成,可以把rust的自定义类型(struct)转换成多种常用的兼容类型例如JSON、CBOR、bincode,用于在…

Hive函数(二)

1、炸裂函数 1.1、UDTF概述 定义: UDTF(Table-Generating Functions),接收一行数据,输出一行或多行数据。 1.1.1、explode(ARRAY a) 功能: 语法: select explode(array("a","b",&q…