【Clickhouse】Clickhouse 精确去重计数性能测试

news2024/11/24 7:41:50

在这里插入图片描述

1.概述

4亿多的数据集上，去重计算出6千万整形数值，
非精确去重函数： uniq、 uniqHLL12、 uniqCombined
精确去重函数： uniqExact、 groupBitmap

在这里插入图片描述

在这里插入图片描述
结论：

整形值精确去重场景， groupBitmap 比 uniqExact至少快 2x+
groupBitmap仅支持整形值去重， uniqExact支持任意类型去重。
非精确去重场景， uniq在精准度上有优势。

案例如下

在这里插入图片描述

2.Bitmap位存储和位计算

每个bit位表示一个数字id，对亍40亿个的用户id，只需要40亿bit位，约477m大小

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/87025.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

中英文说明书丨艾美捷CD8α体内抗体介绍

艾美捷CD8α体内抗体英文说明： ICH1045 is up to 30% cheaper for academia & non-profits and up to 55% cheaper for industry than the equivalent product from Bio X Cell (BE0061). ICH1045UL is up to 31% cheaper for academia and up to 56% cheaper …

javaweb-Servlet的使用

xml设置创建项目需要勾选下图的创建xml(适用于3.0以下版本,3.0以上的可以跳过使用下面的注解开发) 创建完项目后,找到web—WEB-INF—web.xml配置以下代码 <?xml version"1.0" encoding"UTF-8"?> <web-app xmlns"http://xmlns.jcp.org/…

隔离系列宽电压输入正负高电压稳压输出高压稳压电源模块

特点效率高达 80%以上1*2英寸标准封装电源正负双输出稳压输出工作温度: -40℃~85℃阻燃封装，满足UL94-V0 要求温度特性好可直接焊在PCB 上应用 HRA 1~40W系列模块电源是一种DC-DC升压变换器。该模块电源的输入电压分为：4.5~9V、9~18V、及18~36VDC标准&…

使用SAS，Stata，HLM，R，SPSS和Mplus的多层线性模型HLM

简介最近我们被客户要求撰写关于多层线性模型的研究报告，包括一些图形和统计输出。本文档用于比较六个不同统计软件程序（SAS，Stata，HLM，R，SPSS和Mplus）的两级多层（也称分层或层次&…

8年软件测试开发薪水被应届生倒挂，32岁的我裸辞了...

今年 32 岁，我从公司离职了，是裸辞。前段时间，我有一件事情一直憋在心里很难受，想了很久也没找到合适的人倾诉，就借着今天写出来。我一个十几年测试经验，八年软件测试经验的职场老人，我慢…

Docker运行MySQL容器

目录一、宿主机与容器之间的文件拷贝 1.利用MySQL镜像安装MySQL服务 2.容器中怎么上传项目（文件） 3.从容器中拷贝文件到宿主机 4.从宿主机拷贝文件到容器二、数据卷三、数据卷容器四、Dockerfile 本次目标： 数据卷Dockerfile …

C++初阶作业 Stackqueue 作业题一

作者：小萌新专栏：C初阶作者简介：大二学生希望能和大家一起进步！ 本篇博客简介：实现几道Stack和queue的作业题 Stack queue作业题最小栈问题栈的压入弹出序列逆波兰表达式问题总结最小栈问题它问题的题目描述是这…

Kafka极客 - 13 Kafka 中的高水位和 Leader Epoch 机制

文章目录1. 什么是高水位？2. 高水位的作用3. 高水位更新机制1. Leader 副本高水位更新机制2. Follower 副本高水位更新机制4. 副本同步机制解析5. Leader Epoch你可能听说过高水位（High Watermark），但不一定耳闻过 Leader Epoch。…

【雷丰阳-谷粒商城】【分布式基础篇-全栈开发篇】【03】前端开发基础知识:ES6_Vue

持续学习&持续更新中… 学习态度：守破离【雷丰阳-谷粒商城】【分布式基础篇-全栈开发篇】【03】前端技术栈类比ES6简介什么是ECMAScriptES6新特性let、const解构表达式字符串扩展字符串模板函数优化对象优化map、reducePromise（异步编排&#xff…

第十四届蓝桥杯集训——JavaC组第十一篇——switch

第十四届蓝桥杯集训——JavaC组第十一篇——switch 目录第十四届蓝桥杯集训——JavaC组第十一篇——switch swtich概述 switch语法 default作用 switch基础示例： String类型switch示例 switch枚举判断巧用break 石头剪刀布测试代码： swtich概…