上海品茶

4. ClickHouse在苏宁用户画像场景的实践.pdf

编号:29692 PDF 32页 1.47MB 下载积分:VIP专享
下载报告请您先登录!

4. ClickHouse在苏宁用户画像场景的实践.pdf

1、ClickHouse 在苏宁用户画像场景的实践 二一九年十月 苏宁科技集团.大数据中心.杨兆辉 1 关亍我 苏宁科技集团大数据中心架构师 曾就职亍中兴通讯10+years ,从事大规模分布式系统研发 10+years C+、Java、Go编程经验,熟悉大数据架构、解决方案 ClickHouse Contributor Github: https:/ Contents 苏宁如何使用ClickHouse ClickHouse集成Bitmap 用户画像场景实践 2 选择ClickHouse的原因 1. 速度快 2. 特性发布快 3. 软件质量高 4. 物化视图 5. 高基数查询 6. 精确去重计数(

2、count distinct) 3 精确去重计数性能测试 4亿多的数据集上,去重计算出6千万整形数值, 非精确去重函数:uniq、uniqHLL12、uniqCombined 精确去重函数:uniqExact、groupBitmap 函数函数 时长(秒)时长(秒) 去重后个数去重后个数 误差个数误差个数 误差率误差率 uniq(id) 1.554 63195280 155973 0.25% uniqHLL12(id) 1.341 63331662 292355 0.46% uniqCombined(id) 1.613 62859215 -180092 -0.29% uniqExact(id)

3、50.437 63039307 0 0% groupBitmap(id) 7.038 63039307 0 0% 4 精确去重计数性能测试 1.554 1.341 1.613 50.437 7.038 0 10 20 30 40 50 60 时长 结论: 整形值精确去重场景,groupBitmap 比 uniqExact至少快 2x+ groupBitmap仅支持整形值去重, uniqExact支持任意类型去重。 非精确去重场景,uniq在精准度上有优势。 5 0.25 0.46 0.29 0 0 0 0.05 0.1 0.15 0.2 0.25 0.3 0.35 0.4 0.45 0.5 误差率 精确去重计数性能测试 6 ClickHouse在苏宁使用场景 OLAP平台存储引擎 - 存储时序数据、cube加速数据,应用亍高基数查询、精确去重场景。 运维监控 - 实时聚合分析监控数据,主要

友情提示

1、下载报告失败解决办法
2、PDF文件下载后,可能会被浏览器默认打开,此种情况可以点击浏览器菜单,保存网页到桌面,就可以正常下载了。
3、本站不支持迅雷下载,请使用电脑自带的IE浏览器,或者360浏览器、谷歌浏览器下载即可。
4、本站报告下载后的文档和图纸-无水印,预览文档经过压缩,下载后原文更清晰。

本文(4. ClickHouse在苏宁用户画像场景的实践.pdf)为本站 (X-iao) 主动上传,三个皮匠报告文库仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对上载内容本身不做任何修改或编辑。 若此文所含内容侵犯了您的版权或隐私,请立即通知三个皮匠报告文库(点击联系客服),我们立即给予删除!

温馨提示:如果因为网速或其他原因下载失败请重新下载,重复下载不扣分。
客服
商务合作
小程序
服务号
会员动态
会员动态 会员动态:

 wei**n_... 升级为至尊VIP  139**46...  升级为标准VIP

wei**n_...   升级为标准VIP  wei**n_... 升级为高级VIP 

150**80... 升级为标准VIP  wei**n_... 升级为标准VIP

GT  升级为至尊VIP 186**25...  升级为标准VIP

wei**n_...  升级为至尊VIP  150**68... 升级为至尊VIP

wei**n_...  升级为至尊VIP  130**05...  升级为标准VIP

wei**n_... 升级为高级VIP wei**n_...  升级为高级VIP 

 wei**n_... 升级为高级VIP 138**96...  升级为标准VIP

  135**48... 升级为至尊VIP wei**n_...  升级为标准VIP

肖彦 升级为至尊VIP   wei**n_...  升级为至尊VIP

 wei**n_... 升级为高级VIP wei**n_...  升级为至尊VIP

国**...  升级为高级VIP  158**73... 升级为高级VIP

wei**n_... 升级为高级VIP   wei**n_... 升级为标准VIP

wei**n_...  升级为高级VIP  136**79... 升级为标准VIP 

沉**... 升级为高级VIP   138**80... 升级为至尊VIP 

138**98...   升级为标准VIP wei**n_...  升级为至尊VIP 

wei**n_...  升级为标准VIP  wei**n_... 升级为标准VIP

 wei**n_... 升级为至尊VIP 189**10...  升级为至尊VIP

 wei**n_... 升级为至尊VIP  準**...  升级为至尊VIP

151**04... 升级为高级VIP   155**04...  升级为高级VIP

 wei**n_...  升级为高级VIP sha**dx... 升级为至尊VIP

186**26...  升级为高级VIP  136**38...  升级为标准VIP 

182**73...  升级为至尊VIP   136**71... 升级为高级VIP

139**05...  升级为至尊VIP wei**n_... 升级为标准VIP 

wei**n_...  升级为高级VIP wei**n_...  升级为标准VIP

微**... 升级为标准VIP   Bru**Cu... 升级为高级VIP

155**29...  升级为标准VIP  wei**n_...  升级为高级VIP

 爱**... 升级为至尊VIP  wei**n_... 升级为标准VIP

wei**n_...   升级为至尊VIP  150**02... 升级为高级VIP

wei**n_...   升级为标准VIP  138**72... 升级为至尊VIP 

wei**n_... 升级为高级VIP   153**21... 升级为标准VIP 

 wei**n_... 升级为高级VIP   wei**n_...  升级为高级VIP

 ji**yl 升级为高级VIP   DAN**ZD... 升级为高级VIP 

wei**n_... 升级为至尊VIP  wei**n_...  升级为高级VIP

wei**n_... 升级为至尊VIP 186**81... 升级为高级VIP 

 wei**n_... 升级为高级VIP  wei**n_... 升级为高级VIP

 wei**n_... 升级为至尊VIP  wei**n_...  升级为标准VIP

wei**n_...  升级为高级VIP 升级为至尊VIP

msl**ng  升级为高级VIP  刷** 升级为至尊VIP

 186**12... 升级为高级VIP  186**00...  升级为至尊VIP

182**12... 升级为高级VIP   185**05... 升级为至尊VIP

Za**ry  升级为标准VIP  wei**n_...  升级为高级VIP

  183**46... 升级为高级VIP 孙**  升级为标准VIP 

wei**n_...   升级为至尊VIP wei**n_...   升级为高级VIP

wei**n_...  升级为至尊VIP   微**... 升级为至尊VIP

 180**79... 升级为标准VIP Nik**us 升级为至尊VIP

138**86...  升级为高级VIP  wei**n_... 升级为标准VIP 

 183**37... 升级为高级VIP  wei**n_... 升级为标准VIP 

wei**n_... 升级为标准VIP  159**85...  升级为至尊VIP 

137**52...  升级为高级VIP 138**81...  升级为至尊VIP