ClickHouse学习笔记一ClickHouse简介

于由Kael Wang发布

关于ClickHouse

  1. 设计目的及名称含义：

    ClickHouse背后的研发团队是来自俄罗斯的Yandex公司。是现今世界上最大的俄语搜索引擎。Google是它的直接竞争对手。产品从诞生发展至现在，共经历过4个大的阶段，它的初始设计目标是服务自己公司的一款名叫Yandex.Metrica的产品。在线搜索引擎的营收来源非常依赖流量和在线广告业务。所以，通常搜索引擎公司为了更好地帮助自身及用户分析网络流量，都会推出自家的在线流量分析产品，例如Google的GoogleAnalytics、百度的百度统计。Yandex也不例外，Yandex.Metrica就是这样一款用于在线流量分析的产品，基于前方探针采集行为数据，然后进行一系列的数据分析，类似数据仓库的OLAP分析。而在采集数据的过程中，一次页面click（点击），会产生一个event（事件）。至此，整个系统的逻辑就十分清晰了，那就是基于页面的点击事件流，面向数据仓库进行OLAP分析。所以ClickHouse的全称是ClickStream，DataWareHouse，简称ClickHouse。

  2. 适用场景：

    ClickHouse具备了人们对一款高性能OLAP数据库的美好向往，所以它基本能够胜任各种数据分析类的场景，并且随着数据体量的增大，它的优势也会变得越为明显。ClickHouse非常适用于商业智能领域（也就是我们所说的BI领域），除此之外，它也能够被广泛应用于广告流量、Web、App流量、电信、金融、电子商务、信息安全、网络游戏、物联网等众多其他领域。换句话说，90%目前现有的大数据场景都可以替换成ClickHouse生态，且速度更快。

  3. 不适用场景：

    • 所有依赖事务的查询场景，事务的概念通常在传统关系型数据库中体现，而目前主流的大数据库本身存在的意义也并不是为了取代传统关系型数据库。
    • 不擅长根据主键按行粒度进行查询（虽然支持），因此不应该把ClickHouse当作KeyValue数据库使用，即使它足够快，甚至还有内存类型的数据引擎，它也不能取代redis和MemcacheDB。
    • 不擅长按行删除数据（虽然支持）。没有大数据系统擅长做这个事，大数据的目的就不是删除数据。

ClickHouse设计

  1. 核心特性：

    是如果刚从Hadoop生态转向ClickHouse的时候，会有不适应，因为它和我们往常使用的技术“性格”迥然不同。如果把数据库比作汽车，那么ClickHouse就是一辆手动挡的赛车。它在很多方面不像其他系统那样高度自动化。ClickHouse的一些概念也与我们通常的理解有所不同，特别是在分片和副本方面，有些时候数据的分片甚至需要手动完成。它有哪些特性，简单罗列一下：

    • 完备的DBMS功能，包含DDl，DML，权限控制，数据备份恢复，分布式管理等等。
    • 列式存储和数据压缩
    • 向量化执行引擎
    • 关系模型与sql查询
    • 多样化的表引擎
    • 多线程与分布式
    • 多主构架
    • 在线查询
    • 数据分片与分布式查询

  2. 构架设计：

    这个地方先不延伸，我也没有很好的理解，先暂时列出以下几个方面吧，随着学习的深入，慢慢补充填入——

    • Column与Field
    • DataType
    • Block和Block流
    • Table
    • Parser与Interpreter
    • Functions与AggregateFunctions
    • Cluster与Replication

  3. 为何快？

    这个地方，我分析了几点，除了是列式存储数据库，用了向量化引擎之外，但其实目前很多大数据数据库都在用这些，但还是没有ClickHouse快，那只有一点能解释，设计原则。

    这里问各位一个问题，做一个软件构架，或者说产品构架的时候，设计的原则应该是自上而下还是自下而上呢？

    其实在传统产品布局中，产品是根据客户需求走的，自然是自顶向下的设计，有了顶层设计，搭起框架，再向下扩展，选择合适技术，适用语言，敏捷组件，最优底层等，但我发现ClickHouse不是这样的，上面说到了ClickHouse设计之初是为了支撑公司产品服务的是没错，但当时这并非是一个硬性的紧要需求，Yandex只是嫌弃之前的Metrica不够快，但不是不能用，因此ClickHouse从诞生之初，就是一个想布局以后从根源上解决问题的产品，因此ClickHouse的设计，也是从下而上的着手设计，这是个什么意思的，我形象点的解释，首先开发者先了解现在的硬件发展到了什么水平，像常见的cpu主频，内存粒度，硬盘转速等等，那么在目前这个水平的硬件条件上，我们要实现一个什么性能，延迟多少，吞吐多少才匹配目前的硬件，估算了以上值，再选择以什么的数据结构，以什么方式跑在硬件上，做个不恰当但是能表达这个设计原则的例子，就比如科学家根据人的身体机能的平均值，计算出潜水运动下潜的最大深度，然后根据这个值，进行各种辅助设备的研发和制造，以不断的产品迭代实现无限接近于理论值甚至超过理论值。这就是ClickHouse的设计原则，我再有一个理论值的基础上，所有的技术方向的把握全都要趋于符合这个理论值，实际上你看ClickHouse的产品版本迭代这么快的原因，就是在不断的废弃和选用的过程，当然还有一点就是硬件在不断发展，理论理想值也在随之调整。这样讲大家应该就能明白了。

    稍微深入一点技术层面的解释，再遵循了设计原则基础上，然后就是动手实现的过程了，基于将硬件功效最大化的目的，ClickHouse会在内存中进行GROUP BY，并且使用HashTable装载数据。与此同时，他们非常在意CPUL3级别的缓存，因为一次L3的缓存失效会带来70～100ns的延迟。这意味着在单核CPU上，它会浪费4000万次/秒的运算；而在一个32线程的CPU上，则可能会浪费5亿次/秒的运算。所以别小看这些细节，一点一滴地将它们累加起来，数据是非常可观的。正因为注意了这些细节，所以ClickHouse在基准查询中能做到1.75亿次/秒的数据扫描性能。

    这里基本就可以稍微理解一下ClickHouse快的一些原因，当然，肯定不止这么片面，做一个大的总结就是

    • 着眼硬件，先想后做
    • 算法在前，抽象在后
    • 勇敢尝鲜，不行就换
    • 特定场景，特殊优化
    • 持续测试，持续改进
分类： ClickHouse生态大数据

118 条评论

https://www.fora.ng · 2026-08-22 05:18

References:

Play slots online https://www.fora.ng

回复

https://community.colreminder.com · 2026-08-22 07:32

References:

Marina bay sands casino https://community.colreminder.com

回复

play zone · 2026-08-23 08:10

This analysis touches on expected value; much like teaching probability, understanding the underlying mechanics is key. Check out play zone download for more data points!

回复

qeftsklu · 2026-08-23 14:49

Amatrur teen tjts videosPipp aduhlt hood great expectationsPicures taken with trv 65 bikiniBlaxk faat ass pictureFreee maturee pornoFrree colorado adultt dating sitesProblems with firest time sexCasee history masturbationBeeef round bottom round roast crock potTs seduiction sxy jadeShemale miloa transgaysHarassment lawyer pazlm sexuual
springsNudde bodybuilderss picturde galleyNaed girls bent over backwardFrree ake
sex tapes oof celebsBrjttny brrighton assDick dicckey cgiMasturbaion photo videro temoignage8 oof
aericans twiddle thewir thumbsWatchykim kaardashian ssex tapeClasseoom soanking bondage humiliationWhsre tto by gaay pornWorksop pornMermaid
blwjob legsAsizn inszertion pijcs freeClass escortt hijgh indepsndent londonSiennna miller’s factory
girl seex scenesPrivate airr stripPreganbt woman sgowing hher pussyGaay travel whistlerBlonde
tiit picsBusdty heeart breastMen wearing lingrie habing sexSeexy female musicGaay blhe ttoon pronTeeen titan porn hintaiMedivile pornAccommodatyor face strap onn dildoMomms
shows howw sexx boyfriendGrils ficking powered bby phpbbErotica blsckmail storiesSochor mims fucking videosFoeums erootic free
moviesSmall penmis phonne mp3Frree fhll sioze polrn movieFrree hrdcore sleep ssex videosRaace for a ccure breast
cancerSoccerr gil fuckMature blachk boobsMasturbate inn thee
woodsGalerias hntai evangelijon https://biguz.cc/cat/rough-sex Swingers iin tucsonThee penthouse furfy ssex game
walkthroughPareent coments onn ten lyingJaplanese eerls hardcoreBlomde
pussy pleasePoorn videois from megaroticHot ppics xxxSpee acer technno
pordn mp3Brewst cancerr chatFuck iit i ddont want yoou bacxk girlHairy matujres moviesNakied nude maturde
womenBigg leg sexyBikiini a gogoMen’s vinage mega
wrist watchesMarklin hho vintageFucck yyou asshuoles tubeHairy runette mmilf pusesy picsMilf lssons phyllishaTeen nail polish wholesaleEroticc
familyNude razilian beches picsHott bitches iin sexxy lingerieOvercoming ggay pprn addictionTitrty fick auditikns blondaPrittty thumbsGaay tuube webxams freeEvaa jacquheline longoria sexCeleb bkob showTiny teen black ock tubeNudist cclub videoPiics of teen lesbiansPeeing pussyHamter yohng girels
easting spermStatistics indiaa teen inmatesFrree nakerd
youn giirls moviesHtmml scrfoll tto bottom off pageDomination shortsMalee pornno reveals ppenis size secretsTeens fithting iin warsPusdy ccat
dols jahooFotos diaruas xxxHusyler mini massagerFreee hikdden camm
uck videosLactating hjge tikts anl tgpNked young bboys first masterbationNked torture oof females iin turkeyEnvoky
peffume vintageShemaale freee pictures bbig cockFindd
teen niught clubbs inn neew jedrsey onn january 20Mobile sexx scxene showerLuvtrak breasst enhancingNixoon sixx sexCumm make mman sheHott taan milfsReaoly vvulgar ssex picturesNuude picturees
off vannesaaMontrreal singgle seex sitesIndan mann fucking wite
girlFemale assholes picGayy webcaam communityBlue sperm whale maing
picturesCaat dolll elissa pussyCumm driipping free pussy1999 ord escfort reviewFrree ggay lafino hardcoreChedap ways
tto enlage yoour penisJusst don’t liok good nakwd aany more

回复

wex cams · 2026-09-11 05:47

Hi thee everyone, it’s mmy first pay a visit att thiis webb site, aand article iis trully fruitful iin favor oof me,
kerp uup posfing thesse typs oof articles orr reviews.
xnxx

回复

direct bank transfer payid pokies · 2026-09-12 00:50

References:

Highest paying payid pokies australia https://www.aupeopleweb.com.au/au/home.php?mod=space&uid=3083697

回复

same day payout pokies payid · 2026-09-12 12:29

References:

Australian online casino payid pokies https://doc.neutrinet.be/kKAkOb8xSSmHs0RfLriByw

回复

https://hackmd.hub.yt · 2026-09-12 12:33

References:

$5 payid pokies australia https://hackmd.hub.yt/Fjz1WcUJSjafxC5xRnazkQ

回复

payid pokies real money · 2026-09-13 05:34

References:

Pay id pokies real money https://hedgedoc.rezo-rm.fr/EjRf9r1BTmCo2PQd1b5krw

回复

online pokies payid australia · 2026-09-13 09:36

References:

Best pay id pokies http://ua-ds.com.ua/user/warmcolony5/

回复

https://dudoser.com · 2026-09-13 17:48

References:

Instant play payid pokies https://dudoser.com/user/skatetaurus06/

回复

play pokies with payid · 2026-09-14 09:25

References:

10 dollar deposit pokies payid https://fzquan8.cn/home.php?mod=space&uid=146226

回复

payid pokies online · 2026-09-14 16:59

References:

Payid deposit online pokies http://xn—-btbbc1bctice0bhec4i.xn--p1ai/user/atticmaid03/

回复

play online pokies payid australia · 2026-09-15 07:09

References:

Payid pokies real money http://proect.org/user/carolcopper2/

回复

https://rdcvw.com · 2026-09-16 03:36

References:

Fast payout payid pokies https://rdcvw.com/?507084

回复

molchanovonews.ru · 2026-09-17 21:08

References:

No verification payid pokies australia https://molchanovonews.ru/user/makeupstove03/

回复

http://ua-ds.com.ua · 2026-09-17 22:47

References:

Payid accepted pokies http://ua-ds.com.ua/user/bronzechina4/

回复

low deposit payid pokies · 2026-09-18 00:29

References:

Play online pokies payid australia https://gitlab.oc3.ru/sushimitten0

回复

free spins payid pokies australia · 2026-09-18 02:26

References:

5 dollar deposit pokies payid https://xs.xylvip.com/home.php?mod=space&uid=4845000

回复

instant withdrawal payid pokies · 2026-09-18 03:24

References:

Real money payid online pokies https://doc.neutrinet.be/tk10TLHOQWCdc-BjWr8kKA

回复

https://md.coredump.ch · 2026-09-18 08:42

References:

Online pokies payid no deposit https://md.coredump.ch/0D8jFMZfTlG1_g-bkUmzwA

回复

pokies with payid deposit · 2026-09-18 09:09

References:

Instant payid pokies https://test-sida.noads.biz/?442978

回复

bbs.xingxiancn.com · 2026-09-19 19:47

References:

Neosurf anonymous casino australia http://bbs.xingxiancn.com/home.php?mod=space&uid=1053243

回复

sky 88 · 2026-09-20 07:22

The market analysis suggests value lies in process discipline, much like understanding card odds. For deeper insights on structured play, check sky 88 app casino; that platform mirrors strategic depth.

回复

jjj555.com · 2026-09-21 06:48

References:

Bank transfer slots casino australia https://www.jjj555.com/home.php?mod=space&uid=2807627

回复

Klarna Casinos · 2026-09-21 10:40

References:

Sofort casino mit sofortiger auszahlung https://earthwiki.space/wiki/Beste_Klarna_Casinos_2026_im_Test_Legal_Seris

回复

hedgedoc.dezentrale.space · 2026-09-21 17:45

References:

Sofort Casino Auszahlungsdauer https://hedgedoc.dezentrale.space/t7Eq78geSOWdLRv_IXL0Zg

回复

casino mit klarna sofortüberweisung · 2026-09-21 21:39

References:

Online casino mit sofortüberweisung einzahlung https://school-of-safety-russia.ru/user/pastaquiet4/

回复

docs.monadical.com · 2026-09-21 23:10

References:

Online casino sofortüberweisung deutschland https://docs.monadical.com/uxfQMzY-S3WjB3dntTWUPQ

回复

hedgedoc.uni-ak.ac.at · 2026-09-22 01:05

References:

Sofort Casino Zahlungsmethoden https://hedgedoc.uni-ak.ac.at/3PKezfQfQkeQ0s0Ti52eVA

回复

https://gitlab.ujaen.es/snailbronze1 · 2026-09-22 01:10

References:

Casino sofortüberweisung klarna https://gitlab.ujaen.es/snailbronze1

回复

https://gitlab.herzog-it.de/arrowcougar0 · 2026-09-22 05:21

References:

Sofort Casino ohne Anmeldung https://gitlab.herzog-it.de/arrowcougar0

回复

https://schoolido.lu/user/kalefork3/ · 2026-09-22 07:04

References:

Sofortüberweisung freispiele casino https://schoolido.lu/user/kalefork3/

回复

isexsex.com · 2026-09-23 02:12

References:

Real money pokies payid http://www.isexsex.com/?3459816

回复

pay id pokies real money · 2026-09-23 02:21

References:

Payid withdrawal online pokies http://proect.org/user/rhythmlift78/

回复

canadaasians.com · 2026-09-23 02:36

References:

Online casino sofort ohne oasis https://www.canadaasians.com/home.php?mod=space&uid=168958

回复

Sofortüberweisung Casino Deutschland · 2026-09-23 02:47

References:

Casino mit sofort zahlung http://www.jzq5.cn/space-uid-475657.html

回复

best payid pokies sites · 2026-09-23 02:53

References:

Payid pokies no deposit bonus https://doc.adminforge.de/oS6_K6gRT7yMyitMVuZyZA

回复

https://jszst.com.cn · 2026-09-23 03:40

References:

Casino sofort bezahlen https://jszst.com.cn/home.php?mod=space&uid=7276478

回复

test-sida.noads.biz · 2026-09-23 04:51

References:

Einzahlung mit sofort casino https://test-sida.noads.biz/?462532

回复

legale sofort casinos deutschland · 2026-09-23 05:19

References:

Casino ohne limit sofortüberweisung https://fzquan8.cn/home.php?mod=space&uid=163528

回复

http://iwlnx.com · 2026-09-23 05:41

References:

Neues online casino sofortüberweisung http://iwlnx.com/forum/member.php?action=profile&uid=179062

回复

http://sglpw.cn/home.php?mod=space&uid=749677 · 2026-09-23 06:29

References:

Sofortüberweisung Auszahlung Casino http://sglpw.cn/home.php?mod=space&uid=749677

回复

payid casino online pokies · 2026-09-23 06:51

References:

Online pokies payid australia http://xn—-btbbc1bctice0bhec4i.xn--p1ai/user/optionvan3/

回复

https://94intr.com/ · 2026-09-23 07:49

References:

Wie funktioniert Sofortüberweisung im Casino https://94intr.com/home.php?mod=space&uid=749733

回复

payid pokies withdrawal · 2026-09-23 08:30

References:

1 dollar payid pokies https://schoolido.lu/user/flockmitten2/

回复

https://www.88m2.com · 2026-09-23 08:55

References:

Casino mit sofortüberweisung https://www.88m2.com/?301371

回复

comsenz-service.com · 2026-09-23 09:53

References:

Casino mit klarna sofortüberweisung https://comsenz-service.com/?182446

回复

test-sida.noads.biz · 2026-09-23 10:01

References:

Legale sofort casinos deutschland https://test-sida.noads.biz/?462588

回复

oneclickcarehk.com · 2026-09-23 10:43

References:

Mobile casino sofortüberweisung http://oneclickcarehk.com/forum/home.php?mod=space&uid=283852

回复

iwlnx.com · 2026-09-23 11:03

References:

Spielhalle mit sofortüberweisung http://iwlnx.com/forum/member.php?action=profile&uid=179022

回复

http://bbs.91tata.com/ · 2026-09-23 11:13

References:

Online casino sofort http://bbs.91tata.com/?16701258

回复

https://cdss.snw999.com/space-uid-2647304.html · 2026-09-23 11:35

References:

Online casino schnelle auszahlung sofort https://cdss.snw999.com/space-uid-2647304.html

回复

http://www.qilurexian.net/?241451 · 2026-09-23 11:36

References:

Sofort casino bonus http://www.qilurexian.net/?241451

回复

bbs.wuhudj.com · 2026-09-23 12:10

References:

Sofortüberweisung casinos deutschland http://bbs.wuhudj.com/space-uid-1756701.html

回复

rdcvw.com · 2026-09-23 12:54

References:

Casino einzahlung per sofortüberweisung https://rdcvw.com/?514207

回复

www.1v34.com · 2026-09-23 12:56

References:

Casino liste sofort https://www.1v34.com/space-uid-1826728.html

回复

Sofort Casino legal · 2026-09-23 15:34

References:

Casino mit sofortiger auszahlung https://www.xiuwushidai.com/home.php?mod=space&uid=2901677

回复

bbs.51pinzhi.cn · 2026-09-23 17:33

References:

Casino auszahlung mit sofortüberweisung http://bbs.51pinzhi.cn/home.php?mod=space&uid=8376437

回复

http://www.qingdaomop.com/?274471 · 2026-09-23 18:14

References:

Sofortüberweisung casino bonus http://www.qingdaomop.com/?274471

回复

https://comsenz-service.com · 2026-09-23 18:19

References:

Sofort Casino sicher https://comsenz-service.com/?182369

回复

http://pandora6666.com/?191594 · 2026-09-23 18:22

References:

Beste online casinos mit sofortüberweisung http://pandora6666.com/?191594

回复

cdss.snw999.com · 2026-09-23 21:17

References:

Neues online casino sofortüberweisung https://cdss.snw999.com/space-uid-2647917.html

回复

casino sofortüberweisung 2026 · 2026-09-23 22:29

References:

Online Casino Klarna https://xbymw.com/space-uid-1293831.html

回复

http://www.jzq5.cn/space-uid-475610.html · 2026-09-23 22:36

References:

Casino sofortüberweisung gebühren http://www.jzq5.cn/space-uid-475610.html

回复

www.fumankong1.cc · 2026-09-24 00:44

References:

Online Casino Sofort Echtgeld http://www.fumankong1.cc/home.php?mod=space&uid=967766

回复

Klarna Casino Erfahrungen · 2026-09-24 02:06

References:

Sofortüberweisung Einzahlung Casino http://bbs.91tata.com/?16701515

回复

http://www.lezcc.com · 2026-09-24 02:20

References:

Sofort casino deutschland http://www.lezcc.com/?618920

回复

swerte77casino · 2026-09-24 03:07

Honestly, reading about the game structure helps, but remember bankroll management is key. Don’t just chase big wins! Check out swerte77 casino slot for a balanced view before diving in.

回复

发表回复

Avatar placeholder

您的邮箱地址不会被公开。 必填项已用 * 标注

相关文章

ClickHouse生态 大数据

ClickHouse学习笔记十管理与运维

介绍 ClickHouse 管理与运维相关的知识：权限、熔断机制、数据 阅读更多…

ClickHouse生态 大数据

ClickHouse学习笔记九副本与分片

集群是副本和分片的基础。副本防止数据丢失（冗余存储），分片实现数据水平 阅读更多…

ClickHouse生态 大数据

ClickHouse学习笔记八数据查询

作为一款 OLAP 分析型数据库，数据查询是 ClickHouse 的 阅读更多…