أقترح أن تقرأ فك تشفير تقرير 2017 من قبل إيغور ستريخار "ClickHouse - تحليل البيانات المرئية والسريعة بصريًا في Tabix".
واجهة ويب لـ ClickHouse في مشروع Tabix.
دلائل الميزات:
- يعمل مع ClickHouse مباشرة من المتصفح ، دون الحاجة إلى تثبيت برامج إضافية ؛
- أبرز بناء الجملة محرر الاستعلام
- الإكمال التلقائي للفرق ؛
- أدوات التحليل الرسومي لتنفيذ الاستعلام ؛
- مخططات الألوان للاختيار من بينها.
![](https://habrastorage.org/webt/10/t3/se/10t3sel6gvtt2x2ggbzy2rjqyry.png)
![](https://habrastorage.org/webt/lj/nx/08/ljnx08sqikrcvju_cjcn99ife88.png)
أنا المدير الفني لوسائل الإعلام 2. نحن مجمع أخبار تبادل الأخبار. نقوم بتخزين الكثير من البيانات التي نتلقاها من شركائنا وتسجيلها في ClickHouse - حوالي 30،000 طلب في الثانية.
هذه هي البيانات مثل:
- نقرات الأخبار.
- يعرض الأخبار في المجمع.
- يعرض لافتات على شبكتنا.
- ونقوم بتسجيل الأحداث من مكتبنا الخاص ، والذي يشبه Yandex.Metrica. هذا هو التحليل الدقيق الخاص بنا.
![](https://habrastorage.org/webt/vn/td/c_/vntdc_ihesxo8ghx_ifgm0k8epo.png)
كانت لدينا حياة محمومة للغاية قبل ClickHouse. شعرنا بالعذاب الشديد ، محاولين تخزين هذه البيانات في مكان ما وتحليلها بطريقة أو بأخرى.
الحياة قبل ClickHouse - infiniDB
أول شيء لدينا كان infiniDB. عاشت معنا لمدة 4 سنوات. بدأنا بصعوبة.
- . .
- . , CSV- - .
- . , . .
- . , .
2016 , ClickHouse.
ClickHouse — Cassandra
. . infiniDB , , - , .
. Cassandra. Cassandra . 10 000 . 2 000 - .
. . , Cassandra. . .
ClickHouse – Druid
, . 2016 Druid.
Druid – , Java. . clickstream, - .
Druid 0.9.X.
. . - . .
, - . OpenSource – Tranquility, . , .
- . , , , , . - , . . . , , . . . , .
![](https://habrastorage.org/webt/sh/c-/or/shc-ormtiwe8hlupjaun76rq4du.png)
. , habr, , ClickHouse. , .
2 ClickHouse. . infiniDB – , Druid – . Cassandra . php Cassandra , .
![](https://habrastorage.org/webt/gt/ao/zy/gtaozyt355vu8t6iyvq39mgubks.png)
? . . . . . ClickHouse – , .
![](https://habrastorage.org/webt/ks/ds/ej/ksdsej-t5vybm3-wbexr1xrv36a.png)
, ClickHouse OpenSource, . 2 web, , , . . .
![](https://habrastorage.org/webt/h_/hd/ls/h_hdlstm4ndmchpmxwaeevi_eye.png)
- ClickHouse. , :
, . . , .
![](https://habrastorage.org/webt/ej/kg/yl/ejkgyljzlotigwu02h0u7wqknds.png)
, Druid. Druid, SuperSet. . Druid .
ClickHouse . . . , , : SELECT event, GROUP BY event. ClickHouse.
![](https://habrastorage.org/webt/co/rl/7i/corl7itcrhehcvwt1goxnffci0m.png)
– Apache Zeppelin. . . , , . , - ClickHouse .
ClickHouse, . . , -. , . . .
![](https://habrastorage.org/webt/zy/fw/dm/zyfwdmhagvmsxod_li1zfib-lxu.png)
– Redash.IO. Redash . . . . DataSource. . . ClickHouse, MySQL, PostgreSQL .
![](https://habrastorage.org/webt/k4/21/nw/k421nw4tnsgyqxwhftxjwp1pe1i.png)
( 2017 ) Grafana. Grafana, , - , - ClickHouse . , . . . . - - , , ClickHouse.
![](https://habrastorage.org/webt/y8/tj/l2/y8tjl2w8ukyy87n8jocc8x23rj4.png)
. . EventSQL, SeperSet, Zeppelin.
![](https://habrastorage.org/webt/ej/iw/ej/ejiwej5zwhkwksgv6zoxy4tmiha.png)
? , , . ClickHouse – . , , . . . . , .
![](https://habrastorage.org/webt/kg/ff/nk/kgffnk-lcenlj3xppseyy-7m9ue.png)
3 . 330 Tabix.
, ClickHouse-Frontend, . Tabix.
?
. SQL ClickHouse. .
![](https://habrastorage.org/webt/6r/mq/4d/6rmq4dkd3xo4t1v7wbioukpf8w0.png)
Tabix. . – . – .
![](https://habrastorage.org/webt/bo/_q/nh/bo_qnhhpq2dyf2vrxe5bzclynro.png)
, .
![](https://habrastorage.org/webt/ip/if/7t/ipif7tlh4x9tnht7mer2cwi403k.png)
, , . . ctrl , . Tabix , . . ClickHouse.
![](https://habrastorage.org/webt/2d/nn/8b/2dnn8bqtcpxy167tkfzuaa7peba.png)
, , , . . , . , . . , .
![](https://habrastorage.org/webt/ic/zd/mn/iczdmnavxcgrjib_p-utl3wrr8i.png)
, , , ClickHouse . - , ClickHouse join, . , - , , , . 200-300 , - - .
, ( 13:46 https://youtu.be/w1-XsL3nbRg?t=826)
![](https://habrastorage.org/webt/3n/9h/ks/3n9hksc2k3gy_hqeupuvrea-hr0.png)
, . – , . – workspace. . .
. , Tabix, .
Hotkey – ( 14:39 https://youtu.be/w1-XsL3nbRg?t=879)
hotkey . . , .
![](https://habrastorage.org/webt/hj/7w/lr/hj7wlro7ml--wtl6qlxgkzbkiam.png)
, . . sin, cos tg. , . . . . - . , - . , - , - .
![](https://habrastorage.org/webt/hx/mb/ot/hxmbotoall-p01axivgnwvci6ue.png)
. , Redmine Markdown. - , . , «Copy to Redmine» Redmine Markdown Where.
![](https://habrastorage.org/webt/l_/ns/wm/l_nswmaevwawdkknuxbqkrvoq04.png)
– . «date». ClickHouse - , , . . . , , . . , . . . , , - .
Tabix «Stats», , . . , . .
. ClickHouse, - . - .
![](https://habrastorage.org/webt/wd/h2/ay/wdh2aypdci1xwavzx41-bj4kup0.png)
– . , : sin, cos 0 299. «Draw» sin cos.
![](https://habrastorage.org/webt/vy/1l/_0/vy1l_0nj5lwcqu9k_ko5z-b5lnq.png)
, . . . .
![](https://habrastorage.org/webt/nz/zj/o4/nzzjo4ujzv03mfr3ngnm2kdlff8.png)
.
![](https://habrastorage.org/webt/va/lf/yk/valfykyht3j5ewcqhu65ve39msm.png)
.
![](https://habrastorage.org/webt/wy/jx/bo/wyjxboohczywpeydzofra-k4nt4.png)
.
![](https://habrastorage.org/webt/a-/1h/jd/a-1hjdkqn0cspegz9l6sgff8obm.png)
. , , , . . , . .
![](https://habrastorage.org/webt/zg/do/0e/zgdo0ezkjdrlwblxmdtvmufs-ka.png)
– Treemap.
![](https://habrastorage.org/webt/yl/le/zb/yllezbf9hefvo-y5urwjwmwbbye.png)
![](https://habrastorage.org/webt/g_/y2/ia/g_y2iaoy8ppec39ozmk846xk0py.png)
Sankeys – . Streamgrahps, River. River. - . . .
![](https://habrastorage.org/webt/jy/sd/iu/jysdiufa39wfdklrccb2fanzwlu.png)
– . , , , , , , , . , , .
, , .
![](https://habrastorage.org/webt/jz/v3/-7/jzv3-7pf904we1b0gkbwlaluf_8.png)
Google map. , , Google map, .
, Tabix .
![](https://habrastorage.org/webt/cr/xn/n0/crxnn0y09czmh8nie3lefjj84om.png)
– ClickHouse. «», . , «referrer» - 730 Gb. , 700 GB, . . 2 TB, .
«request_id», . , .
.
![](https://habrastorage.org/webt/ue/nl/pc/uenlpc-eid88xnpm9xow58ykori.png)
– . realtime c ClickHouse , . Grafana. , .
![](https://habrastorage.org/webt/kw/v9/sc/kwv9scspb-fnrjedq_aimgqembe.png)
– . , . , . , 200 GB . . . 30 GB, . . .
![](https://habrastorage.org/webt/k9/_h/n0/k9_hn0nkl5tmcz84galxsk1qkgu.png)
! OpenSource
. , , OpenSource, . .
, ? ?
, . ., , . . , OpenSource. MySQL , , PostgreSQL. . . Tabix ClickHouse, .
, . . , , , . , php , . . . . ? ? .
. . 330 . , , . 3 . Javascript. , , Javascript, . , – , . .
! . Tableau ?
. Tabix , .
?
, .
, *Tableau*? ?
ClickHouse. Tableau, . , Tabix . , CSV BI. - . , , – . 5 000 , 6 000 , , .
. . - , ?
. , 10 000 . ?
, ? , ?
, , . -. -, . Tabix .
. ?
, .
ClickHouse, ClickHouse production-?
, . . . production 3. ETL, . . . , . MongoDB, Cassandra, MySQL. ClickHouse . . 3 . 6 . ClickHouse.
, . . . .?
Google map, .. . , .
– Google map. «DRAW_GMAPS», . «DRAW_YMAPS», . . .. Javascript, . . , ClickHouse Javascript, . , . , . . , , . .
. . ?
. , , , .
! , ClickHouse , . , , ClickHouse, . , , , - ? , – . ?
– , , -. , Druid, roadmap - 50 % – , . , ClickHouse. , , roadmap. , Data Science, . Tabix – . , Zeppelin. . Redash , , . SuperSet , . , , .
, Pull request ?
.
! . – Javascript. Javascript - - ?*
Javascript.
?
Angular.
. . R *Shiny**?*
. .
.
. , , , .
*, , .
, . . : «- . , ». . , , . . . – , R , «R ».
!
. - , ?
CSV, Excel.
, , ? , .
«» « png, jpg».
!
P.S. - tabix
- بفك الضغط ، انسخ الدليل
build
إلى nginx root_path - تكوين nginx