لاحظت مقارنة غير إيجابية للغاية بين Java و GO. الاختبار من قبل عدد كبير من المستخدمين .
قررت أن أتحقق مما إذا كان كل شيء وردية للغاية مع Go.
في المستقبل ، سأقول أنه عند التخزين المؤقت في الذاكرة وإنشاء JSON بسرعة ، تمكنت من الحصول على ما يصل إلى 120،000 [# / ثانية] على 8 نوى مادية.
البرنامج النصي لطلب GET الأساسي:
- إذا تم العثور على البيانات في ذاكرة التخزين المؤقت وكانت صالحة ، فإننا نشكل JSON من البنية
- إذا لم تكن هناك بيانات في ذاكرة التخزين المؤقت ، فإننا نبحث عنها في Bolt DB ، إذا وجدناها ، فإننا نقرأ JSON النهائي
- إذا لم تكن هناك بيانات في Bolt DB ، فإننا نطلبها من قاعدة البيانات ، احفظها في ذاكرة التخزين المؤقت في الذاكرة
- يتم تخزين البيانات الموجودة في ذاكرة التخزين المؤقت في الذاكرة في القناة العازلة ، بعد تراكم حوالي 10000 عنصر ، يتم التخلص منها على أنها حفظ واحد في Bolt DB
- إذا تم تغيير البيانات في قاعدة البيانات (تحديث / إدراج) ، فسيتم إرسال إشعار من خلال pg_notify ويتم وضع علامة على البيانات الموجودة في ذاكرة التخزين المؤقت على أنها غير صالحة ، في المرة التالية التي تتم قراءتها ، تتم قراءتها مرة أخرى من قاعدة البيانات
تحت نتائج اختبار القطع ، ورمز منضدة الاختبار GitHub
تحديث 05/06/2020
كانت هناك فرصة للاختبار في سحابة Oracle .
- يتم تجميع الحامل على 3 خوادم - 8 Core Intel (16 core core) ، 120 Memory (GB) ، Oracle Linux 7.7
- NVMe — 6.4 TB NVMe SSD Storage min 250k IOPS (4k block)
- — 8.2 Network Bandwidth (Gbps)
- PostgreSQL — 16 000 [get/sec], oncurrency 1024, 60 [ms]. Get 360 000 000 . JSON 1800 .
- — 100 000 — 120 000 [get/sec], oncurrency 1024, 2 [ms].
- PostgreSQL — 10 000 [insert/sec].
- 2 4 8 Core, .
- JSON Bolt DB 2 HDD, SSD
- PostgreSQL HDD SDD 100
- Bolt DB SDD HDD 100
- JSON " " 10 PostgreSQL SDD
- — Failed requests Concurrency 16 384
,
— GitHub. 4000 , .
, JSON encoder/decode — JSON 2 .
HTTP Get handler JSON
BenchmarkHandler_DeptGetHandler-2 1000000 41277 ns/op 4845.26 MB/s 10941 B/op 259 allocs/op
HTTP Get handler francoispqt/gojay
BenchmarkHandler_DeptGetHandler-2 1000000 13300 ns/op 15036.97 MB/s 3265 B/op 11 allocs/op
:
- PostgreSQL 11 Windows 10, — 30 .
- — 10 000 000 , 100 000 000 .
- JSON 1500 , 1 10 .
- — core i7-3770 — 4 core (8 thread), 16 , HDD (WD 2.0TB WD2000fyyz), SSD (Intel 530 Series).
- ApacheBench, concurrency level 1 4096, 1 000 000 .
- Windows, .
- RAID . .
:
Concurrency Level , ApacheBench " ".
GET PostgreSQL — HDD ( )
GET PostgreSQL — SSD ( )
GET BOLT DB — HDD (JSON BOLT DB)
GET BOLT DB — SSD (JSON BOLT DB)
GET
Oracle
Oracle 3- :
- VM.DenseIO2.8 — 8 Core Intel (16 virtual core), 120 Memory (GB), Oracle Linux 7.7
- NVMe — 6.4 TB NVMe SSD Storage (1 drives) min 250k IOPS (4k block)
- — 8.2 Network Bandwidth (Gbps)
- — PostgreSQL 12. .
- ApacheBench:
- concurrency level 4 16384
- 10 000 1 000 000 .
- 2 8 ApacheBench ( ab 1 )
GET
- JSON — 1800 . Dept 10 Emp.
- Dept — 33 000 000, Emp — 330 000 000 .
:
- GET PostgreSQL
- GET JSON BBolt ( 74 )
- GET ( map)
.
Requests per second Concurrency.
Time per req. [ms] Concurrency ( ).
99% percentile [ms] Concurrency.
99% percentile [ms] Concurrency ( ).
backend 100 000 [#/sec] BBolt (oncurrency 128).
1600% , 1464%.
/ NVMe 0,02 [ms] (500 000 IOPS).
Benchmark, HTTP Get handler 13300 ns
BenchmarkHandler_DeptGetHandler-2 1000000 13300 ns/op 15036.97 MB/s 3265 B/op 11 allocs/op
ApacheBench, mean — 0.088 ms.
0.088 — 0.013 = 0.055 ms.
—
:
- net/http.(*conn).serve — (61.85%)
- net/http.(*connReader).backgroundRead — (7.04%)
- runtime.gcBgMarkWorker — (18.30%)
HTTP server (61.85%):
- — net/http.(*conn).readRequest — (9.29%). .
- — net/http.(*response).finishRequest — (21.74%). .
- — net/http.(*ServeMux).ServeHTTP — (23.33%).
readRequest, finishRequest backgroundRead (39.66%), IO Windows — internalpoll.(ioSrv).ExecIO — (24.78%).
دعونا نرى ما فعله معالج net / http. (* ServeMux) .ServeHTTP:
- تحليل عنوان URL ومعالجة المعلمات - github.com/gorilla/mux.(*Route).Match - (2.29٪)
- توليد JSON من بنية في الذاكرة - github.com/francoispqt/gojay.marshal - (9.92٪)
- العمل مع ذاكرة التخزين المؤقت في الذاكرة - (4.53٪)
