डेटा हानि के बिना कुबेरनेट समूहों के बीच हमारा कैसेंड्रा प्रवास अनुभव

कार्य

• अधिकतम निष्क्रिय समय वास्तव में इस हस्तांतरण को करने के लिए 2-3 मिनट का समय है, क्योंकि आवेदन खुद को एक नए क्लस्टर में रोल किया गया है;
• बिना हानि और सिरदर्द के सभी डेटा को स्थानांतरित करें (यानी बिना किसी अतिरिक्त जोड़तोड़ के)।

• कैसंड्रा-नया - नई स्थापना जिसे हम नए कुबेरनेट क्लस्टर में लॉन्च करेंगे;
• कैसेंड्रा-वर्तमान - एक पुरानी स्थापना जिसके साथ वर्तमान में काम कर रहे हैं;
• कैसेंड्रा-अस्थायी एक अस्थायी स्थापना है जिसे हम कैसंड्रा-करंट के बगल में चलाते हैं और इसका उपयोग केवल माइग्रेशन प्रक्रिया के लिए करते हैं।

कैसे बनें?

1. एक नए ऑपरेटर के साथ नए क्लस्टर में कैसंड्रा-नया उठाएं ।
2. 0 कैसेंड्रा-नया क्लस्टर के लिए स्केल ।
3. , PVC, .
4. Cassandra-temporary Cassandra-current , Cassandra-new.
5. Cassandra-temporary 0 ( ) Cassandra-temporary , Cassandra-temporary Cassandra-current. Cassandra - ( Cassandra ).
6. कैसेंड्रा-अस्थायी और कैसेंड्रा-वर्तमान डेटा केंद्रों के बीच डेटा स्थानांतरित करें ।
7. कैसंड्रा-करंट और कैसेंड्रा-अस्थायी क्लस्टर को 0 में स्केल करें और डिस्क को फेंकना न भूलें, नए क्लस्टर में कैसंड्रा-न्यू चलाएं । समानांतर में, हम एप्लिकेशन को एक नए क्लस्टर में रोल करते हैं।

विस्तार से

Datacenter: x1
==============
Status=Up/Down
|/ State=Normal/Leaving/Joining/Moving
--  Address     Load       Tokens       Owns    Host ID                               Rack
UN  10.244.6.5  790.7 GiB  256          ?       13cd0c7a-4f91-40d0-ac0e-e7c4a9ad584c  rack1
UN  10.244.7.5  770.9 GiB  256          ?       8527813a-e8df-4260-b89d-ceb317ef56ef  rack1
UN  10.244.5.5  825.07 GiB  256          ?       400172bf-6f7c-4709-81c6-980cb7c6db5c  rack1

create keyspace example with replication ={'class' : 'NetworkTopologyStrategy', 'x1':2};

use example;
CREATE TABLE example(id int PRIMARY KEY, name text, phone varint);
INSERT INTO example(id, name, phone) VALUES(1,'Masha', 983123123);
INSERT INTO example(id, name, phone) VALUES(2,'Sergey', 912121231);
INSERT INTO example(id, name, phone) VALUES(3,'Andrey', 914151617);

1. जब हम कैसेंड्रा-अस्थायी शुरू करते हैं , तो हमें क्लस्टर के समान ( कैसंड्रा-करंट के साथ ) को निर्दिष्ट करना होगा । यह एक चर के माध्यम से किया जा सकता है CASSANDRA_CLUSTER_NAME।
2. के लिए आदेश में कैसेंड्रा-अस्थायी वर्तमान क्लस्टर को देखने के लिए, आप बीज सेट करना होगा। यह एक चर के CASSANDRA_SEEDSमाध्यम से या एक विन्यास के माध्यम से किया जाता है ।

Datacenter: x1
==============
Status=Up/Down
|/ State=Normal/Leaving/Joining/Moving
--  Address     Load       Tokens       Owns    Host ID                               Rack
UN  10.244.6.5  790.7 GiB  256          ?       13cd0c7a-4f91-40d0-ac0e-e7c4a9ad584c  rack1
UN  10.244.7.5  770.9 GiB  256          ?       8527813a-e8df-4260-b89d-ceb317ef56ef  rack1
UN  10.244.5.5  825.07 GiB  256          ?       400172bf-6f7c-4709-81c6-980cb7c6db5c  rack1

Datacenter: x2
===============
Status=Up/Down
|/ State=Normal/Leaving/Joining/Moving
--  Address       Load       Tokens       Owns (effective)  Host ID                               Rack
UN  10.244.16.96  267.07 KiB  256          64.4%             3619841e-64a0-417d-a497-541ec602a996  rack1
UN  10.244.18.67  248.29 KiB  256          65.8%             07a2f571-400c-4728-b6f7-c95c26fe5b11  rack1
UN  10.244.16.95  265.85 KiB  256          69.8%             2f4738a2-68d6-4f9e-bf8f-2e1cfc07f791  rack1

ALTER KEYSPACE example WITH replication = {'class': 'NetworkTopologyStrategy', x1: 2, x2: 2};

nodetool rebuild -ks example x1

SELECT * FROM example;

 id | name   | phone
----+--------+-----------
  1 |  Masha | 983123123
  2 | Sergey | 912121231
  3 | Andrey | 914151617

(3 rows)

स्थान और स्मृति का अभाव

nodetool clearsnapshot

failed; error='Cannot allocate memory' (errno=12)

sysctl -w vm.max_map_count=262144

क्लस्टर स्विचिंग

1. स्केल कैसेंड्रा-अस्थायी और कैसेंड्रा-करंट (यह मत भूलो कि ऑपरेटर अभी भी यहां काम करता है!) को ०।
2. स्विच डिस्क (यह कैसंड्रा-नए के लिए पीवी की स्थापना के लिए नीचे आता है )।
3. हम कैसंड्रा-नई शुरू करते हैं , ट्रैकिंग करते हैं कि आवश्यक डिस्क जुड़े हुए हैं।
4. ALTERपुराने क्लस्टर को हटाने के लिए हम सभी तालिकाएँ करते हैं:
   
   

   ALTER KEYSPACE example WITH replication = {'class': 'NetworkTopologyStrategy', 'x2': 2};

5. पुराने क्लस्टर के सभी नोड्स हटाएँ। ऐसा करने के लिए, बस इसकी एक फली में इस कमांड को चलाएँ:
   
   

   nodetool removenode 3619841e-64a0-417d-a497-541ec602a996

प्रोमेथियस के साथ अंतिम स्पर्श

निष्कर्ष

• एक तस्वीर लेने और इसे स्थानांतरित करने में बहुत अधिक समय लगता है;
• कैसंड्रा में इस समय जो कुछ भी लिखा गया है वह खो जाएगा;
• हमारे मामले में सरल 3 घंटे के बजाय लगभग एक घंटे का होगा, जो एक नए क्लस्टर में एप्लिकेशन की तैनाती के साथ सफलतापूर्वक जोड़ा गया।

पुनश्च

• " कैसेंड्रेट्स के लिए कैसेंड्रा माइग्रेशन: विशेषताएं और समाधान ";
• " K8s में रेडिस ऑपरेटर के साथ एक कहानी और इस डेटाबेस से डेटा का विश्लेषण करने के लिए उपयोगिताओं का एक मिनी-ओवरव्यू ";
• " कुबेरनेट्स के लिए अविभाजित MongoDB प्रवासन ";
• " Kubernetes के लिए असंरक्षित RabbitMQ प्रवास ";
• " डेटाबेस और कुबेरनेट्स (समीक्षा और वीडियो रिपोर्ट) ।"