👨🏻 👩🏿‍🤝‍👨🏻 🙄 MySQL + Git संरचना सिंक्रनाइज़ेशन 👨🏾‍🍳 🍐 💃

प्रोजेक्ट फ़ाइलों को सिंक्रनाइज़ करने और इतिहास रखने के लिए, हम संस्करण नियंत्रण प्रणालियों का उपयोग करते हैं, उदाहरण के लिए, गिट। हालांकि, जब मेरे पास MySQL डेटाबेस की संरचना के संस्करण नियंत्रण के बारे में सवाल था, तो मुझे कोई संतोषजनक समाधान नहीं मिला।

मैं ध्यान देता हूं कि कई रूपरेखाओं और ओआरएम में बॉक्स से बाहर आवश्यक तंत्र हैं - माइग्रेशन, संस्करण, आदि। लेकिन MySQL के साथ मूल काम के लिए - आपको पेन के साथ सब कुछ करना होगा। और ट्रैकिंग परिवर्तन के लिए एक स्वचालित प्रणाली बनाने की कोशिश करने के लिए विचार आया।

कार्य

मैं विकास सर्वर पर डेटाबेस संरचना को बदलना चाहता था, स्वचालित रूप से इसे उत्पादन सर्वर पर अपडेट करता हूं, और गिट में सभी परिवर्तनों के इतिहास को भी देखता हूं, क्योंकि यह कोड को नियंत्रित करने के लिए पहले से ही उपयोग किया गया था। और ताकि सब कुछ स्वतंत्र और आसान हो!

ऐसा करने के लिए, आपको सभी परिवर्तन अनुरोधों के बारे में जानकारी प्राप्त करने की आवश्यकता है (सृजन, परिवर्तन, ड्रॉप)।

निर्णय शुरू

MySQL लॉग्स को बनाए रखने के 3 तरीकों का समर्थन करता है - ये त्रुटि लॉग (त्रुटि लॉग), सभी प्रश्नों के लॉग (सामान्य लॉग) और धीमी क्वेरी लॉग (धीमी लॉग) हैं।

मैंने अभी तक पहले विकल्प का उपयोग नहीं किया है, लेकिन विचार (नीचे विवरण) हैं। अब अन्य दो विकल्पों के बारे में।

लॉग या तो mysql तालिकाओं या फ़ाइलों को लिखा जा सकता है। लॉग फ़ाइल प्रारूप बल्कि असुविधाजनक है और मैंने तालिकाओं का उपयोग करने का निर्णय लिया है।

ध्यान दें, क्योंकि हम सभी mysql लॉग के बारे में बात कर रहे हैं, इस समाधान का उपयोग केवल MySQL लोड के बिना एक देव सर्वर पर किया जाना चाहिए!

एक महत्वपूर्ण बिंदु उस डेटाबेस की परिभाषा है जिसमें क्वेरी को भेजा जा रहा है, क्योंकि यह जानकारी क्वेरी के SQL पाठ में ही नहीं हो सकती है।

CREATE TABLE /*DB_NAME.*/TABLE_NAME

यह पता चला कि सामान्य लॉग केवल सर्वर थ्रेड नंबर लिखते हैं, और डेटाबेस को निर्धारित करने के लिए, किसी को इस थ्रेड के लिए उपयोग किए गए डेटाबेस के लिए रिकॉर्ड देखना होगा। इसके अलावा, लॉग में सर्वर से कनेक्ट और डिस्कनेक्ट करने के बारे में जानकारी होती है।

मायिकक्ल.गेंनल_लॉग स्ट्रक्चर

लेकिन slow_log में वह सब कुछ पाया गया जो आपको चाहिए: सबसे पहले, लॉग में केवल अनुरोधों के बारे में जानकारी होती है, और दूसरी बात, डेटाबेस का नाम जिसके संदर्भ में अनुरोध जाते हैं, उसे याद किया जाता है।

मायिकक्लो.साल_लॉग संरचना

सभी अनुरोधों को रिकॉर्ड करने के लिए धीमी लॉग को सेट करना my.cnf में बहुत सरल है

log-output=TABLE

slow_query_log = 1

long_query_time = 0

log_slow_admin_statements = 1

log_slow_admin_statements को ALTER अनुरोधों को रिकॉर्ड करने की आवश्यकता है।

प्रसंस्करण लॉग करें

इसलिए, हमें सभी प्रश्नों को लगातार लेने की जरूरत है, उनसे डेटाबेस संरचना को बदलने और बाकी सभी को साफ़ करने के अनुरोधों का चयन करें।

Mysql.slow_log तालिका में कोई महत्वपूर्ण फ़ील्ड नहीं है, और इसे लॉक नहीं किया जा सकता (और इसलिए आंशिक रूप से प्रविष्टियों को हटा दें)। इसलिए, हम एक तालिका बनाएंगे जो हमारे अनुरूप होगी।

संरचना change_structure_log

लॉग रोटेशन के लिए एक छोटी सी प्रक्रिया:

 USE mysql; DELIMITER $$ CREATE PROCEDURE `change_structure_log_rotate`() BEGIN -- Definition start drop table if exists slow_log_copy; CREATE TABLE slow_log_copy LIKE slow_log; RENAME TABLE slow_log TO slow_log_old, slow_log_copy TO slow_log; insert into change_structure_log (start_time,query_time,sql_text, db) select start_time, query_time, sql_text,db from slow_log_old where sql_text like "ALTER%" OR sql_text like "CREATE%" OR sql_text like "DROP%"; drop table slow_log_old; -- Definition end END $$

और इसे MySQL अनुसूचक में जोड़ा जा सकता है:

 CREATE EVENT `event_archive_mailqueue` ON SCHEDULE EVERY 5 MINUTE STARTS CURRENT_TIMESTAMP ON COMPLETION NOT PRESERVE ENABLE COMMENT '' DO call change_structure_log_rotate();

इसलिए, हमारे पास पुनर्गठन के लिए सभी अनुरोधों के साथ एक तालिका है। अब हम इसे प्रोसेस करने के लिए एक छोटी स्क्रिप्ट लिखेंगे। मैं किसी विशिष्ट भाषा का उपयोग नहीं करूंगा (मैं व्यक्तिगत रूप से PHP में लिखता हूं, लेकिन कोड में बड़ी संख्या में निर्भरता के कारण, यह कोड अपलोड करने का कोई मतलब नहीं है)।

तो:

1. हम change_structure_log तालिका में सभी प्रविष्टियों के माध्यम से लूप करते हैं।

2. sql_text के लिए, हम नियमित रूप से डेटाबेस का नाम बाहर खींचते हैं, यदि कोई हो, उदाहरण के लिए

^ALTER\s+TABLE\s+(?:(?:ONLINE|OFFLINE)\s+)?(?:(?:IGNORE)\s+)?(?:([^\s\.]+)\.\s*)?([^\s\.]+)

3. यदि अनुरोध db नाम निर्दिष्ट नहीं करता है - db फ़ील्ड से इसका उपयोग करें।

4. हम संबंधित डेटाबेस के सभी रिकॉर्ड Git के साथ प्रोजेक्ट फ़ोल्डर में लिखते हैं। उदाहरण के लिए, 2014050815050.sql.log। डेटाबेस के बिना प्रश्नों के लिए, शुरुआत में हम $ DB का उपयोग करते हैं;

5. सभी संसाधित रिकॉर्ड हटाएं।

इसलिए, हमारे प्रोजेक्ट फ़ोल्डर में डेटाबेस को बदलने के अनुरोधों के साथ नई फाइलें हैं, अब हम उन्हें अपने Git क्लाइंट में सामान्य मोड में दे सकते हैं।

अगला, उत्पादन सर्वर पर, हम एक स्क्रिप्ट लिखते हैं जो नई फ़ाइलों की उपस्थिति को ट्रैक करता है और उन्हें mysql में निष्पादित करता है। इसलिए, कोड के साथ उत्पादन सर्वर पर गिट रिपॉजिटरी को अपडेट करते समय, हम डेटाबेस को देव सर्वर पर स्थिति में बदलते हैं।

Upd। इसके अलावा ( DsideSPb के संकेत पर), आप गिट पोस्ट-चेकआउट के लिए हुक का उपयोग कर सकते हैं, जिससे अपडेट पुनरावृत्ति निरंतर और बाहरी श्रोताओं के बिना हो जाएगी।

मुझे तुरंत कहना होगा कि यह समाधान काफी आदिम है और कई Git कार्यों का समर्थन नहीं करता है। हालांकि, इसके आधार पर, हम कूलर चीजों को भी कर सकते हैं: विशिष्ट तालिकाओं को बदलकर - उदाहरण के लिए, स्वचालित रूप से हमारी ओआरएम फाइलें बदल रही हैं।

या स्वचालित रूप से यमल स्कीमा बनाएं - इसके लिए अतिरिक्त प्लग इन के बिना किसी भी MySQL क्लाइंट का उपयोग करना।

यह भी संभव है, उदाहरण के लिए, डेटाबेस की संरचना (ट्रिगर्स, आदि) को बदलने के बिना विशिष्ट तालिकाओं में डेटा में परिवर्तन को ट्रैक करना, जो विभिन्न सीएमएस के लिए उपयोगी हो सकता है।

PS यदि हम धीमे प्रश्नों के बारे में भी सीखना चाहते हैं - हम इसे अपने सिस्टम में एकीकृत कर सकते हैं, इसके लिए हमें प्रक्रिया से फ़िल्टर हटाने की आवश्यकता है और हमारी स्क्रिप्ट में धीमी क्वेरी के लिए अनुरोध करें और उन्हें सहेजें।

MySQL + Git संरचना सिंक्रनाइज़ेशन

कार्य

निर्णय शुरू

प्रसंस्करण लॉग करें

More articles: