🚋 🎦 🛒 स्फिंक्स - वितरित खोज। वितरित सूचकांक के लिए निष्पादन की स्थिति 🧑‍🤝‍🧑 👨🏻‍🎨 🛥️

लेख उन लोगों के उद्देश्य से है जो पहले से ही जानते हैं कि स्फिंक्स और स्फिंक्सक्यूल क्या हैं।

उद्देश्य: स्फिंक्स नोड्स में से एक पर तकनीकी कार्य के समय स्फिंक्स का उपयोग करके साइट खोज की निरंतरता सुनिश्चित करना।

स्फिंक्स साइट खोजों को व्यवस्थित करने के लिए एक महान उपकरण है। जिस परियोजना में मैं भाग लेता हूं, उसमें Sphinx का उपयोग करके विज्ञापनों की खोज होती है। विज्ञापन ईएवी मॉडल में डेटाबेस में संग्रहीत किए जाते हैं और स्फिंक्स उनके लिए खोज करते हैं, फिर विज्ञापन स्फिंक्स द्वारा पाए गए पहचानकर्ताओं द्वारा पुनर्प्राप्त किए जाते हैं। इस प्रकार, अगर स्फिंक्स ने काम करना बंद कर दिया, तो यह पूरी साइट को प्रभावित करेगा।

काम के लिए, rph स्फिंक्स सूचकांकों का उपयोग खोज परिणामों में तुरंत परिवर्तन करने के लिए किया जाता है यदि कोई विज्ञापन संपादित या प्रतिबंधित किया जाता है। जबकि यह एक नोड पर काम करता था, तब तक सब कुछ ठीक था जब तक कि अनुक्रमित की संरचना में बदलाव करने की आवश्यकता नहीं थी। खोज सूचकांक में विशेषताओं की सूची को बदलने के लिए, आपको कॉन्फ़िगरेशन को संपादित करना होगा, स्फिंक्स को फिर से शुरू करना होगा, और विज्ञापनों को फिर से लिखना होगा। साइट को रोकने के बिना ऐसा करने के लिए, एक मुख्य नोड के साथ एक क्लस्टर बनाने का फैसला किया गया था जो वास्तव में एक बैलेंसर और दो बच्चे नोड्स के रूप में कार्य करता है जिसमें एक सूचकांक होता है और एक दूसरे के दर्पण होते हैं।

अनुक्रमणिका और खोज अनुभाग सेट करना सामान्य रूप से सामान्य है

indexer { } searchd { listen = 127.0.0.1:3301 #   Sphinx Api listen = 127.0.0.1:3309:mysql41 #   SphinxQL log = ./sphinx-log-searchd.log query_log = ./sphinx-log-query.log pid_file = ./sphinx-log-searchd.pid binlog_path = ./sphinx-binlog read_timeout = 5 max_children = 30 max_matches = 1000 seamless_rotate = 1 preopen_indexes = 0 unlink_old = 1 workers = threads }

स्फिंक्स ने खोज क्लस्टर के आयोजन के लिए अनुक्रमित वितरित किए हैं।

मुख्य नोड पर, सभी सूचकांक निम्नानुसार हैं।

 index distributed_section_1 { type = distributed agent = 127.0.0.1:9301:rt_section_1|127.0.0.1:9302:rt_section_1 ha_strategy = nodeads }

वैसे, बाल नोड्स का वर्णन कैसे करें के बीच अंतर है, पिछले उदाहरण में उन्हें दर्पण के रूप में वर्णित किया गया है, और निम्नलिखित में उन्हें एक ही सूचकांक के दो अलग-अलग हिस्सों को संग्रहीत करने वाले नोड के रूप में वर्णित किया गया है। अंतर यह है कि पहले मामले में, चयन अनुरोध नोड्स में से एक को भेजा जाता है, और दूसरे उदाहरण में, चयन सभी नोड्स को भेजा जाता है और प्रत्येक नोड से खोज परिणाम संयुक्त होता है।

 index distributed_section_1 { type = distributed agent = 127.0.0.1:9301:rt_section_1 agent = 127.0.0.1:9302:rt_section_1 ha_strategy = nodeads #     . nodeads -       }

बच्चे के नोड्स पर, सूचकांक को स्फिंक्स में सबसे आम वास्तविक समय सूचकांक के रूप में वर्णित किया जाता है:

 index rt_section_1 { type = rt mlock = 1 morphology = stem_en, stem_ru min_word_len = 3 min_infix_len = 1 index_exact_words = 1 dict = keywords path = ./notices_rt_section_1 rt_field = title rt_field = text rt_attr_uint = date rt_attr_uint = active rt_attr_multi = location }

क्लस्टर पर चयन को लेकर कोई समस्या नहीं हैं।

 mysql> select * from rt_section_1; +---------+------------+--------+----------+ | id | date | active | location | +---------+------------+--------+----------+ | 185191 | 1398749772 | 1 | 145430 | | 185234 | 1398749771 | 1 | 145425 | +---------+------------+--------+----------+ 2 rows in set (0.03 sec)

यह पहले से ही मुझे लग रहा था कि इस पर कार्य हल हो गया है, लेकिन यह सही नहीं था। नमूनाकरण कार्य करता है, लेकिन REPLACE या INSERT प्रश्नों का क्या?

जैसा कि यह पता चला है कि डिफ़ॉल्ट रूप से केवल स्थानीय अनुक्रमितों पर काम करते हुए एक घात - प्रतिक्षेप और INSERT था, और मैं वितरित का उपयोग करता हूं।

लेकिन इससे कोई फर्क नहीं पड़ता। चूँकि स्फिंक्स प्रोजेक्ट ओपन सोर्स है, इसलिए मैंने अपनी असेंबली बनाई, जो आपको वितरित इंडेक्स पर REPLACE प्रश्न करने की अनुमति देता है।

इसे बनाने के लिए , आपको स्रोतों को डाउनलोड करने और कमांड चलाने की आवश्यकता है

 cmake . && make

अब इस असेंबली को ठीक उसी सेटिंग के साथ शुरू करना है, जैसा कि पिछले रिक्वेस्ट को सभी मिरर नोड्स पर निष्पादित किया जाएगा।

 mysql> REPLACE INTO rt_section_130054 (id, `location`, `title`, `text`, `active`, `date`) VALUES ( 2435558, ( 145411 ) , ' ', ' ', 1, '1399529047'); Query OK, 2 rows affected (0.04 sec)

मैंने सत्यापन के लिए दो दर्पणों का उपयोग किया, और हम देखते हैं कि 2 रिकॉर्ड प्रभावित होते हैं, अर्थात प्रत्येक नोड पर एक रिकॉर्ड।

स्फिंक्स - वितरित खोज। वितरित सूचकांक के लिए निष्पादन की स्थिति

More articles: