डार्क मैटर इंटरनेट

कभी-कभी मैं टॉरेंट क्लाइंट की खिड़की खोल देता हूं और बस देखता हूं कि यह फाइलों को कैसे वितरित करता है ... यह होमग्रैव क्वास के साथ तीन-लीटर जार में डीफ़्रैग्मेन्टेशन या गीजर और ज्वालामुखी से भी अधिक आकर्षक है। सब के बाद, मैं अजनबियों को उनकी ज़रूरत की फ़ाइलों को डाउनलोड करने में बहुत मदद करता हूं। मेरा होम कंप्यूटर एक छोटा सर्वर है, जिसके संसाधन मैं पूरे इंटरनेट के साथ साझा करता हूं। संभवतः, इसी तरह की भावनाएं दुनिया भर के हजारों स्वयंसेवकों को @ होम तह जैसी परियोजनाओं में भाग लेने के लिए प्रोत्साहित करती हैं।



कोई फ़ाइल सर्वर वितरण की मात्रा को संभाल नहीं सकता था जो दुनिया भर के लाखों छोटे कंप्यूटर अपने संसाधनों के केवल एक छोटे से हिस्से का उपयोग करके प्रदान करते हैं। अब, अगर मैं आसानी से किसी भी साइट के साथ संसाधनों को साझा कर सकता हूं जो मुझे पसंद है! यदि दर्शकों की वृद्धि के साथ होस्टिंग की लागत रैखिक रूप से नहीं बढ़ी, लेकिन लघुगणकीय रूप से, आगंतुकों के कंप्यूटर से "स्वैच्छिक botnet" के कारण। मैं कितना कम विज्ञापन देखूंगा? स्केलिंग को लेकर कितने दिलचस्प स्टार्टअप्स को सिरदर्द से छुटकारा मिलेगा? कितने गैर-लाभकारी परियोजनाएं संरक्षक के पक्ष पर निर्भर रहना बंद कर सकती हैं? और ऐसी साइट DDoS को साइबर-पुलिस या विशेष सेवाओं के लिए कितना अधिक मुश्किल होगा!

मूल्य जारी करें

अब दुनिया में इंटरनेट से जुड़े डेढ़ अरब से ज्यादा कंप्यूटर हैं। इनमें से, लगभग 500 मिलियन में ब्रॉडबैंड कनेक्शन हैं। यदि हम मानते हैं कि एक होम कंप्यूटर की औसत आयु लगभग दो वर्ष है, तो हम यह मान सकते हैं कि इसमें एक सरल दोहरे कोर प्रोसेसर, 1-2 गीगाबाइट मेमोरी और एक 500 गीगाबाइट पेंच है। निश्चितता के लिए, हम यह भी मानते हैं कि ब्रॉडबैंड कनेक्शन की औसत गति 10 मेगाबिट्स है।



यह बहुत है या थोड़ा है? यदि हम संसाधनों के इस छिपे हुए द्रव्यमान को प्राप्त करने का प्रबंधन करते हैं तो क्या होता है? आइए झाँकें झाँकें। मान लीजिए कि यदि आप इन कंप्यूटरों को घड़ी के चारों ओर चालू छोड़ देते हैं, तो उनके संसाधनों का कम से कम तीन चौथाई बेकार हो जाएगा (यह एक सतर्क अनुमान से अधिक है, विकिपीडिया का औसत सर्वर भार 18% है!)। यदि आप कंप्यूटर को ठीक से लोड करते हैं, तो ऊर्जा की खपत में वृद्धि होगी, प्रति कंप्यूटर 70 वाट या कहें कि प्रति माह 50 किलोवाट-घंटे। दुनिया में लगभग 10 सेंट प्रति किलोवाट घंटे बिजली की औसत कीमत के साथ - यह $ 5 प्रति माह है। साथ ही, सवाल यह भी है कि बढ़े हुए कपड़े। सवाल काफी विवादास्पद है, गंभीर निर्माताओं के अधिकांश घटक निराशाजनक रूप से टूटने की तुलना में बहुत पहले ही पुराने हो गए हैं, इसके अलावा, यह माना जाता है कि निरंतर ऑन-ऑफ और संबद्ध हीटिंग-कूलिंग और अन्य ग्राहक एक दौर के काम की तुलना में तेजी से संसाधन के विकास की ओर ले जाते हैं। फिर भी, हम गणना में शामिल हैं, मरम्मत के लिए अतिरिक्त 150 डॉलर, फैले हुए, कहते हैं, ऑपरेशन के 4 साल के लिए। यह एक महीने में 3 डॉलर से थोड़ा अधिक है। कुल - $ 8 प्रति माह या $ 100 प्रति वर्ष अतिरिक्त लागत। दूसरी ओर, अगर कंप्यूटर की खरीद के समय पहले से भुगतान किए गए संसाधनों का तीन चौथाई हिस्सा अब बेकार है, तो $ 500 - 375 के औसत सिस्टम मूल्य के साथ, हम उन्हें एक लैंडफिल में फेंक देते हैं। यदि हम इस बात का ध्यान रखते हैं कि हमने इन 375 को एक बार में खर्च किया है, तो इस राशि को 4 साल के संचालन के लिए वितरित करते समय, हमें एक वर्ष में बिल्कुल 100 डॉलर मिलते हैं। शायद यह ध्यान देने योग्य है कि जब कोई कंप्यूटर अपनी शक्ति का 10% उपयोग करता है, तब भी वह बिजली का उपभोग 10 गुना कम नहीं, बल्कि दो बार करता है। लेकिन चलो दुष्ट नहीं है। दरअसल, 99% लोग जिनके पास घर में कंप्यूटर और हाई-स्पीड इंटरनेट है, वे "गोल्डन बिलियन" के हैं, इसलिए प्लस या माइनस कुछ डॉलर प्रति माह एक बड़ी भूमिका नहीं निभाते हैं।



तो, चलो यह सब एक साथ रखा। स्मृति की 1 गीगाबाइट, 1.5 की आवृत्ति पर डेढ़ कोर, 2 गीगाहर्ट्ज़, 350 गीगाबाइट्स प्रति स्क्रू, 7 मेगाबिट्स / चैनल के चैनल को आधा बिलियन गुणा किया जाता है:

• + 500 पेटाबाइट की रैम
• + 750 मिलियन कोर
• + डिस्क स्थान के 175,000 पेटाबाइट्स
• + 3.5 पेटाबिट्स / सेकंड बैंडविड्थ
• - 300 टेरावाट-घंटे बिजली (वैश्विक बिजली की खपत का लगभग 0.3%)
• - प्रति वर्ष 100 बिलियन डॉलर, जिनमें से 50 का भुगतान हमने पहले ही कंप्यूटर की खरीद के समय कर दिया था

एक महत्वपूर्ण पाठक (और मुझे आशा है कि उनमें से अधिकांश यहां हैं) पिछले पैराग्राफ में सभी नंबरों को प्रूफरीडिंग करने की आवश्यकता हो सकती है। मैंने उन्हें उद्धृत न करने का जोखिम उठाया, क्योंकि ये पिछले कुछ वर्षों में विश्वसनीयता के अलग-अलग डिग्री के आंकड़ों के टुकड़े करने के लिए कई दर्जन संदर्भ होंगे, जो कि पाठ को बहुत प्रभावित करेंगे। लेख के विषय को उजागर करने के लिए, परिमाण का एक क्रम महत्वपूर्ण है, इसलिए विशेष सटीकता की आवश्यकता नहीं है। फिर भी, अगर किसी के पास एक ही ओपेरा से तैयार किए गए विश्वसनीय आंकड़े हैं, और यह मेरे आंकड़ों से बहुत अलग है, तो मुझे यह देखकर खुशी होगी।



इसलिए, इस संसाधनों का अधिकांश महासागर अप्रयुक्त रहता है। उसे कैसे प्राप्त करें? क्या फ़ाइल-साझाकरण नेटवर्क में होने वाली गिरावट के बजाय, ट्रैफ़िक में तेज़ वृद्धि के दौरान साइट की पहुँच बढ़ाना संभव है? क्या एक ऐसी प्रणाली बनाना संभव है जो मुझे अपने कंप्यूटर के मुफ्त संसाधनों का हिस्सा एक दिलचस्प स्टार्टअप को देने में मदद करे ताकि वह अपने पैरों पर खड़ा हो सके? इस दिशा में पहले चरण पहले ही उठाए जा रहे हैं, लेकिन सभी पहले चरणों की तरह, आप उन्हें अभी तक विशेष रूप से सफल नहीं कह सकते। किसी भी वितरित प्रणाली तुलनीय कार्यक्षमता के साथ केंद्रीकृत प्रणालियों की तुलना में अधिक जटिल परिमाण का एक आदेश है। यहां तक ​​कि एक बच्चा भी समझा सकता है कि एक फ़ाइल जो हाइपरलिंक सर्वर पर कहीं संग्रहीत है। लेकिन हर वयस्क यह पता नहीं लगा सकता है कि DHT कैसे काम करता है।

मोज़ेक के टुकड़े

जब आप क्लाइंट कंप्यूटर की अनिश्चित संख्या पर एक साइट "स्मीयर" करते हैं, तो आपको सबसे बड़ी समस्या यह है कि यह गतिशील सामग्री है। स्थिर पृष्ठों का वितरण और वितरण किसी भी अन्य फ़ाइलों के वितरण से बहुत अलग नहीं है। पृष्ठों की अखंडता और प्रामाणिकता का मुद्दा हैश और डिजिटल हस्ताक्षर का उपयोग करके हल किया जाता है। दुर्भाग्य से, वितरित HTML में स्थिर साइटों का युग वितरित नेटवर्क और प्रोटोकॉल परिपक्व होने और व्यापक रूप से फैलने से पहले समाप्त हो गया। केवल आला जहां कोई अन्य विकल्प नहीं हैं, अनाम एन्क्रिप्टेड नेटवर्क नेटवर्क जैसे FreeNet या GNUnet हैं । उनमें, एक स्थायी पते के साथ एक सामान्य वेब सर्वर बनाना परिभाषा द्वारा असंभव है। इन नेटवर्कों में " साइटें " केवल स्थिर पृष्ठों या संदेशों के सेट से मिलकर बनी होती हैं, मंचों में एकजुट होती हैं। इसके अलावा, जितना अधिक ट्रैफ़िक एन्क्रिप्ट किया जाता है और अज्ञात होता है, ऐसे नेटवर्क का बैंडविड्थ तेजी से शून्य हो जाता है, और प्रतिक्रिया का समय अनंत हो जाता है। अधिकांश लोग गुमनामी और गोपनीयता के लिए इस तरह की असुविधा को सहन करने के लिए तैयार नहीं हैं। इस तरह के नेटवर्क बहुत गीक्स, राजनीतिक असंतुष्टों और सभी बुरी आत्माओं जैसे पीडोफाइल रहते हैं। जब मैंने गोपनीयता के बारे में लिखना शुरू किया, तो पैराग्राफ इतना बड़ा हो गया और आसपास के पाठ से इतनी दृढ़ता से उभरी कि मैंने इसे एक अलग विषय के रूप में डिजाइन किया। तो यहाँ आपको एक विषयांतर है ।



हमारे विषय के थोड़ा करीब ओसिरिस परियोजना है । यह विशेष रूप से वितरित साइटों के निर्माण पर केंद्रित है - "पोर्टल", और अनाम फ़ाइल साझाकरण और संदेशों पर नहीं। यद्यपि वहाँ पर्याप्त से अधिक गुमनामी है। बाढ़ और स्पैम के साथ गैर-जिम्मेदार अनामियों को रोकने के लिए, एक प्रतिष्ठा लेखा प्रणाली का उपयोग किया जाता है, जो एक "राजशाही" मोड में काम कर सकता है - पोर्टल का मालिक एक प्रतिष्ठा प्रदान करता है, और "अराजकतावादी" मोड में सभी आगंतुक एक प्रतिष्ठा बनाने में भाग लेते हैं। यह परियोजना अपेक्षाकृत युवा है, लेखक इटालियन हैं, अधिकांश दस्तावेज अभी तक अंग्रेजी में अनुवाद नहीं किए गए हैं (रूसी का उल्लेख नहीं करना), इसलिए विकिपीडिया लेख शायद आधिकारिक साइट की तुलना में अधिक पर्याप्त होगा।



बहुत अधिक दिलचस्प वितरित कैशिंग सिस्टम और सीडीएन है। बहुतों ने कोरल सीडीएन के बारे में सुना है। हालाँकि कोरल वितरित नेटवर्क प्लैनेटलैब सर्वरों पर आधारित है और उपयोगकर्ता कंप्यूटरों पर नहीं है, लेकिन इसकी वास्तुकला बहुत रुचि की है। नेटवर्क की मुख्य विशेषताओं में से एक स्लैशडॉट या हैब्रेफेक्ट के तहत पीक समय के दौरान छोटी साइटों की मदद करना है। संसाधन URL के दाईं ओर "जादुई शब्द" .nyud.net जोड़ना पर्याप्त है, और सभी ट्रैफ़िक कोरल से गुजरेंगे। लिंक तक पहुँचते समय, नेटवर्क DHT के एक संशोधित संस्करण का उपयोग करके वांछित संसाधन के लिए खोज करता है - स्लोप DHT। शब्द "मैला" का अर्थ है कि सहकर्मी जानकारी समान हैश मूल्य के साथ कई नोड्स में "धुंधला" है, संसाधन हैश के निकटतम नोड पर लोड को कम करता है (यदि आप अंतिम वाक्य में कुछ भी नहीं समझते हैं, तो यहां वितरित हैश वास्तुकला के बुनियादी सिद्धांतों को समझने योग्य भाषा में निर्धारित किया गया है। तालिका)। इसके अलावा, कोरल हैश तालिका को गुच्छों में विभाजित करता है, नोड्स के बीच पिंग के आधार पर, प्रतिक्रिया समय को कम करने के लिए - आखिरकार, यदि आप एक फिल्म डाउनलोड करते समय एक मिनट इंतजार कर सकते हैं जब डीएचटी पर्याप्त साथियों को पाता है, तो पृष्ठ लोड होने पर अतिरिक्त कुछ सेकंड बहुत कष्टप्रद होते हैं। यहाँ एक अधिक विस्तृत वर्णन है ।







वितरित वेबसाइटों की ओर दो और छोटे कदम - बिटटोरेंट डीएनए और फायरकॉरल। डीएनए बिटटोरेंट पर आधारित है, और भारी सामग्री वितरित करने के लिए डिज़ाइन किया गया है। इसके लिए क्लाइंट मशीन पर एक बूटलोडर स्थापित करने की आवश्यकता होती है, जो वास्तव में फ़ाइलों या वीडियो को डाउनलोड करता है। बूटलोडर का सिद्धांत सामान्य धार डाउनलोड से बहुत अलग नहीं है, सिवाय इसके कि स्ट्रीमिंग वीडियो हमेशा क्रमिक रूप से लोड किया जाता है ताकि आप पूर्ण डाउनलोड की प्रतीक्षा किए बिना देखना शुरू कर सकें। डाउनलोड की गई फ़ाइलें कैश की जाती हैं और अन्य क्लाइंट को वितरित की जाती हैं। जब मैंने कुछ ड्राइवरों को डाउनलोड किया तो मैं पहले ही कई बार डीएनए लोडर भर चुका हूं। यह सब अब तक केवल विंडोज के तहत काम करता है।



FireCoral कोरल CDN का एक छोटा रिश्तेदार है, एक FireFox ऐड-ऑन क्लाइंट कंप्यूटर पर चलना चाहिए, PlanetLab सर्वर नहीं। मैं वास्तव में इसे नहीं चला सकता था, क्योंकि लेखन के समय, केवल 1404 लोगों ने इस ऐड को डाउनलोड किया था। और यह अंतिम दिन में 1 व्यक्ति के रूप में ज्यादा इस्तेमाल किया।

यहाँ FireCoral वास्तुकला का विस्तृत वर्णन है । संक्षेप में: FireCoral HTTP अनुरोधों को स्वीकार करता है, और अगर ब्राउज़र कैश में कुछ भी उपयुक्त नहीं है, तो यह ट्रैकर (1) को संदर्भित करता है। ट्रैकर या तो ग्राहक को रिपोर्ट करता है (2) उन साथियों के पते जो कैश (3) में वांछित फ़ाइल रखते हैं, या स्रोत सर्वर को भेजते हैं यदि किसी ने अभी तक अनुरोध को कैश नहीं किया है, या कैश में संस्करण समाप्त हो गया है (4)। सब कुछ है कि साथियों से डाउनलोड FireCoral की प्रामाणिकता एक विश्वसनीय हस्ताक्षर सर्वर (5) द्वारा प्रदान की एक डिजिटल हस्ताक्षर द्वारा सत्यापित है। अनुरोध प्रसंस्करण पूरा करने के बाद, FireCoral ट्रैकर को सूचित करता है कि अब उसकी एक प्रति (6) भी है।







मौजूदा वितरित कैशिंग सिस्टम के नुकसान स्पष्ट और काफी महत्वपूर्ण हैं। सर्वर की भागीदारी (अतिरिक्त, ज्ञान के बिना!) के बिना कैशिंग होता है। यह विज़िट के आंकड़ों के संग्रह को जटिल करता है, सामग्री के वितरण पर नियंत्रण करता है और सर्वर और क्लाइंट दोनों के लिए संभावित सुरक्षा खतरे पैदा करता है। साइट के दृष्टिकोण से, इस तरह के पी 2 पी नेटवर्क एक खुले प्रॉक्सी सर्वर के समान है। इन कठिनाइयों का सामना करने के लिए केवल तभी संभव है जब साइट वितरित कैश के अस्तित्व से अवगत हो और उसे नियंत्रित करे। FireCoral वास्तुकला के संदर्भ में, इसका मतलब है कि स्रोत सर्वर एक साथ ट्रैकर और एक विश्वसनीय हस्ताक्षर सर्वर दोनों के रूप में कार्य करता है। यदि अब वेब सर्वर स्वतंत्र रूप से ग्राहक सेवा के सभी काम करता है, तो ऐसे आर्किटेक्चर में, यह केवल "ओवरसियर" की भूमिका रखता है, जो सभी गंदे काम करने वाले साथियों को नियंत्रित करता है।



यहां तक ​​कि अधिक अवसर दिखाई देते हैं यदि न केवल वेब सर्वर पी 2 पी नेटवर्क के साथ सहयोग करता है, बल्कि क्लाइंट भी विशिष्ट साइट की स्पष्ट रूप से मदद करते हैं। यही है, वे न केवल अपने लिए डाउनलोड की गई सामग्री को साझा करते हैं, बल्कि साइट को अपनी डिस्क पर जानकारी संग्रहीत करने की अनुमति देते हैं जो उन्हें विशेष रूप से आवश्यकता नहीं होती है, उदाहरण के लिए, शायद ही कभी उपयोग की गई सामग्री। या जटिल गणना करने में मदद करें।



भंडारण सबसे आसान है। क्रिप्टोग्राफी आपको किसी भी डेटा को क्लाउड पर या सर्वर पर भरोसा किए बिना स्टोर करने की अनुमति देता है। उदाहरण के लिए, यह कैसे काम करता है, Wuala - ड्रॉपबॉक्स के प्रतियोगियों में से एक। Wuala आपको न केवल अपने डेटा केंद्रों के कारण, बल्कि उपयोगकर्ता के डिस्क स्थान के कारण अपनी फ़ाइलों को संग्रहीत करने के लिए उपलब्ध स्थान को बढ़ाने की अनुमति देता है। अर्थात्, क्लाइंट प्रोग्राम मेरे कंप्यूटर को क्लाउड स्टोरेज के हिस्से के रूप में उपयोग करता है। मैं अपनी फ़ाइलों को क्लाउड में संग्रहीत करने के लिए पैसे से नहीं, बल्कि अपनी डिस्क और इंटरनेट कनेक्शन के संसाधनों के साथ भुगतान करता हूं। सभी फ़ाइलों को एन्क्रिप्ट किया गया है, इसलिए मुझे नहीं पता कि मेरे स्क्रू पर कौन और क्या संग्रहीत है, इसके अलावा, फ़ाइलें पूरी तरह से संग्रहीत नहीं हैं, लेकिन कुछ हिस्सों में, यह वास्तव में एक वितरित फ़ाइल सिस्टम है। यही है, संभावना है कि कोई व्यक्ति एक साथ टुकड़े करेगा और मेरी फ़ाइलों को डिक्रिप्ट करके गायब हो जाएगा।



दुर्भाग्य से, वूला वास्तव में इस सुविधा को बढ़ावा नहीं दे रहा है, लेकिन उन्हें समझा जा सकता है। जोर से और स्पष्ट रूप से उपयोगकर्ताओं को मुफ्त में उपलब्ध स्थान बढ़ाने के लिए पेशकश करने का अर्थ है उस शाखा को काटना जिस पर आप बैठे हैं। पी 2 पी क्लाउड में एक सिंक्रनाइज़ेशन और स्टोरेज सेवा को बढ़ावा देने के लिए, आपको एक अलग व्यवसाय मॉडल की आवश्यकता है। उदाहरण के लिए, एक संसाधन विनिमय संभव के रूप में कई अन्य प्रस्तावों के लिए मांग का एक ऐसा क्षेत्र है। आपको इस समीकरण में पैसे शामिल करने की आवश्यकता है, उदाहरण के लिए, मेरे पास 100 गीगाबाइट मुक्त स्थान है, और उन फ़ाइलों की भरपाई करने के लिए जो मैं क्लाउड में संग्रहीत करता हूं, मुझे 150 की आवश्यकता है। लापता 50 गीगाबाइट के बजाय, मैं पैसे के साथ भुगतान करता हूं। सेवा एक छोटा कमीशन लेता है। और अगर पर्याप्त उपयोगकर्ता एकत्र किए जाते हैं, और आपूर्ति और मांग का संतुलन अनुमति देता है, तो संसाधनों को पक्ष में बेचना संभव होगा।



वितरित वेब सर्वर पर लौटकर, आप फ़्लैट्र जैसी प्रणाली की कल्पना कर सकते हैं, लेकिन पैसे के बजाय, गीगाबाइट्स और मेगाबाइट्स को इसमें वितरित किया जाएगा, न कि सामग्री के पूरे टुकड़ों का मूल्यांकन किया जाएगा, लेकिन पूरी साइटें।



कंप्यूटिंग के साथ चीजें बहुत खराब हैं। हम किसी को भी यह नहीं बता सकते हैं कि हमारी मशीन पर हमारे डेटा में हेरफेर कौन करेगा। यदि एन्क्रिप्शन अपनी गोपनीयता के डर के बिना आपको कहीं भी, किसी भी जानकारी को संग्रहीत करने की अनुमति देता है, और हस्ताक्षर और प्रमाण पत्र किसी को भी हमारी जानकारी वितरित करने के लिए संभव बनाते हैं, तो मिथ्याकरण की संभावना को छोड़कर, फिर इस जानकारी को एन्क्रिप्टेड और हस्ताक्षरित रूप में संसाधित करना और संशोधित करना असंभव है। हमें वितरित नेटवर्क के नोड्स पर कुछ हद तक भरोसा करना होगा। और आपको आकस्मिक या जानबूझकर डेटा भ्रष्टाचार के लिए नोड्स की जांच करने पर संसाधन खर्च करने होंगे।



ट्रस्ट का मुद्दा क्लाइंट कंप्यूटर पर "हेड ऑन" हल नहीं किया जा सकता है। क्लाइंट कोड का विरोध, सभी प्रकार के विरोधी धोखा मॉनिटर - यह एक भारी, असुविधाजनक बैसाखी है। सभी प्रकार के MMORPG के निर्माता हर समय इसके साथ युद्ध में हैं । जल्दी या बाद में, सब कुछ पैच किया जा सकता है। बल्कि, लगभग सब कुछ। ऐसी एक चीज है - विश्वसनीय कंप्यूटिंग । एक अद्भुत नई दुनिया में आपका स्वागत है! रिचर्ड स्टालमैन का दुःस्वप्न, बिग ब्रदर का सपना - हर कंप्यूटर में एक चिप होती है जो यह सुनिश्चित करती है कि हम केवल वही करें जो हम करने वाले हैं, जब यह होना चाहिए और यह कैसा होना चाहिए। यह समाधान स्वयं समस्या से बहुत बदतर है।



एक और तरीका वास्तव में काम करता है। इसका लंबे और सफलतापूर्वक उपयोग मदर नेचर द्वारा किया गया है। यह उन्मुक्ति है। कोई भी जीव बहुत प्रभावी ढंग से शत्रुतापूर्ण या खराबी कोशिकाओं का पता लगाता है और उन्हें नष्ट कर देता है। पी 2 पी नेटवर्क के लिए समान सिस्टम का आविष्कार किया गया था।



उदाहरण के लिए, BOINC ने कंप्यूटिंग प्लेटफॉर्म वितरित किया, जिस पर "कुछ भी @ घर" परियोजनाएं आधारित हैं। यह सर्वसम्मति विधि का उपयोग करता है । डेटा का एक ही टुकड़ा कई प्रतिभागियों के लिए गणना के लिए दिया जाता है, और परिणाम डेटाबेस में केवल तभी दर्ज किया जाता है जब सभी ने एक ही डेटा लौटाया हो। यदि नहीं, तो किसी ने गलती की या धोखा दिया। त्रुटि दो मुख्य तरीकों से तय की जा सकती है - यदि कोई विश्वसनीय सर्वर है, तो डेटा के विवादित हिस्से की गणना उसे सौंपी जाती है, और सभी ने अलग-अलग उत्तर देने के लिए जंगल में जाते हैं। यदि नेटवर्क पूरी तरह से वितरित और सहकर्मी से सहकर्मी है, तो अधिकांश प्रतिभागियों द्वारा दिए गए उत्तर को सही माना जाता है, इस पद्धति को "कोरम सर्वसम्मति" के रूप में जाना जाता है। इसके अलावा, एक मध्यवर्ती विकल्प संभव है - प्रत्येक नोड के लिए, प्रतिष्ठा की गणना पिछले कार्य के परिणाम के आधार पर की जाती है। संघर्ष को सुलझाने में अधिक प्रतिष्ठा के साथ नोड्स की प्रतिक्रिया अधिक महत्वपूर्ण है।



यह सब वितरित वेबसाइटों पर कैसे लागू होता है? वेब सर्वर द्वारा दिया जाने वाला कोई भी डेटा चार समूहों में विभाजित किया जा सकता है:

1. डेटा, प्रकटीकरण और अनधिकृत संशोधन, जो बिल्कुल अस्वीकार्य है - पासवर्ड, क्रेडिट कार्ड नंबर, निजी संदेश और फाइलें। उन्हें केवल एन्क्रिप्टेड रूप में संग्रहीत और स्थानांतरित किया जा सकता है।
2. डेटा जो हर कोई देख सकता है, लेकिन उनका मनमाना परिवर्तन अस्वीकार्य है। उदाहरण के लिए, पृष्ठ पर जावास्क्रिप्ट। इस तरह के डेटा को एक विश्वसनीय स्रोत द्वारा सत्यापित और हस्ताक्षरित किया जाना चाहिए।
3. डेटा जिसका अनाधिकृत रूप से देखना अवांछनीय है, लेकिन आपदा नहीं है। उदाहरण के लिए, Habré पर यहाँ बंद ब्लॉग की सामग्री।
4. डेटा जिसका अनधिकृत परिवर्तन बाद में आसानी से ठीक किया जा सकता है। उदाहरण के लिए, एक विकिपीडिया लेख जो बर्बादी की तुलना में तय करना बहुत आसान है। अधिक विकेंद्रीकरण के लिए, आप एक विश्वसनीय सर्वर की भागीदारी के बिना इस तरह के डेटा के सत्यापन और प्रकाशन की अनुमति दे सकते हैं, कोरम सर्वसम्मति विधि का उपयोग कर।

इसलिए, आज वैश्विक नेटवर्क के संसाधनों के "काले पदार्थ" तक पहुंचने के लिए पहले से ही एक मौलिक अवसर है। हालाँकि, अब तक केवल फ़ाइल शेयरिंग वास्तव में बड़े पैमाने पर हो गई है। शायद, तथ्य यह है कि पी 2 पी साइट के पूर्ण और सुरक्षित संचालन के लिए साइट निर्माण की बुनियादी बातों की एक गंभीर समीक्षा की आवश्यकता है - वास्तुकला, अभिगम नियंत्रण के दृष्टिकोण बहुत बदल रहे हैं, नए जोखिम पैदा होते हैं। और निश्चित रूप से, चिकन और अंडे की अनन्त समस्या। कोई वितरित साइटें नहीं हैं क्योंकि कोई बुनियादी ढांचा नहीं है, कोई बुनियादी ढांचा नहीं है क्योंकि कोई वितरित साइटें नहीं हैं।



अब, मेरी राय में, वितरित साइटों की ओर से इस दुष्चक्र को तोड़ने का सबसे आशाजनक प्रयास है, न कि बुनियादी ढांचा प्रवासी परियोजना है । -, kickstarter.com . , , P2P. «», — . — , GNUsocial, Appleseed, Crabgrass, .



डायस्पोरा रेल वेब एप्लिकेशन पर एक रूबी है। अपने डायस्पोरा सर्वर को बढ़ाने के लिए, आपको लिनक्स या मैकओएस एक्स की जरूरत है, उनके ऊपर पतले और नग्नेक्स (यहां विकल्प संभव हैं)। विंडोज तक, लेखकों के हाथ नहीं पहुंचे। गैर-गीक्स के लिए एक सरल इंस्टॉलर बनाना - भविष्य के लिए योजना। डायस्पोरा की वास्तुकला वनस्पति शब्दावली का उपयोग करती है: सर्वर "पॉड" (पॉड) है, उपयोगकर्ता खाता "बीज" है। प्रत्येक फली में एक या अधिक अनाज हो सकते हैं। एक पोस्ट - एक तस्वीर, एक संदेश, आदि - एक या अधिक "पहलुओं" से संबंधित हो सकता है। पहलू - उपयोगकर्ताओं का एक समूह, उदाहरण के लिए, "रिश्तेदार", "काम", "दोस्त"। प्रवासी क्रिप्टोग्राफ़िक अभिगम नियंत्रण का उपयोग करते हैं। यह क्या है



, , ACL RBAC , , , , . . , , , . , . , , , . . , , , .



— , . , . , , , . , , .



तथ्य यह है कि हम एक बार प्रकाशित जानकारी को 100% अप्राप्य नहीं बना सकते हैं, इसका मतलब यह नहीं है कि हमें कोशिश भी नहीं करनी चाहिए। 99% भी अच्छा है। हालांकि, नई कुंजियों का पुन: एन्क्रिप्शन और वितरण एक बहुत ही संसाधन-गहन और धीमी प्रक्रिया है। यदि हम जिस समूह से किसी को बाहर करना चाहते हैं, उसके सदस्यों की संख्या बहुत बड़ी नहीं है, और हम सफल "बहिष्कार" की 99% गारंटी से संतुष्ट हैं, तो हम सब कुछ फिर से एन्क्रिप्ट करेंगे और नई चाबियाँ देंगे। यदि समूह बहुत बड़ा है और बहुत सारी जानकारी है, तो गेम परेशानी के लायक नहीं है, और आप खुद को चाबियों को बदलने के लिए सीमित कर सकते हैं, ताकि बाहर रखा गया उपयोगकर्ता पुरानी जानकारी तक पहुंच बनाए रखे, लेकिन नई जानकारी तक नहीं।



? N . . , , N. + N - , . - , N-1 , . , , , , N-1 . , , .



क्रिप्टोग्राफिक नियंत्रण को लागू करने का यह सबसे सीधा तरीका है। वितरित कुंजियों की संख्या को कम करने के लिए, आप विभिन्न श्रेणीबद्ध व्युत्पन्न समूह कुंजियों का उपयोग कर सकते हैं। एन के बजाय, ओ (लॉगएन) कुंजी के साथ तिरस्कृत किया जा सकता है, लेकिन यह योजना को बहुत जटिल करता है। सीमा में, जब एन एक बहुत बड़ी संख्या है, और चाबियाँ बदलने की क्षमता सिद्धांत रूप में अनुपस्थित है, एएसीएस जैसा एक राक्षस डीआरएम का आधार है । डीआरएस, एएसीएस डिवाइस के कानूनी, सामाजिक और नैतिक आयामों को छोड़कर- बात अविश्वसनीय रूप से रोमांचक है। सबसेट अंतर ट्री सिस्टम क्वांटम यांत्रिकी के समान है - अगर आपको लगता है कि आप इसे समझते हैं, तो आप इसे नहीं समझते हैं। कम से कम मैं झूठी समझ के तीन या चार स्तरों से गुजरा, जबकि मुझे लगा कि उसका काम खत्म हो गया है (हो सकता है कि कुछ और भी हो, लेकिन दुर्भाग्य से, मेरे पास इतना समय नहीं है कि मैं गहरी खुदाई जारी रख सकूं)। आप यहां क्रिप्टोग्राफिक एक्सेस कंट्रोल के बारे में अधिक पढ़ सकते हैं , संदर्भ द्वारा दस्तावेज़ में अध्याय 2.3 देखें, केवल ध्यान से, एक मोटी पीडीएफ है! ।

कल्पना और अटकलबाजी

, - ?



-, . -, uTorrent, , FireCoral, - , Opera Unite. ?

1. , . ( — FireCoral, BitTorrent DNA)
2. , . ( . , — Wikileaks, )
3. P2P- . ( — Diaspora, Opera Unite, Wuala)

-, -.

1. - P2P- .
2. . - , . , . - key-value . , , .
3. , .
4. Push on change Pull on demand.

, , , , . , . , , , . . , - , , « », , . — , , JavaScript, . . « » , « 24 » .



असल में, यह वही है जो सर्वर-साइड कैशिंग अभी दिखता है। लगभग किसी भी गतिशील पृष्ठ पर 99% ऐसे कम या अधिक स्थिर टुकड़ों से बना है। अंतर यह है कि तैयार पृष्ठ को ग्राहक की ओर से इन टुकड़ों से इकट्ठा किया जाएगा, और टुकड़े खुद एक पी 2 पी नेटवर्क में होंगे।



? , - . , , , , . , , . , «», . , - . , , , , — « » , . pubsubhubbub ( ).



, . . , . , , . , , , .



, डीएनएस का विकेंद्रीकृत एनालॉग । या आप डीएनएस को विकेंद्रीकृत खोज इंजन के साथ बदल सकते हैं। उदाहरण के लिए, जब डोमेन को एक-एक करके विकिलिक्स से दूर ले जाया जाता था, तो साइट Google के जारी करने में सबसे पहले लटकती रही, और एक डोमेन नाम के बजाय, एक नंगे आईपी पते थोड़ी देर के लिए फ़्लॉप हो गया। और teapots जो यह नहीं जानते हैं कि एक डोमेन क्या है, लेकिन बस शब्द "VKontakte" टाइप करें और ऊपर से पहले लिंक पर क्लिक करें - यह एक कल्पना नहीं है, लेकिन एक वास्तविकता है। यह अभी ज्ञात नहीं है कि विकेंद्रीकृत DNS, या विकेन्द्रीकृत Google बनाने और कार्यान्वित करने में और क्या मुश्किल है?



और अंत में, एक पूरी तरह से वितरित वास्तुकला के लिए एक और शानदार अवसर विभाजन द्वारा प्रजनन है। किसी भी विकेन्द्रीकृत साइट को "कांटा" करना तकनीकी रूप से कठिन नहीं है यदि उपयोगकर्ताओं का पर्याप्त रूप से सामंजस्यपूर्ण उपसमूह इसमें बनता है। समय के साथ, एक साइट के साइट पर एक पूरा पेड़ बढ़ सकता है।

निष्कर्ष

यह विषय कुछ लोगों के लिए बहुत बुरा लग सकता है। अधिकांश प्रौद्योगिकी अभी भी बहुत नम और अविश्वसनीय लगती है। लेकिन! . - , , ? ! . , JavaScript , NoSQL , , 200 000 , , . ?





UPD: , , , ( ) , . , - ( ) . - !





UPD2: , .

दिलचस्प दस्तावेज जो लेख लिखने की प्रक्रिया में पाए गए, लेकिन जो पाठ में लिंक नहीं मिला। लगभग हर जगह - पीडीएफ के लिए सीधा लिंक:



एक नेटवर्क फाइल सिस्टम के लिए क्रिप्टोग्राफिक एक्सेस कंट्रोल



रिमोट प्रक्रिया कॉल में क्रिप्टोग्राफिक एक्सेस कंट्रोल



XPeer: एक स्व-आयोजन XML P2P डेटाबेस सिस्टम



सहकर्मी से सहकर्मी डेटाबेस सिस्टम में लचीला अद्यतन प्रबंधन



एक पुश-आधारित पी 2 पी डेटाबेस के लिए एक लचीली वास्तुकला



बिटटोरेंट आधारित पीयर-टू-पीयर डेटाबेस सर्वर



प्रसारण एन्क्रिप्शन का एक सर्वेक्षण (सावधानी, हार्ड मेटन!)



कोरल सीडीएन परियोजना के प्रकाशनों की सूची



पीयर-टू-पीयर नेटवर्क पर हमले



एक धोखा-प्रतिरोधी P2P ऑनलाइन गेमिंग सिस्टम का डिज़ाइन



सहकर्मी से सहकर्मी फ़ाइल सिस्टम में सुरक्षित सामग्री



सामाजिक नेटवर्क पर और के लिए सुरक्षित सिस्टम का निर्माण



विश्वसनीय सहयोग के लिए सुरक्षित पीयर-टू-पीयर नेटवर्क