🏨 🌔 🎨 ओपन सोर्स बैकअप टूल्स का अवलोकन 🔇 🏣 🏦

जानकारी का समर्थन करने के लिए कई श्रेणियों में विभाजित किया जा सकता है:

- घर / कार्यालय उपयोग (एनएएस या क्लाउड के लिए महत्वपूर्ण दस्तावेजों, फोटो आदि का बैकअप) के लिए;

- मध्यम और बड़े (ऑफ़लाइन) उद्यमों के लिए (महत्वपूर्ण दस्तावेजों, रिपोर्टों, डेटाबेसों का आरक्षण, दोनों सर्वर पर और कर्मचारियों के वर्कस्टेशन पर);

- छोटी वेब परियोजनाओं के लिए (एक बैकअप साइट और एक होस्टिंग साइट या VPS / VDS से दूरस्थ होस्ट (या इसके विपरीत));

- एक वितरित आर्किटेक्चर के साथ बड़ी वेब परियोजनाओं के लिए (लगभग ऑफ़लाइन उद्यमों में ही वैश्विक नेटवर्क में काम का ध्यान रखना, और स्थानीय नहीं, और आमतौर पर खुले स्रोत उपकरण का उपयोग करना)।

घर और कार्यालय के लिए सॉफ्टवेयर उत्पादों के साथ, सब कुछ काफी सरल है, बहुत सारे समाधान हैं, दोनों खुले और मालिकाना हैं, जो कि प्रसिद्ध सॉफ्टवेयर निर्माताओं से समाधान के लिए cmd / bash स्क्रिप्ट से हैं।

उद्यम क्षेत्र में, सब कुछ काफी उबाऊ है, बहुत सारे सॉफ़्टवेयर उत्पाद हैं जो लंबे समय से कई उद्यमों, बड़े बैंकों आदि में सफलतापूर्वक काम कर रहे हैं, हम किसी का भी विज्ञापन नहीं करेंगे । इन उत्पादों में से कई ने कुछ उद्यमों के मानकों द्वारा "मामूली पैसे" के लिए सिस्टम प्रशासकों के जीवन को बहुत सरल कर दिया है।

इस लेख में, हम विभिन्न आकारों की वेब परियोजनाओं के बैकअप के लिए खुले स्रोत के समाधानों पर करीब से नज़र डालेंगे, साथ ही फाइल बैकअप की गति का भी परीक्षण करेंगे।

लेख वेबमास्टरों, छोटे वेब स्टूडियो के लिए उपयोगी होगा, और शायद एक अनुभवी व्यवस्थापक को भी यहां कुछ उपयोगी मिलेगा।

एक छोटी सी साइट या ब्लॉग या कई साइटों को आरक्षित करने के लिए क्या आवश्यक है, उदाहरण के लिए एक वीपीएस से, जिस पर डिस्क स्थान निशान तक सही है?

दूरस्थ होस्ट के लिए आरक्षण शुरू करता है। यानी अपने होस्टिंग या वीपीएस पर मूल्यवान स्थान को बचाने के लिए, आप अपने घर / कार्यालय के कंप्यूटर (शायद आपके पास एनएएस) से, एफटीपी या sftp प्रोटोकॉल के माध्यम से कनेक्ट कर सकते हैं, मैन्युअल रूप से या शेड्यूल फ़ाइलों को ले सकते हैं और ध्यान से उन्हें किसी सुरक्षित स्थान पर संग्रहीत कर सकते हैं। । कोई भी ftp या sftp क्लाइंट करेगा, एक अच्छा rsync विकल्प।

Rsync के साथ यह कुछ इस तरह दिखता है:

rsync -avzPch user@remote.host:/path/to/copy /path/to/local/storage

और यह अच्छा लगता है, लेकिन क्या होगा यदि आपको डेटाबेस बैकअप के कई संस्करणों को संग्रहीत करने की आवश्यकता है? या किसी कारणवश वृद्धिशील प्रतियां बनाना आवश्यक था, और एन्क्रिप्शन भी जोड़ना अच्छा होगा। आप थोड़ा बैठ सकते हैं और अपनी आवश्यकताओं के लिए एक अच्छी ~~बाइक~~ स्क्रिप्ट बना सकते हैं (उदाहरण के लिए, हमारे rsync-backup ), या कुछ तैयार उपयोगिताओं को लें।

कई उपयोगिताओं पर विचार करें जो विभिन्न अनुप्रयोगों के लिए उपयुक्त हैं, विशेष रूप से ऊपर वर्णित मामले के लिए।

कपट

दोहराव एक पर्याप्त क्षमताओं के साथ कंसोल-आधारित बैकअप उपयोगिता है।

द्वैधता के लिए कई चित्रमय खाल हैं - Gnome पर्यावरण के लिए Deja-dup और KDE के लिए परीक्षण-ड्राइव। एक कंसोल रैपर भी है।

स्थानीय रूप से या एक दूरस्थ होस्ट में टार प्रारूप में एन्क्रिप्टेड वॉल्यूम के लिए द्वैधता बैकअप। पुस्तकालयों की लाइब्रेरी वृद्धिशील फ़ाइल रिकॉर्डिंग के लिए अनुमति देता है, संपीड़न के लिए gzip का उपयोग किया जाता है, और gpg एन्क्रिप्शन करता है।

कोई कॉन्फ़िगरेशन फ़ाइल नहीं है। अपने आप बैकअप प्रक्रिया को स्वचालित करें।

उपयोग के उदाहरण:

एक दूरस्थ होस्ट करने के लिए एक स्थानीय फ़ोल्डर का निर्माण

duplicity /usr scp://host.net/target_dir

दूरस्थ होस्ट से स्थानीय फ़ोल्डर में आरक्षण

duplicity sftp://user@remote.host/var/www /home/backup/var/www

वसूली

duplicity restore /home/backup/var/www sftp://user@remote.host/var/www

द्वैधता के बारे में हैबर पर पहले से ही लेख थे, इसलिए हम इस पर ध्यान केंद्रित नहीं करेंगे।

Rsnapshot

Rsnapshot के बारे में भी Habré, यहाँ और यहाँ पर बहुत कुछ कहा जाता है । और यहाँ एक अच्छा लेख है। सामान्य रूप से Rsnapshot वृद्धिशील बैकअप (स्नैपशॉट) बनाने के लिए एक अच्छा उपकरण है। पर्ल में लिखा गया, फ़ाइलों की प्रतिलिपि बनाने के लिए rsync का उपयोग करता है। यह काफी तेज है (rdiff- बैकअप की तुलना में तेज) और हार्ड लिंक के कारण अच्छा डिस्क स्थान बचाता है। यह पूर्व और बाद के बैकअप संचालन करने में सक्षम है, यह (बिना बैसाखी) रिमोट होस्ट के लिए एन्क्रिप्ट और बैकअप नहीं कर सकता है। फ़ाइलों को उनके मूल रूप में संग्रहीत किया जाता है - पुनर्प्राप्त करना आसान। आसानी से संगठित विन्यास। यह कई अस्थायी आरक्षण स्तरों (दैनिक, साप्ताहिक, मासिक) का समर्थन करता है। काफी सक्रिय समुदाय है।

आपके द्वारा कॉन्फिगरेशन में आवश्यक लाइनें (बैकअप और कहां है) लिखने के बाद, आप बैकअप शुरू कर सकते हैं:

rsnapshot -v hourly

डिफ़ॉल्ट रूप से, कई घंटे और दैनिक स्नैपशॉट संग्रहीत किए जाएंगे। Rsnapshot अन्य उपयोगिताओं से भिन्न होता है कि यह बॉक्स से बाहर स्वचालित है (डेबियन / उबंटू के लिए प्रासंगिक), अर्थात। आवश्यक लाइनें मुकुट में लिखी जाएंगी, और निर्देशिकाओं के आरक्षण "/ घर", "/ आदि", "/ usr / स्थानीय" को विन्यास में लिखा गया है

Rdiff-बैकअप

Rdiff-backup रु। नोट के समान है, लेकिन इसके विपरीत, यह पायथन में लिखा गया है और डेटा ट्रांसफर करने के लिए लाइब्रस लाइब्रेरी का उपयोग करता है। एक दूरस्थ होस्ट में फ़ाइलों को कॉपी करने में सक्षम, जिस तरह से, हम काफी सफलतापूर्वक उपयोग करते हैं और कुछ स्थानों पर हम अभी भी उपयोग करते हैं। आप दूरस्थ होस्ट से भी बैकअप ले सकते हैं, लेकिन पहले आपको वहां आरडीएफ-बैकअप स्थापित करना होगा। यह फ़ाइल (डेल्टा) की जानकारी को एक संकुचित रूप में बदलता है, बड़ी फ़ाइलों के लिए अच्छा है, यह rsnapshot की तुलना में डिस्क स्थान को भी बचाता है।

मेटाडेटा (अधिकार, दिनांक, स्वामी) को अलग-अलग फ़ाइलों में संग्रहीत किया जाता है।

बैकअप कंसोल से लॉन्च किया गया है:

rdiff-backup remote.host::/home/web/sites/ /home/backup/rdiff/

एक कॉन्फ़िगरेशन फ़ाइल ग्रहण नहीं की गई है। अपने आप को स्वचालित।

Obnam

ओबनाम एक ओपन क्लाइंट-सर्वर बैकअप एप्लिकेशन है, प्रोग्राम कोड पायथन में लिखा गया है, एसएसएच प्रोटोकॉल का उपयोग डेटा ट्रांसफर के लिए किया जाता है। इसे दो प्रकारों में संचालित किया जा सकता है:

- स्थानीय होस्ट से रिमोट सर्वर पर रिजर्व पुश, जिस पर ओबनम डेमन चल रहा है।

- खींच डेमॉन खुद ही ssh प्रोटोकॉल के जरिए रिमोट मेजबानों से फाइल लेता है। इस स्थिति में, Obnam क्लाइंट की आवश्यकता नहीं है।

स्नैपशॉट, डिडुप्लीकेशन और एन्क्रिप्शन GnuPG करने में सक्षम। फ़ाइल बैकअप वॉल्यूम में संग्रहीत हैं। मेटाडेटा को अलग-अलग फ़ाइलों में संग्रहीत किया जाता है। रिकवरी कंसोल के माध्यम से की जाती है।

Opennet (http://www.opennet.ru/opennews/art.shtml?num=39323) पर विवरण का एक छोटा सा अंश:

“ओबनम द्वारा पेश किया गया बैकअप दृष्टिकोण तीन लक्ष्यों को प्राप्त करना है: उच्च भंडारण दक्षता, उपयोग में आसानी और सुरक्षा सुनिश्चित करना। भंडारण दक्षता को एक विशेष रिपॉजिटरी में बैकअप रखकर प्राप्त किया जाता है जिसमें डेटा को अधिकतम प्रतिनिधित्व में कटौती का उपयोग करके संग्रहीत किया जाता है। एक रिपॉजिटरी विभिन्न क्लाइंट्स और सर्वर के बैकअप को स्टोर कर सकती है। इसी समय, डुप्लिकेट को सभी संग्रहीत बैकअप के लिए मर्ज कर दिया जाता है, चाहे उनका प्रकार, निर्माण समय और बैकअप स्रोत कुछ भी हो। रिपॉजिटरी की अखंडता की जांच करने और क्रैश के बाद इसे पुनर्स्थापित करने के लिए, फस्क उपयोगिता का एक विशेष संस्करण प्रदान किया गया है।

यदि सर्वर समूह पर समान ऑपरेटिंग सिस्टम का उपयोग किया जाता है, तो रिपॉजिटरी में डुप्लिकेट फ़ाइलों की केवल एक कॉपी बचाई जाएगी, जो कि बड़ी संख्या में विशिष्ट प्रणालियों के बैकअप को व्यवस्थित करते समय डिस्क स्थान को बचा सकती है, उदाहरण के लिए, आभासी वातावरण। बैकअप प्रतिलिपियों को संग्रहीत करने के लिए भंडार को स्थानीय डिस्क पर और बाहरी सर्वरों पर रखा जा सकता है (बैकअप प्रतियों को संग्रहीत करने के लिए एक सर्वर बनाने के लिए, अतिरिक्त कार्यक्रमों की आवश्यकता नहीं है, एसएफटीपी के माध्यम से पहुंच पर्याप्त है)। "विशेष रूप से तैयार किए गए FUSE- मॉड्यूल का उपयोग करके वर्चुअल विभाजन बढ़ते हुए बैकअप तक पहुंच संभव है।"

यह सब अच्छा है, लेकिन दूरस्थ परिणाम की प्रतिलिपि बनाने के लिए सभी परिणामों के साथ BUT scp का उपयोग किया जाता है।

Bacula

बकुला एक क्रॉस-प्लेटफ़ॉर्म क्लाइंट-सर्वर सॉफ़्टवेयर है जो आपको विभिन्न प्रकारों के कंप्यूटर और ऑपरेटिंग सिस्टम के लिए नेटवर्क पर बैकअप, रिकवरी और डेटा सत्यापन का प्रबंधन करने की अनुमति देता है। वर्तमान में, बकुला का उपयोग लगभग किसी भी यूनिक्स जैसी प्रणाली (लिनक्स (zSeries सहित), NetBSD, FreeBSD, OpenBSD, Solaris, HP-UX, Tru64, IRIX, Mac OS X) और Microsoft Windows पर किया जा सकता है।

बकुला पूरी तरह से एकल कंप्यूटर पर भी चल सकता है या कई पर वितरित, और टेप, टेप लाइब्रेरी (ऑटोकैन्ज़र / लाइब्रेरी) और डिस्क सहित विभिन्न प्रकार के मीडिया के लिए बैकअप लिख सकता है।

बकुला बैकअप, संग्रह और पुनर्प्राप्ति के लिए एक नेटवर्क क्लाइंट-सर्वर प्रोग्राम है। डेटा वेयरहाउस के प्रबंधन के लिए पर्याप्त अवसर प्रदान करते हुए, यह खोई या क्षतिग्रस्त फ़ाइलों की खोज और पुनर्प्राप्ति की सुविधा प्रदान करता है। अपनी मॉड्यूलर संरचना के कारण, बकुला स्केलेबल है और छोटे और बड़े दोनों प्रणालियों पर काम कर सकता है जिसमें एक बड़े नेटवर्क में स्थित सैकड़ों कंप्यूटर शामिल हैं।

बकुला के पास GUI और वेब इंटरफेस (Almir, Webmin) की जटिलता की डिग्री बदलती है।

कुछ समय पहले, मुझे डेबियन व्हीज़ी पर इसे चलाने के लिए कड़ी मेहनत करनी पड़ी और अल्मीर के साथ कोई फायदा नहीं हुआ।

बकुला एक विश्वसनीय, समय-परीक्षणित बैकअप प्रणाली है, जिसमें कई बड़े उद्यमों में खुद को साबित किया है। बकुला अपनी कार्य योजना में मूल रूप से ओबनाम से भिन्न है। क्लाइंट-सर्वर विकल्प के मामले में, बकुला 100% केंद्रीकृत प्रणाली होगी। आपको उस होस्ट पर क्लाइंट एप्लिकेशन की भी आवश्यकता है जिसका आप बैकअप लेना चाहते हैं। तीन डेमॉन एसडी, एफडी सर्वर पर एक साथ काम करते हैं। डीआईआर - स्टोरेज डेमॉन, फाइल डेमॉन और डायरेक्टर क्रमशः। यह अनुमान लगाना आसान है कि कौन किसके लिए जिम्मेदार है।

Bacula संस्करणों में बैकअप फ़ाइलों को संग्रहीत करता है। मेटाडेटा डेटाबेस (SQLite, MySQL, PostgreSQL) में संग्रहीत है। रिकवरी कंसोल उपयोगिता का उपयोग करके या ग्राफिकल शेल के माध्यम से किया जाता है। कंसोल के माध्यम से पुनर्प्राप्ति प्रक्रिया, स्पष्ट रूप से, सबसे सुविधाजनक नहीं है।

आंकड़े

मैंने WP पर कई साइटों के साथ एक छोटे फ़ोल्डर (626M) की बैकअप गति की जांच करने का निर्णय लिया।

ऐसा करने के लिए, मैं इस सभी सॉफ़्टवेयर को तैनात और कॉन्फ़िगर करने के लिए बहुत आलसी नहीं था। :)

परीक्षण में दो भाग होते हैं:

1. प्रतिभागी द्वैधता, रुपीस, रुनापशॉट, रदीफ़-बैकअप। हम इसे दूरस्थ सर्वर से होम कंप्यूटर पर कॉपी करते हैं, और चूंकि Rsnapshot रिमोट बैकअप नहीं कर सकता है, यह और Rdiff-backup (तुलना के लिए) होम मशीन पर काम करेगा, अर्थात। वे सर्वर से सर्वर से फाइलें खींच लेंगे, और बाकी, इसके विपरीत, उन्हें होम मशीन पर धकेल देंगे।

सभी उपयोगिताओं को न्यूनतम आवश्यक विकल्पों के साथ लॉन्च किया गया था।

rsync

rsync -az /home/web/sites/ home.host:/home/backup/rsync

पूर्ण बैकअप

लीड समय:

 real 4m23.179s user 0m31.963s sys 0m2.165s

इंक्रीमेंटल

लीड समय

 real 0m4.963s user 0m0.437s sys 0m0.562s

जगह पर कब्जा कर लिया:

626M /home/backup/duplicity/

कपट

duplicity full /home/web/sites/ rsync://home.host//home/backup/duplicity

पूर्ण बैकअप

लीड समय:

 real 5m52.179s user 0m46.963s sys 0m4.165s

इंक्रीमेंटल

लीड समय

 real 0m49.883s user 0m5.637s sys 0m0.562s

जगह पर कब्जा कर लिया:

450M /home/backup/duplicity/

Rsnapshot

rsnapshot -v hourly

पूर्ण बैकअप

लीड समय:

 real 4m23.192s user 0m32.892s sys 0m2.185s

इंक्रीमेंटल

लीड समय

 real 0m5.266s user 0m0.423s sys 0m0.656s

जगह पर कब्जा कर लिया:

626M /home/tmp/backup/rsnap/

Rdiff-बैकअप

rdiff- बैकअप Remote.host::/home/web/sites/ / होम / बैकअप / rdiff / बैकअप

पूर्ण बैकअप

लीड समय:

 real 7m26.315s user 0m14.341s sys 0m3.661s

इंक्रीमेंटल

लीड समय

 real 0m25.344s user 0m5.441s sys 0m0.060s

जगह पर कब्जा कर लिया:

638M /home/backup/rsnap/

परिणाम काफी अनुमानित हैं। सबसे तेजी से रुकावट निकला, रुदन के लिए लगभग समान परिणाम। द्वैधता थोड़ी धीमी है, लेकिन डिस्क स्थान कम लेती है। Rdiff-backup के बदतर होने की उम्मीद है।

2. अब दिलचस्प है। आइए देखें कि ओबनाम और बकुला कैसे काम करते हैं। दोनों समाधान काफी सार्वभौमिक हैं और कुछ समानताएं हैं। आइए देखें कि कौन तेज है।

Obnam

पहली बार जब मैंने दूरस्थ होस्ट से अपने घर में कॉपी करना शुरू किया, तो मुझे लंबे समय तक इंतजार करना पड़ा:

ओबनम बैकअप - संकेंद्रित sftp: //home.host/home/backup/obnam/ / होम / होम / /

पूर्ण बैकअप

23919 फ़ाइलों का समर्थन, 81.7 KiB / s औसत गति पर 1h42m16 में 489.7 MiB अपलोड किया गया

लीड समय:

 real 102m16.469s user 1m23.161s sys 0m10.428s

ओबनम बैकअप - संकेंद्रित sftp: //home.host/home/backup/obnam/ / होम / होम / /

इंक्रीमेंटल

23919 फ़ाइलों का बैकअप लिया गया, जो 3m8s में 0.0 B / s की औसत गति से 0.07 अपलोड की गई है

लीड समय

 real 3m8.230s user 0m4.593s sys 0m0.389s

जगह पर कब्जा कर लिया:

544M /home/tmp/backup/rsnap/

बहुत अच्छा परिणाम नहीं है, यह मुझे लगता है, हालांकि समझ में आता है।

हम दूसरी बार कोशिश करेंगे, लेकिन पहले से ही एक पड़ोसी नेटवर्क पर गीगाबिट नेटवर्क के माध्यम से और संपीड़न जोड़ सकते हैं।

obnam backup --compress-with = deflate --repository sftp: //remote.host/home/backup/obnam/ / home / web / sites /

पूर्ण बैकअप

२३ ९ १ ९ फाइलों का समर्थन करते हुए, ६B ९ in मिब में ३६ ९। In मि.बी. अपलोड किया गया

लीड समय:

 real 2m15.251s user 0m55.235s sys 0m6.299s

obnam backup --compress-with = deflate --repository sftp: //remote.host/home/backup/obnam/ / home / web / sites /

इंक्रीमेंटल

23919 फ़ाइलों का बैकअप लिया गया, जो 0.08 बी / एस की औसत गति से 8 एस में 0.0 बी अपलोड किया गया

लीड समय

 real 0m7.823s user 0m4.053s sys 0m0.253s

जगह पर कब्जा कर लिया:

434M /home/tmp/backup/rsnap/

इतना तेज और छोटा बैकअप आकार। मैंने एन्क्रिप्शन की कोशिश नहीं की, शायद बाद में, अगर समय हो।

Bacula

बकुला के लिए, मैंने एक पूर्ण क्लाइंट-सर्वर विकल्प तैयार किया। क्लाइंट और सर्वर एक ही गीगाबिट नेटवर्क पर।

मैंने बैकग्राउंड में टास्क शुरू किया और चाय पीने चला गया। जब मैं लौटा तो मैंने पाया कि सब कुछ तैयार था, और निम्नलिखित में लॉग इन करें:

 ... Scheduled time: 23-Apr-2014 22:14:18 Start time: 23-Apr-2014 22:14:21 End time: 23-Apr-2014 22:14:34 Elapsed time: 13 secs Priority: 10 FD Files Written: 23,919 SD Files Written: 23,919 FD Bytes Written: 591,680,895 (591.6 MB) SD Bytes Written: 596,120,517 (596.1 MB) Rate: 45513.9 KB/s ...

मुझे थोड़ी हैरानी भी हुई। सब कुछ 13 सेकंड में किया गया था, अगला लॉन्च एक सेकंड में हुआ।

कुल मिलाकर

Rsnapshot का उपयोग करके, आप आसानी से अपने VPS की अतिरिक्त फ़ाइलों (डेटाबेस की अतिरिक्त स्क्रिप्ट के साथ) का बैकअप अपने घर के कंप्यूटर / लैपटॉप / NAS में हल कर सकते हैं। इसके अलावा, rsnapshot 10-25 मेजबानों के सर्वर के छोटे बेड़े के साथ एक अच्छा काम करेगा (आप कर सकते हैं, और निश्चित रूप से अधिक, आपकी इच्छा पर निर्भर करता है)। बड़ी फ़ाइलों (वीडियो सामग्री, डेटाबेस, आदि) के बैकअप के लिए Rdiff अच्छा रहेगा

द्वैधता न केवल आपके डेटा को बरकरार रखने में मदद करेगी, बल्कि चोरी के मामले में इसे बचाने के लिए (दुर्भाग्य से आप अपनी रक्षा नहीं कर सकते, सावधान और सावधान रहें, किसी को भी सुरक्षित और दुर्गम स्थान पर रखें)।

बकुला एक खुला स्रोत उद्योग मानक है जो कंप्यूटर के एक बड़े बेड़े और किसी भी उद्यम के सर्वर से डेटा को सुरक्षित रखने में मदद करेगा।

ओबनाम एक दिलचस्प उपकरण है जिसमें कई उपयोगी फायदे हैं, लेकिन मैं शायद किसी को भी इसकी सिफारिश नहीं करूंगा।

यदि, फिर भी, किसी कारण से, इन समाधानों में से कोई भी आपको सूट नहीं करता है, तो अपनी बाइक को सुदृढ़ करने के लिए स्वतंत्र महसूस करें। यह आपके लिए व्यक्तिगत रूप से और कई लोगों के लिए उपयोगी हो सकता है।

UPD: एक छोटी धुरी तालिका:

ओपन सोर्स बैकअप टूल्स का अवलोकन

More articles: