Windowsのハードリンクバックアップ

私は、多くの人と同様に、バックアップについて考えました。 ウィンチェスターが妻のラップトップで燃え尽きるまで、ゆっくりと考え、考え、さまざまな選択肢を考えました。 この悲しい出来事が私の活動に拍車をかけ、その結果をこの記事で紹介したいと思います。



バックアップについてです。 私の仕事を正確に詳しく説明します。 誰かにとって状況はおそらく異なるかもしれませんが、私のような人がたくさんいるはずです。 したがって、私のアドバイスが多くの人々に役立つことを願っています。



まず、何を保存するかを決定します。 私にとって、最初の場所は写真です。 2003年、私は最初のデジタルカメラを購入し、それ以来、すべての写真はデジタルで保存されています。 私の両親には、私のgreat祖母とgreat祖父の写真が入ったアルバムがあります。 2003年よりも新しい論文には何も残しません。 したがって、特にデジタル写真の安全性に注意する必要があります。 現在、私の写真フォルダは180ギガバイトの「重さ」があり、1か月に1〜2ギガバイト増えています。



写真に加えて、さまざまなプロジェクトのファイルがあります。 たとえば、この記事はそれらの1つになります。 これらはテキストファイル、プログラムです。 場所は少しかかりますが、多くの仕事がそれらに投資されます。 音楽のコレクションもあり、そのいくつかは私がCDから個人的にデジタル化したものです。 かつて私はビデオ編集が好きでした-それ以来、約300ギガバイトの操作時間が残っています。 これはすべて失うのは非常に残念です。 別のデータウェアハウスは、仕事用のラップトップです。 当社では、SVNのコード、Sharepointのドキュメントなど、貴重なものはすべて一元的に保存されています。 ITは彼らの安全に責任があり、これまでのところ問題はありませんでした。 ただし、自分で作成したマシン上のファイルの選択があります。 それは私の生産性を向上させます。そして、ハードドライブがいつか長生きするように命じても、これらすべてが消えないことを保証したいと思います。





コピーする必要のないものについてのいくつかの言葉。 配給や映画を保存しても意味がありません。 ネットワークからダウンロードしたものは再度ダウンロードできます。 また、新しいバージョンのリリース後、ディストリビューションの関連性が失われます。 システムをバックアップする必要もありません。 私の経験では、システムクラッシュは非常にまれであり、OSのバージョン、使用されているプログラム、またはハードウェアをアップグレードすることをお勧めします。



すべてのコンピューターでWindowsが実行されています。 バックアップ専用の2番目のシステムとしてLinuxを使用することを考えましたが、そうしないことにしました。 UNIXシステムの使用経験がほとんどないため、セットアップに時間がかかりすぎて、おそらく何か間違ったことをします。 バックアップは不便ですが、まれにしか行われません。



さて、私が自分を守ろうとしている脅威について。 1つは、突然のハードドライブの障害です。 この不幸から、RAIDアレイが役立ちます。 私の現在のコンピューターにはRAID-1が搭載されていますが、考えたとき、そこで停止しないことにしました。 すべては人生で起こります。 たとえば、予期しない電力サージについて話します。その結果、システムユニットの内容全体が燃え尽きます。 また、はるかに高い確率で、非常に悲しい結果をもたらす特に悪意のあるウイルスの攻撃を受ける可能性があります。 かつてウイルスなしで問題が発生しました。以前よりも古いサービスパックを使用してWindowsを配布キットからインストールしました。 以前のシステムで作成されたファイルを認識しないチェックディスクが起動し、それらを「修正」し始め、混乱と破壊を引き起こしました。 一般的に、誤って貴重な情報を自分で削除することができます。



私の意見では、理想的な解決策は外付けUSBドライブにバックアップすることです。 これで、十分な量のホイールを購入できます。 たまにしかコンピュータに接続しないと、電力サージやウイルス攻撃を恐れることはありません。 このようなドライブの信頼性は、従来のハードドライブの信頼性より悪くありません。



バックアップを行う方法の問題を解決するために残っています。 最も簡単な方法：すべてをコピーします。 ただし、長期的にはこれは機能しません。 コンピューター上のファイルは常に変化しています。 毎回すべてのコピーを作成することはオプションではありません。 たとえば、写真のあるディレクトリは基本的に変更されず、何かが追加されるだけです（古いファイルの小さな変更は除外できません）。 そのため、違いを追跡する必要があります。 多くの質問がすぐに発生します：これを行う方法、古いコピーを保持するかどうかなど。 確かに、これらの問題はすべて何らかの形ですでに解決されています。 他の人がどのようにこれらの問題を解決するかを見つけようとしました。 理想的には、コンピュータ科学者の世代の経験を一般化し、可能な限り最善の方法ですべてを行う何らかの種類のソフトウェアが必要です。 これが私の探求の物語です。

最初にアドバイスを受けたのは、ノートンゴーストです。 確かに、この製品は現在販売されていませんが、代わりに何らかのシマンテックシステムリカバリが行われていることがわかりました。 このソフトウェアは、バックアップシステム用に強化されています。 おそらく、同様の車の大群をサポートする人に適しています。 会計士のコンピューターに何か起こりましたか？ 問題ありません。30分でアーカイブからクリーンなシステムを復元し、データは1Cのままです。 私は、その場合、システムを再配置し、これを、使用しているOSおよびプログラムのより新しいバージョンへの移行と組み合わせることをお勧めします。



次の項目は「通常の手段」と見なされました。 これは、Windows 7では「データアーカイブ」、XPではntbackupです。 私はこの質問を少し研究しましたが、Windows 7は奇妙な複雑な方法で増分バックアップを行うことがわかりました。 ネットワークの広大さで、私はこのスクリーンショットを見つけました：





これと説明を使用して、システムは最初にすべてのデータをアーカイブにパックし、次に変更されたファイルを見つけて、デルタを持つアーカイブを作成すると結論付けることができます。 このアルゴリズムが誰のために設計されているかはわかりませんが、明らかに私には向いていません。 まず、私のメインボリュームは、収穫する必要のない写真によって作成されます。 よく揺れるデータは、大量のデータを占有しません。 一般に、オフィスの文書でさえzipアーカイブになりました。 第二に、このzipnikのセットを管理する方法は完全に明確ではありません。 たとえば、場所が緊急に必要になった場合にそれらの1つを削除することは可能ですか？ 必要なフォルダーの特定のバージョンをいくつか残して、残りを削除できますか？ そして最後に、最も不愉快なこと-このデータが将来問題なく復元できるという確実性はありません。 バックアップアルゴリズムは、XPから7-keへの移行中に変更されました。 Windows 10がこれらのバックアップを忘れないという確実性はありません。 または、MacまたはLinux、またはデスクトップ用の将来のAndroidに切り替えることもあります-知っています。 一般に、私に合ったメカニズムは、一般的な形式を使用して、独自のソフトウェアなしで展開できるように、わかりやすい方法で結果を提供する必要があります。



データを保存する別の潜在的なソリューションは、ネットワーク上にすべてを保存することです。 しかし、ここにもニュアンスがあります。 まず、高価です。 最大テラバイトのデータを保存する必要があります。 費用はいくらですか？

• 「ノートンストア」の「ネットワークバックアップ」は、5 GB-550 r、25 GB-1750 rです。
• Yandex.Disk：1テラバイトで年間9000ルーブル。
• Googleドライブ：1テラバイトで月額50ドル。

高いコストに加えて、懸念はありませんが、ある日ファイルが利用できない場合はどうなりますか？ たとえば、ハッカーが私のアカウントを保持し、それを使用してスパムを送信すると、管理者がそのアカウントを閉じることができます（そのため、Odnoklassnikiでアカウントを確保しました）。 「このサービスはあなたの国では利用できません」という碑文を一度見ることもできます（はい、YouTubeなど）。 理論的には、サービス自体の人気が失われ、閉鎖される可能性があります（ところで、私のサイトはnarod.ruでどうなっていますか？）。 いつかそれらを保持している会社が破産した場合、私のデータに何が起こるか想像するのは怖いです。



幸いなことに、インターネットでは、Windowsのバックアップの問題を解決する方法がありました： blog.jay2k1.com/2011/08/13/how-to-create-rsync-like-hard-link-backups-with-vss-on -窓



この問題は、cygwinライブラリを使用してLinux rsyncを実行し、ボリュームシャドウコピーサービスまたはVSSを介してデータを転送することで解決しました。 これは何を与えますか？

以下は、参照による記事の無料翻訳です。



まず、それが何であるかを知らない人のためのハードリンクに関する小さな教育プログラムです（私はそれを知りませんでした）。 c：\ files \ hello.txtに「nice bear」という単語を含むテキストファイルがあるとします。 そのコンテンツは、ディスク上のある場所、たとえば位置10246に記録され、これはディスクの「コンテンツのテーブル」に反映されます。 目次には、「hello.txtファイルがあり、c：\ filesフォルダーにあり、そのコンテンツは10246の位置にあります」と記載されています。 ファイル名とデータ自体の間のリンクは、ハードリンクと呼ばれます。 ファイルを削除すると、データは消去されず、ハードリンクのみが削除されます。 ハードリンクがないと、システムはそのアドレスのデータを認識できなくなり、他のハードリンクが位置10246を指していない場合、この位置は空きと見なされます。 時間が経つにつれて、他のデータと擦れ合う可能性があります。 一般に、「ファイルの削除」は実際にはハードリンクの削除です。



「ディスクのコンテンツのテーブル」への記録は多くのスペースを占有しないため、同じファイルへの多くのハードリンクが許可されます。 この例では、ファイルへの2番目のハードリンク、たとえばc：\ test.txtを作成できます。 次に、両方の記述子（c：\ test.txtおよびc：\ files \ hello.txt）が同じコンテンツ（位置10246の「bear bear」）を指します。 すべてが同じ内容の2つのファイルがあるかのように見えますが、実際には同じファイルであり、名前は異なります。 c：\ files \ hello.txtを開いて「author drink yadu」と入力し、このファイルを閉じてc：\ test.txtを開くと、これらの変更が表示されます。



ハードリンクには、バックアップに非常に便利な2つのプロパティがあります。1）スペースをほとんど占有しない、2）少なくとも1つのハードリンクが参照するまでファイルが削除されない これに基づくバックアップアルゴリズムは次のように機能します。

まず、すべてのデータをバックアップフォルダーにコピーします。たとえば、「f：\ backups \ 1 \」などです。 次の開始時に、ファイルを以前のバックアップセットと比較します。

• ファイルが新規または変更されている場合は、「f：\ backups \ 2 \」にコピーします。
• 前回からファイルが変更されていない場合、以前のバックアップからのハードリンクが指すのと同じ場所にハードリンクを作成します。 その結果、バックアップセット1と2からの2セットのハードリンクが同じファイルを指します。ディスクスペースは重複に費やされませんが、ユーザーには2つの完全バックアップがあるようです。 実際、2番目のバックアップには新しいファイルと変更されたファイルのみが含まれ、最初のバックアップの残りのファイルへのハードリンクが含まれます。 そして、ある日、場所がなくなった場合-最初のバックアップを削除できます。2番目のバックアップで使用されていないファイルのみが削除されます。 つまり、再度完全バックアップを行う必要はありません。

ハードリンクを操作するこのすべての魔法は、rsyncユーティリティを使用して行われます。rsyncユーティリティは元々nixシステムのものですが、cygwinライブラリの助けを借りてWindowsで動作します。 しかし、それだけではありません。 実際、Windowsは、ファイルを開いたプログラムによってブロックされている場合、ファイルのコピーを禁止しています。 これを回避するために、rsyncはVSSを使用してファイルをコピーします。 ウィキペディアによると、VSSはWindowsオペレーティングシステムのサービスであり、現在作業中のファイルをコピーできます。 システムやロックされたファイルをコピーすることもできます。 このサービスは、次のプログラムが機能するために必要です：システムリカバリ、アーカイブプログラム（Acronis True Imageなど）。



このリンク（http://pub.jay2k1.com/rsyncbackup.zip）は、バックアップを実行するアセンブリを提供します。 次のアルゴリズムに従って動作します。vss-exec.cmdファイルで、バックアップするディスクとコピーを保存する場所を指定する必要があります。 また、rsync-excludes.txtファイルで、バックアップの対象ではない除外フォルダーを指定できます。

バックアップは、_start_backup.cmdを使用して起動されます。 コンピューターの名前のフォルダーがバックアップフォルダーに作成されます。このフォルダーは、バックアップ時間に応じて名前が付けられた一連のバックアップフォルダーです。 vss-exec.cmdでは、バックアップの最大数が設定されています。 この数に達すると、スクリプトは最初のものを削除してから、上記のアルゴリズムを使用して別のバックアップを作成します。



これはほとんど私が必要とするものですが、いくつかのポイントがあります。 このバックアップスクリプトは、ディスクの内容全体が同じコンピューターの他のディスクにコピーされるような状況向けに設計されています。 私の妄想は外部メディアへのバックアップを必要とし、この場合にはいくつかの問題があります：

• まず、リムーバブルディスクは、非常にランダムなユーザーの意志により、異なる文字にマウントされる可能性があり、バックアップが開始されるたびにvss-exec.cmdで修正する必要があり、不便です。
• 次に、複数のコンピューターから1つのリムーバブルディスクにバックアップします。そのためには、各コンピューターでバックアップバイナリを構成する必要があります。
• 第三に、選択したフォルダを複数の異なるドライブからバックアップすることはできません。

次のスクリプトを実装して、スクリプトを修正しました。

• バックアップが実行されるリムーバブルドライブでのみバックアップバイナリを作成および構成する必要があります。
• データのバックアップ元の各コンピューターで、ファイルC：\ backup_folders.iniを作成する必要があります。このファイルに、保存するフォルダーを指定する必要があります。
• その後、リムーバブルディスクを挿入して、そこから_start_backup.cmdを実行します。backup_folders.iniで指定されたすべてのフォルダーを吸い込みます。

スクリプトは、（すべての呼び出されたユーティリティとともに）ここからダウンロードできます。

www.dropbox.com/s/un82qyrsuq3r3j0/rsync_backup_for_win.zip



私はすぐに私の防衛でいくつかの言葉を言いたいです。 私は真剣にcmdファイルを書いたことはありませんでしたが、それは私にとって本当の拷問であることが判明しました。 等号の後にスペースを入れると、プログラムは動作を停止します。 場合によっては、行末のスペースにも応答します。 別の曲は、変数の範囲を持つブランド機能です。 元のスクリプトは明らかにドイツ語を話すプログラマーによって書かれたため、「set stunde =％ZEIT：〜-8.2％」のような構造に驚かないでください。 ネットワークからのiniファイルを最小限の変更で解析するコードを取りました。 これは、「cmd-scriptのファイルから設定を読み取る」というリクエストで最初に見つかったものです。 そのため、iniファイルが使用されますが、その機能は明らかに冗長です。 backup_folders.iniファイルの例を以下に示します。

[backup folders] photo=F:\Photo lit=F:\literature music=F:\MUSIC desktop=F:\Desktop
      
      

        
        
        
      

    
        
        
        
      
      

        
        
        
      

    
     

[バックアップフォルダ]カテゴリの名前は何にも影響しませんが、そのままにしておくことをお勧めします。 変数名（等号の前の文字）もどこにも行かない-コメントと見なしてください。 バックアップフォルダーのパスは等号の後です。 Windowsエクスプローラーのアドレスバーから取得できます。 ご想像のとおり、このユーティリティvinigretでは、それぞれがファイルへのパスで使用するスラッシュと、ディスクに名前を付ける文字（大または小）について独自のビューを持っています。 このスクリプトは、Windowsエクスプローラーからこれらのユーティリティの気まぐれなパスに適応します。

スクリプトは、rsyncの結果をログに残します。



気づいた問題：名前に日本語文字やその他の非標準文字を含むファイルをコピーしたくない。 フォーラムを検索しても何も得られませんでした。 これはcygwinのバグであると書いており、システム言語に日本語を入れることを推奨しています。 ただし、ロシア語の文字を含むファイルはコピーされなくなります。 どうすればいいかわかりませんが、この問題は無視できると判断しました。



残りは正常に動作します。 シャドウコピーを使用すると、すべてをコピーでき、コピー中にマシンで安全に作業でき、何も落ちません。 初期バックアップ時間は、ディスクの速度に依存します。 200ギガバイトあたり100万個以上のファイルがあり、約8時間コピーされました。 変更がなく、コピーするものがない場合、バックアップは数十分のオーダーで行われます。