10Gアクセスメディアストレージシステム

この記事は、 画像処理用の10Gネットワ​​ークを作成するというアイデアを発展させたものです。



顧客-結婚式、会議、企業イベントなど、あらゆる種類のイベントを積極的に撮影する小さな写真スタジオ

撮影の1日後、1人または2人の写真家が数千枚の写真をすばやく整理し、ベストなものを予備選択し、それらをすばやく処理して、写真の選択の最初のバージョンを顧客に提出する必要があります。

時々、イベントのビデオがこれに追加されます。

その後、写真やビデオ素材のより繊細な処理、フォトアルバムとフォトブックのレイアウト、短編映画の準備が必要になることがよくあります。

コンピューターシステムの部分では、大容量(スタジオで年間約10テラバイトの写真とビデオの素材を作成)と、3〜4台のコンピューターから既存の写真とビデオライブラリへの高速アクセスが必要です。 これらは主にアップル製のコンピューターです。

1年後、写真ビデオコンテンツの約90〜95%が消去され、残りの5〜10%が数年間保存されます。



格納されたデータの総量に対する要望を考慮して、少なくとも6ディスクの容量を持つNAS NASを使用することが提案されました。 その結果、8個のディスクストレージが選択されましたが、初期段階では6個の6TBディスクがインストールされていました。

Appleコンピューターからネットワークリソースにすばやくアクセスする必要性は、次の2つの方法で実装されました。

Thunderbolt-10Gイーサネットコンバーターを介した有線アクセス。

ラップトップのワイヤレスアクセスは、WiFi AC標準に実装されました。



ネットワーク接続ストレージがQNAP TS-870Proとして選択されました。 私はこの会社の機器を長年使用してきましたが、これまでのところ良い経験しかありません。



TS-870Pro





Proインデックス付きのモデルでは、10ギガビットポートを含む追加のネットワークカードをインストールできます。 このようなモデルは1年以上生産されていますが、私のプロジェクトで初めて使用されました。 10ギガビットのバックボーンが存在する以前のソリューションは、Windowsサーバーに基づいて構築されていたため、このような高速ネットワークでの作業時のNASの動作は興味深いものでした。

いくつかの制限は、互換性のある10Gネットワ​​ークカードのかなり短いリストでした。 幸いなことに、ディストリビューターは適切なモデルの1つであるEmulex OCe11102-NXを見つけました。

カードはNASにインストールされ、問題なく「巻き上げ」られました。



Emulex 10G



10G SFP +ポートとスイッチを介して直接接続ケーブルで接続されました。

1台のコンピューターは銅線SFP +ケーブルを介して接続され、もう1台はSFP +トランシーバーを介した光マルチモードを介して接続されました。 トランシーバーは10Gtekの中国語を使用していました。

ただし、テストでは銅ケーブルのみを使用しました。



TS-870Pro戻る



テスト時に利用可能な最新のファームウェアバージョン4.1.1がドライブにインストールされました。

RAID5に基づいた構成をテストしました。これはお客様に適した構成です。

最初に、いくつかの模擬テストが実行されました。

最も有名なものの1つはIntel NASPTです。



NASPT合計



HD Video Recordの値はいくぶん疑わしく見えますが、これはキャッシュの結果であるようです。

しかし、同時読み取りと書き込みの結果は、このケースでは興味深いものです。 そして、彼は非常に立派になりました。



HD Video 1Play 1Record



Attoのテストでは次のことが示されました。



アト



しかし、これらはすべて模擬テストです。

実際のタスクで読み書き速度がどうなるかを理解するのは興味深いことでした。

NASのダッシュボードは次のようになります。 最初にストレージからの読み取り操作があり、次に(異なるコンピューターからの)読み取りと書き込みがあり、次に再度読み取りが行われました。



ダッシュボード



ご想像のとおり、ディスクサブシステムのすべてのパフォーマンスを使用しました。 読み取り専用の場合、1秒あたり500メガバイトを少し下回ります。 書き込みプロセスを追加します-読み取り速度は比例して低下します。

I / Oオペレーションを見ると、約5000〜6000 IOPS、約130ミリ秒のレイテンシがあります。



IOPS



ストレージプロセッサの負荷は50%を超えません。 興味深いことに、負荷は4つのCPUコアに均等に分散されます。



大きなファイルの読み取り(「レイヤー化された」Photoshopファイルおよびビデオファイルの操作をシミュレートする)の結果、速度は毎秒約400〜450メガバイトになりました。



NASから読み取る



SOHOクラスのデバイスにとってどれだけ良いかは、私には言いにくいです。 このクラスのネットワークドライブの他のモデルでどのような結果が得られたかを知ることは興味深いでしょう。



Lightroom、Premiere Pro、画像カタログの「スクロール」時の作業速度、ビデオファイルのキャッシュ、その他の操作がギガビット接続と比較して決定的となるその他の操作など、多くのグラフィックファイルを操作するプログラムで作業しているように感じます。数回。

情報処理の速度も重要であるタスクで作業しますが、速度は向上していますが、それほど重要ではありません。 これらは、サイズがそれぞれ30〜50メガバイトのJPGファイルと、RAWファイルからビデオクリップのスライドショーを生成するタスクでした。 この場合、使用したコンピューターのプロセッサー能力の違いが顕著になりました。 データを迅速にダウンロードでき、その場合の処理​​はプロセッサーのパフォーマンスに「影響を与えません」。



バックアップには、USB3を介して接続され、「クラウド」CrashPlanにコピーする外部ドライブが使用されます。



誰がそのようなソリューションの恩恵を受けることができますか?

私の意見では、これらは写真やビデオ素材のストリームを扱う小さなスタジオです。 これらの素材を処理する複数の人がいて、異なるコンピューターから作業できる場合、多くの場合、多くの外部ドライブに散在するすべてのメディアファイルを1つのデバイスに整理するのが理にかなっています。 また、アクセス速度が向上し(通常の外部ディスクでは、1秒あたり100〜120メガバイトを超える読み取り/書き込み速度は見られませんでした)、単一ディスク障害に対する保護、および自動バックアップを構成できます。

さらに、このようなNASはさらに多くの追加機能を提供します。 一部では、ビデオ監視サーバーとして機能することが重要であり、誰かがそれを使用して急流をダウンロードします。誰かが組み込みのXBMCプレーヤーを使用する機能を見つけるでしょう。



しかし、このシステム自体は間違いなく、バックアップシステムではありません。 持っていれば。 RAID5は単一のドライブ障害から保護しますが、障害の発生したドライブを交換した後、最初のドライブが同期されるまで、2台目のドライブの障害に耐えることはできません。 RAID10やRAID6を整理する手間はありませんが、使用可能なディスク容量の損失は非常に大きく、洪水や火災の場合でも役に立ちません。 この場合-地理的に離れた場所にある2番目の同じデバイスとの同期、外部ディスクへのバックアップ、またはこのプロジェクトで実装されたクラウドへのバックアップ。



「ワークショップの同僚」がどのようにして同様のストレージタスクを解決したかを知るのは興味深いでしょう。企業以外の予算で写真やビデオのソースにアクセスできます。



All Articles