古いことわざは、インターネットはポルノのために作られたと言っています。 世界中の接続速度の向上、オンラインビデオブロードキャスト、ビデオチャットとライブチャット、トラフィックの最適化、大容量ストレージ、信頼できるホスティング-これらはすべて、ポルノ業界の要求の結果です。
Cookieで訪問者を追跡するGoogleが所有する広告ネットワークDoubleClickのレポートによると、ネットワーク上で最も訪問された500のサイトにはポルノの傾向が多数あります。 Xvideosは世界最大のポルノサイトであり、月あたり44億のページビューを獲得しています。これはCNNやESPNの3倍、Redditの2倍です。 LiveJasmin、YouPorn、Tube8、およびPornhubは巨大なWebサイトであり、そのトラフィックはGoogleやFacebookのような巨人より下にしかありません。
もちろん、ポルノリソースの出席を比較する際に考慮しなければならないいくつかの違いに注意する必要があります。 ポルノサイトと通常のサイトの主な違いは、訪問者がそれらに費やす時間です。 通常のニュースサイトでは、平均訪問は3〜6分間続き、1つ以上の記事を読むのに十分ですが、ポルノリソースでは、訪問者は15〜20分間遅れます。 通常のWebサイトのコンテンツは、比較的大量のデータの転送を必要としないテキストまたは画像ですが、ビデオブロードキャストを使用するポルノでは、平均的な訪問者は訪問ごとに100メガバイトのトラフィックを簡単に消費します。
しかし、これらの機能を念頭に置いても、転送されるデータの量は驚くべきものです。Xvideosのみが月あたり29ペタバイトまたは秒あたり50ギガバイトを転送します。 Xvideosのピーク時には、1テラビット/秒の負荷が発生します。 比較のために：ニューヨークとロンドン間のインターネットチャネルは、1秒あたりわずか15テラビットです。
地球上で2番目に大きいポルノサイトであるYouPornは、DoubleClick広告ネットワークの統計とは異なる個人データを共有しました。 YouPornは100テラバイト以上のポルノ素材を保存し、1日あたり1億ページビューを超えています。 24時間、950テラバイトのデータが送信されます。基本的にはビデオストリームです。 1か月あたり少なくとも28ペタバイトの送信トラフィックが得られます。ピークのため、1か月あたり35ペタバイトから40ペタバイトへのジャンプが可能です。 ピーク時には、YouPornは毎秒4,000ページを生成し、毎秒100ギガバイトまたは800ギガビットのネットワークトラフィックを送信します。 これは、1秒間に10枚のデュアルレイヤーDVDを転送することに相当します。
そのようなリクエストを処理するために、RedisおよびMySQL DBMSは、Redisクラスターにデータを管理および追加する際の管理上のニーズに使用されます。 このサイトは主にMySQLでPerlを使用していましたが、2011年にすべてがRedisを使用してPHPで書き直されました。 Redisは毎秒300,000件のリクエストを受信し、1時間あたり8〜15ギガバイトのデータが保存されます（訪問者ログ、その動作など）。 Webサーバーとして、nginxは負荷分散のためにHAProxyおよびVarnishとともに使用されます。 YouPornの所有者は、このようなシステムは2倍の負荷をかけることができると言っています-1日あたり最大2億ページビュー。
YouPornはコンピューティング能力に関する情報を受け取りませんでしたが、サイトコンテンツ配信システムのIPアドレスから判断すると、大規模なデータセンターを持ち、レベル3からピアリングしているクラウドホスティングのサービスを使用します。
1秒あたり800ギガビットの意味を理解するために、1日にインターネット経由で送信されるトラフィックは、1エクサバイトの半分、つまり1秒あたり約50テラバイトに過ぎないことを思い出してください。 つまり、通常のポルノサイトは、全世界のトラフィックの2％をピークに受け取ることができます。 YouPornに匹敵するサイズのサイトが数十あり、Habrahabrに同量のトラフィックを受信するサイトが数百あります。 ネットワーク上で送信されるすべてのデータの30％でポルノトラフィックを推定することは誇張ではありません。
経由で
upd： MechanisMは、PornHub、YouPorn、およびその他の多数のポルノリソースを所有するManwin社の負荷の高いサイトの内部インフラストラクチャについてプレゼンテーションを行いました。