
鳥瞰図
私たちは、今後10年間、十分な電力を備えたデータセンターを構築することを長い間望んでいました。 2011年12月から、そのデザインと夢について話しました。 ここで、最初の結果を表示します。 ヤロスラヴリテクニカルセンターは、Uptime Instituteの分類に従って、TIER IIIの信頼性レベルを持っています。 現在、ロシアにはこのレベルのデータセンターが12か所もありません。
現在、水冷システムのテストが実施されており、メインネットワークの敷地内で作業が完了しています。 これらの作業が完了し、政府機関がオフィスの一部を委託することを承認した後、12月上旬に完全な発売が予定されています。 注意トラフィック 。
タイムライン
2011年、VimpelCom OJSCのYaroslavlデータセンターの建設に関して決定が下されました。 2011年10月から2013年8月までにプロジェクトが作成および認証され、それについて書きました(リンクは投稿の最後にあります)。 2012年6月、建物建設のゼロサイクルが開始されました(サイトの準備、基礎など)、12月-資本建設。 2013年8月に技術機器の設置を開始し、2014年10月に最初のデータセンターモジュールを稼働させました。

オブジェクトは、次のような建物の複合体のように見えます。
-本館;
-ディーゼル動的無停電電源装置に無停電電源システムを配置するためのエネルギーモジュール。
-配電変電所;
-チェックポイント;
-ボイラー室;
-燃料貯蔵;
-治療施設;
-さまざまな補助建物。

センターレイアウト
一般に、以前に合意された期限にもかかわらず、すべては計画通りに行われました。 各施設のプロジェクトが発行され、政府がプロジェクトの文書を承認したため、建設作業が始まりました。
建設の活発な段階は2012年12月に始まりました。 この瞬間までに、請負業者はすべての補助建物、オンサイトネットワークに関するプロジェクトを実施しました。 パワーモジュールとギアボックスで始まりました。 2013年2月に本館の建設作業が開始され、9月にデータセンターの処理装置の設置が開始されました。
建設プロセスに関する写真資料
本館。 基礎工事:

本館。 建物と階段の吹き抜けの中央部への金属構造の設置:

本館。 金属構造物の設置-データセンターモジュールの格納庫の建設。 飛行時間-40メートル:

本館。 金属構造の設置-データセンターモジュールの支持構造は、建物のフレーム内に設置されています:

甘い11月。 昨年、天候は贈り物をもたらしました。おかげで、実際に屋外に機械を設置し始めました。

100トンクレーンを備えた23トン3000馬力のディーゼルエンジンの設置に関するリギング作業:

定期的な場所でのディーゼルエンジン:

水冷システムのパイプラインの設置:

3つのチラーのうちの1つをインストールします。

機械室の建設:

データセンターモジュールへの構造化ケーブルネットワークの設置:

数字で見るヤロスラブリ技術センター:

エンジニアリングの難しさ
他のプロジェクトと同様に、建設中に予期しないことが起こります(材料の供給の失敗、労働者のチーム全体の病気、悪天候、事故など)。最初に下請け業者の作業が停止します。潜在的に、および建設現場全体。 契約組織の数によって「乗算」されるこれらのリスクは、建設プロセスの確率的性質を決定します。 確率論的性質は、プロジェクトが革新的である場合に極端な形を取り、その参加者はこれまでに遭遇したことのない問題を解決しなければなりません。 ちょうど私たちの場合。
サプライズは「通常」であり、計画の範囲内に収まり、実行中にプロジェクトを変更する必要があるものもあります。 最も困難で重要な作業の1つは、従来のコンクリート屋根を拒否することでした。この屋根には、当初、縞模様のロゴの色で金属構造を設置することが計画されていました。 アクティブな建設段階の開始後、黒と黄色の膜を備えた柔らかい屋根を選択しました。 このソリューションにより、建物のフレームと基礎にかかる負荷を大幅に削減でき、資材の予算を節約し、作業のタイミングを最適化することができました。
設計者にとっての驚きの1つは、3,000馬力のディーゼル発電機のサイレンサーが何であるかを認識したことです。 ドイツの工場では、ダイナミック無停電電源装置の設備を受け入れながら、ある種の「潜水艦」を背景に全員が写真を撮った後、従業員が出てきて「そして、これらの人はあなたのサイレンサーです」と言いました。 長さ-5.7メートル、重量-1.5トン。 彼がヤロスラブリに運ばれている間、彼はリギングのセクションを緊急に補わなければなりませんでした。
データセンターの機能の1つは、徐々に開始することでした。メインの建物の1つのセクションを再構築して装備し、その後作業を継続する予定でした。 したがって、進行中の建設および設置工事のコンテキストでの技術機器の設置は重要な作業であることが判明しました。 毎日解決しなければならない問題の数はピークに達し始め、状況は緊張し、外国のサプライヤーとの交渉の議論は「私はたわごとを与えない」に達しました。 一般に、すべてが可能であることが判明しましたが、プロセスのすべての参加者にとっては異常です。
一部の請負業者は対処できず、プロジェクトを離れなければなりませんでした。一般請負業者である技術顧客(資本建設の専門家マネージャー)を変更しました。 個々の作品の締め切りに違反しないために、実績のあるビーラインのパートナーを引き付ける必要がありました。
当時、この程度の資本建設の経験がなかったことを認めなければなりません。 たとえば、最初の期限は2013年5月に設定されました。 作業技術の観点から、または少なくとも8月に設計段階が完了したため、非現実的な日付。 状況を適時に能力と比較し、期限を調整しました。
彼らはすぐに研究し、新しい人々を惹きつけ、建設中に接触した社内の専門家を探しました。 時間の経過とともに、資本構築、エネルギーシステム、ITインフラストラクチャ、およびトランスポートネットワークの経験豊富な専門家で構成されるチームができました。 その結果、建設現場で直接発生する問題を解決することができました。
建設が始まる前に、私たちの同僚は新しく建設された製薬工場の責任者と会話しました。 私たちはこの真実に気づきました。 請負業者を選択する際のわずかなミス、および多くの問題があなたに降りかかるでしょう。プロジェクトの予算が増加し、締め切りはtheで飛びます。
そのような請負業者の1人が、建設現場の混乱のレベルを急速に高め、その問題がすべての問題になります。 彼は入札段階であなたに約束したことすべてをすぐに忘れてしまい、突然、約束は助けられなければならない貧しい請負業者の制御を超えた多くの新しい要因に依存することがわかります(ほとんどの場合、お金で期間を延長することに同意します)。 建設を生態系と見なすと、この感染は急速に広がり、このように行動し始める他の請負業者はすぐに被災地にいると言えます。 もしそうなら、なぜ私たちは試してみるべきですか? 一般に、人生のように、すべてが何百万ルーブルの危険にさらされています。
私たちは今何を知っていますか
1. プロジェクトチーム 。 プロジェクトのすべての分野で専門知識を持つ外部または内部の従業員のチームが必要です。 理想的には、誰もがデータセンターの構築経験が必要です。 これを達成するのは困難であるか、管理に正当化するのが難しい高コストが必要です(和解する前にリスクを表明するようにしてください)。 主要な従業員(プロジェクトマネージャー、アシスタント、チーフプロジェクトエンジニアなど)には、このような経験が必要です。 現在、このようなチームがあります。
2. プロジェクト管理 。 非常に明確な組織構造、参加者間の良好なコミュニケーション、明確な責任範囲、意思決定プロセス、請負業者からのリクエストの処理が必要です。
3.計画。 資本建設のスケジュールは、複雑な関係を持つ数千のポイントで構成される場合があります。 このスケジュールを毎週更新する別の人が必要です。 そのため、正しい判断を下すための明確なイメージが常に得られます。
4. 購買 (サプライヤーと請負業者の選択):
-購入の際、専門家グループは十分な能力を備えている必要があります。 専門家は、コンセプトの選択と技術的なタスクの準備の段階でも必要です。
-調達部門の作業は、建設現場の詳細に関して最適化する必要があります。
-請負業者の数を減らすことをお勧めします。1人のゼネラルデザイナー(会社が既にセキュリティシステムなどの有効な契約を結んでいる場合でも)、1人のゼネラルコントラクター。
-手順は、困難な場合にプロジェクトに含めることができるすべての種類の作業について、1つまたは2つのバックアップサプライヤーの存在を規定する必要があります。
-素晴らしいプラクティス-銀行保証付きの大規模契約の保険。
-ゼネコンの作業範囲には、建物の試運転が含まれます。
-すべてが詳細に記述されている厚い契約-それは良いことです。
5. 専門知識、コンサルティング 。
プロジェクトに関与するすべての分野のプロジェクトに専門家を招待する必要があります:データセンターの設計、資本の建設、技術機器の設置など。試運転を開始する前に、テストプログラムと方法論の作成に役立つデータセンター分野の経験を持つ独立組織を雇う価値があります。 その管理下で、すべてのデータセンターシステムの包括的なテストと同様に、試運転が行われます。 これらの人々は、彼らの仕事の結果に対して責任を負うべきです。
6. サービス操作 。
施設の設計を開始する前に、サービス部門の責任者を見つけてください。 建物の設計と建設に関する決定は、運用の観点から行う必要があります(利便性、費用対効果、最小限のリスクなど)。データセンターの信頼性と可用性は、選択したソリューションの正確さに依存します。
宇宙に飛び込む方法

Beelineの創設者Dmitry ZiminがNFCの状況計画に署名
建設の終わりに向かって、VimpelComの創設者であるDmitry Ziminが私たちのところに来ました。 一般的に、彼は地元のジャーナリストと会いに来ましたが、私たちは彼を建設現場に招待しました。 ドミトリー・ボリソヴィッチはとてもフレンドリーで誠実でした。 そして、彼の心の中で何が起こっているのか想像してみました:彼のビジネスがモスクワの電波工学研究所の壁内の1つの基地局から始まったとき、彼は別の都市にいて、彼が作成した会社の10メガワットのデータセンターがどのように構築されているかを見ています( これがすべての始まりです )。
今

236の標準的な通信ラックに対応するように設計された1つのモジュラーデータセンターが稼働しています。 合計で、これらのホールのうち6つを起動する予定です。つまり、合計1,416のラックをNFCに配置できます。
最初の計算では、1つのホールのラックの数は200以下でしたが、設計プロセス中にこの数値を236に増やすことができました。
メインネットワークに障害が発生しましたが(まだすべてをテストしていません)、冷却テストを推進しています。 終了方法-大きなクリーニング、調整、受け入れがあります。 その後、12月に最初の「戦闘」打ち上げが計画されています。
このすべてをどのように設計したかについては、 一般 、 栄養 、 冷却 について読むことができます。 これは2011-2012です。