Bitrixは知識を与える-すべての資料#FailOverConf

4月8日に、フォールトトレラントで高速なWebに特化した従来の会議-FailOverConfが開催されました。



既にご存知のとおり、今回はフォーマットを完全に変更することにしました。 私たちは目標を設定します-有用で実用的な知識を得ることができる聴衆の可能な限り広い範囲。 したがって、彼らは会議を完全にオンラインで無料にしました。 そして、目標は達成されたようです。 :)約2500人がイベントに参加しました。



そして今、以前に約束したように、すべての会議資料（プレゼンテーションとビデオ）を公開します。

プログラミング言語

「フェールオーバーへの移行：言語はアーキテクチャにどのように影響し、なぜフォールトトレラントプロジェクトがGoを選択するのですか？」 （ITooLabs、Alexey Naydenov）- プレゼンテーション



非常に短い歴史の中で、Go言語は、フォールトトレラントで負荷の高い分散システムの開発者の間で最も人気がありました。 なぜこれが起こったのですか？ Goが開発者にもたらすメリットは、明白ではありますが、そうではありませんか？ 将来のフェールオーバープロジェクトに進むべきですか？



レポートでは、Go言語の概要を説明し、その出現と開発の歴史について説明し、業界での典型的な使用例を示します。 また、スケーラブルなフォールトトレラントテレコミュニケーションシステムの運用経験を共有し、Goに書き換えた方法と理由、および結果として得られたものについて説明します。







「BadooがPHP7に切り替えて100万ドルを節約した方法」 （Yuri Nasretdinov、Badoo）- プレゼンテーション



-はじめに

-HHVMの実験

-カーネルと拡張機能の修正

-テストインフラストラクチャの変更

-ユーティリティとアプリケーションコード

-「起動」と結果







「防衛プログラミングと強力な型付け：PythonからJavaScriptへ」 （Grigory Petrov、Voximplant）- プレゼンテーション



-マイクロサービス、エラー、フォールトトレランス

-間違いを犯す理由：ミラーの複雑さと財布

-厳密な入力を使用したエラーのトラップの設定

-強い型付け：C＃、Java、Python、PHP、Ruby、JavaScript

-段階的な型チェック

データベースとNoSQL

「タランツール：使用例」 （Denis Anikin 、Mail.ru）- プレゼンテーション







「PostgreSQLに基づくフォールトトレラントシステムを構築するためのオプション」 （Mikhail Kulagin、Postgres Professional）- プレゼンテーション



1. OpenSource DBMS MySQLおよびPostgreSQLを例として使用して、フォールトトレラントシステムを構築するアプローチ

1.1。 論理的および物理的複製

1.2。 マルチマスターシステムのアプローチと問題の構築

1.3。 各アプローチの長所と短所、データ損失の可能性のあるポイント



2.ネイティブPostgreSQLの復元機能

2.1。 同期および非同期ストリーミング複製

2.2。 構成機能と監視ポイント



3. Pacemaker / Corosyncの例を使用したフェイルオーバークラスター管理の自動化

4. PostgreSQLで論理レプリケーションを構築するためのオプション

5. Postgresの近い将来：現在の開発

操作と監視

「Mail.Ru Groupメディアプロジェクト：遊園地のディレクターの仕事日」 （Stanislav Mikhalsky、Mail.Ru Group）- プレゼンテーション



Mail.Ruメディアプロジェクトの1日あたりの平均視聴者数は約1,000万人であり、約600万回の視聴を生み出しています。 私のプレゼンテーションでは、次のことを伝えます。

-このような高負荷の状況でどのようにスムーズな動作を保証するかについて。

-これらすべてのプロジェクトの一般的なボトルネック、および個々の製品と技術的なニュアンスについて

-外部サービスを使用する場合の監視、DevOps、およびドミノ効果について

-フォールトトレランスの確保、操作性の回復、防止の点で1〜10のプロジェクトに違いがあるかどうか、

-スケーリングとキャッシュの長所と短所

-もちろん、目撃者からのいくつかの物語と奇妙なこと。







「自分の手で99.999％のフォールトトレランス」 （ニコライマツィエフスキー、WEBO Software）- プレゼンテーション



利用可能なツールを使用してWebプロジェクトの最大の可用性を確保する方法と、そのコストを説明します。 ホスティングの可用性と信頼性、サイト障害ポイント、DNSとIPエニーキャストのバランスの問題に触れます。 また、短い時間と適度な予算で4〜5ナインの可用性を保証する方法についても説明します。







「サイトの主要なビジネスシナリオの24時間365日の追跡。 自動的に」 （Stepan Ovchinnikov、Intervolga）- プレゼンテーション



-サイトの主要なシナリオ（自宅、カタログ、注文、バスケット、個人アカウント）が常に機能することを確認する必要があります。

-クライアントよりも早く間違いについて知る必要があります。

-このような「機能監視」は安価であるが、うまく機能することが必要です。



次の点について説明します。問題-解決策-誰に適しているか-確認できるもの-レポート-実際のケース-コスト-接続アルゴリズム。







「サービスプロバイダーの観点からのフォールトトレランス-アクロニスのレシピ」 （Ivan Prokhorov、Acronis）- プレゼンテーション



-サービスプロバイダーにとってフォールトトレランスが重要なのはなぜですか？ -何を何から保護する必要がありますか？ -404または500-戦い方 -高速回復-神話か現実か？







「予測メンテナンス-機械学習を使用して、監視および運用コストを削減します。 アルゴリズムとテクノロジー '' （Alexander Serbul、1C-Bitrix）- プレゼンテーション



Webプロジェクトをテストグリッドでカバーするだけでは、事故を防ぎ、攻撃を検出し、変化する動作条件に積極的に対応するには不十分です。 新しいアプローチ-メトリックの分析と機械学習アルゴリズムを使用した事故の防止（脅威の検出）-は、耐障害性を提供​​するコストを削減するだけでなく、問題が発生する前に対応します！ 興味深い-来て、簡単な言葉で教えて、それがどのように機能するか例を示します。

フォールトトレラント開発

「継続的な統合。 リリースをそのまま管理する」 （Ivan Mikheev、Agima）- プレゼンテーション



開発された機能の配信プロセスは、常に迅速に配信するか品質を失わないかのトレードオフに基づいています。 さらに、展開に費やす時間が長いほど、品質に残される時間が少なくなります。 問題は、生産成長の各段階でますます緊急になります。 展開とリリースのプロセスを標準化するために設計されたさまざまな方法論と技術があります。私のレポートでは、自分たちのために設定したプロセスと、これが品質により多くの時間を割くのにどのように役立ったかについてお話したいと思います。



-カスタムWeb開発におけるソフトウェア配信プロセスの確立-「カオス」の整理を開始する場所。

-一時的な利益-正しい展開（短期および長期）で時間を節約し、プロジェクトの例で手動および自動展開のオプションを比較します。

-成長のさまざまな段階で使用したツール：GIT、gitolite、gitlab、TeamCityなど

-シンプルですが、そのような重要なフック-これらのテクノロジーを単純に作成する方法は、真のメリットをもたらし、開発者の時間を節約します。

-自動展開、継続的配信、ビルド、および自動テスト-本当に必要な場合、および無視できる場合-さまざまな種類のプロジェクトを例として使用します。

-以前は「コンパイル」されていましたが、現在は「テスト済み」です-配信プロセスが長すぎます-ブロッカー自動テストを取り除く方法。

バックアップ

「複雑なオンラインストアのバックアップの整理」 （エフゲニー・ポタポフ、「Summa IT」）- プレゼンテーション



1.データベースのバックアップ。

1.1。 バックアップの頻度は？ なに？

1.2。 「新鮮なデータ」の安全性を確保する方法。

1.3。 「人的要因」の後の迅速な回復、ランダムな削除。



2.静的ファイル、コード、構成ファイルのバックアップ

2.1。 ファイルのバックアップ-バックアップ、同期。

2.2。 大規模なバックアップからの迅速な復旧、落とし穴

2.3。 バックアップ構成ファイル



3.バックアップの監視と確認

3.1。 バックアップの作成プロセスの監視。

3.2。 バックアップストレージの監視。

3.3。 バックアップの展開をテストします。

安全性

「サイトを保護しているのは誰ですか？」 （ミハイル・コンドラシン、Trend Micro Russia）-プレゼンテーション



クラウドテクノロジーはすべてのITの未来であり、リモートハッキングや悪意のあるコードなどの従来の脅威に対する保護が新しい現実にどのように適合するかを想像する必要があります。 表面的な分析でさえ、従来のアプローチでは不十分であることを示しています。 クラウドサービスプロバイダーが提供するセキュリティは、社内のセキュリティシステムとシームレスに統合することが不可欠です。 一方、このセキュリティでは、顧客がクラウドで解決するタスクの詳細を考慮する必要があります。 クラウドに転送される各リソースには、個別に構成され、現在のセキュリティレベルを決定する定期的な監査を受ける保護が提供される必要があります。 この場合にのみ、クラウドへのITコンポーネントの転送はセキュリティの妥協にはなりません。







「Tempesta FW：Yet Another Web-accelerator？」 （Alexander Krizhanovsky、NatSys Lab）



Tempesta FWは、Webアクセラレータとファイアウォールのオープンソースハイブリッドであり、特に大量のHTTPトラフィックの処理とフィルタリングのために開発されました。 Tempesta FWはLinux TCP / IPスタックに組み込まれており、Webキャッシュとフィルタリングルールを格納するためにNUMAシステム用に最適化された軽量のインメモリデータベースを備えています。 システムを使用する主なシナリオは、アプリケーションレベルのDDoSに対する保護と、低ハードウェアコストで大量のHTTPトラフィックを単純に配信することです。



レポートでは次のことについて話します。

-別のWebアクセラレータが必要な理由と、Nginx、Varnish、HAProxy、さらにはTUXやkHTTPdとの違いは何ですか。

-一般的な使用シナリオ（CDN、クラウド、フィルタリングネットワークなど）。

-主な機能（キャッシュ、負荷分散、フィルタリング）;

-OSカーネルでのプロジェクトの実装、パフォーマンス、信頼性に関連する頻繁な問題。

-システム要件、構成例、および単に、すべてを組み立てて実行する方法。







「WebサイトでSSL証明書のA +評価を達成する方法、およびホスティングセキュリティのその他の側面」 （Igor Cherednichenko、Rusonyx）- プレゼンテーション



-SSLの落とし穴、誰かを怒らせない方法。

-標準のopensslの長所と短所。

-SSLはネゴシエーションの速度を上げます。







「インターネットコンテンツ保護ツールの分析レビュー」 （Maxim Levin、CDNvideo）- プレゼンテーション



-さまざまなコンテンツの盗難の現代的な方法と問題の規模。

-敵は通過しません。コンテンツが盗まれる前にコンテンツを保護する方法。

-Borzhを飲むには遅すぎますか？..盗まれたコンテンツを保護する方法。

-展示物に触れないでください！ グラフィックコンテンツを保護する方法。

-現代の海賊のメロディとリズム。 オーディオコンテンツを保護する方法。

-そして今-スライド！ ビデオコンテンツを保護する方法。







「Web Application Security 101または非セキュリティ専門家向けの紹介」 （クラウドセキュリティアライアンス、Denis Bezkorovayny）- プレゼンテーション



-誰がどのようにWebアプリケーションを攻撃し、何を保護する価値があるか。

-Webアプリケーションセキュリティ監査-選択するもの Webアプリケーションの静的コード分析と動的分析-長所と短所、アプリケーションの領域。

-Webアプリケーションのアクティブ保護システム-類型、展開オプション、アプリケーション。

-セキュリティの監視と攻撃の検出。

-攻撃およびインシデントへの対応計画、是正措置、実用的な推奨事項。

性能

「サイバーマンデーの作り方」 （アレックスフォンローゼン、220ボルトグループカンパニー）- プレゼンテーション



-今日、1か月半で高負荷プロジェクトを開始する必要があることがわかった場合の対処方法。

-高負荷チーム。

-高負荷サイト。

-落ちないようにする方法。

-次にすること。







* * *



いいね、共有、リツイート！ :)そして-来年お会いしましょう！