「タランチュラには、時間の経過や負荷のかかる深刻な劣化などの問題はありません」-ヴァシリーソシニコフ

今日はと話バジルコールター 、建築家と国内のオープンソースDBMS Tarantoolの開発者。



OLTP-負荷タランチュラに高い帯域幅を提供する能力のためには、ハイテク企業の中で特別な人気と需要を楽しみました。 今日、タランチュラは、国内最大のWebサービス、通信事業者、および大企業の他の多くの代表者によって使用されています。



PG Day'17ロシアでは、ワシーリーが保持する集中的なハンズオンコースを Tarantoolとnginxの ：ちょうど2つのツールを使用してOLTP-タスクのためにスケーラブルな分散アーキテクチャを構築します。 すべてのコースの参加者は、アーキテクチャとタランチュラの内部構造についての簡単な教育プログラムに参加した後、フォールトトレラントでスケーラブルなサービスを構築するために最初から、その間の3 hchasovuyuの練習、に突入します。



今日の会話の枠組みの中で、ヴァシリーはタランチュラの開発とこのプロセスでの彼の役割について語り、タランツールを使用して解決されるタスクの例を共有し、ロードマップの構造とその中の新しい「機能」の外観の原理について話しました。







PG Day：バジル、あなたに簡単に言ってください。あなたは誰ですか、あなたは何をしますか、あなたはどんな問題を解決しますか？



バジル：I -シニア開発者/アーキテクト。 私の責任には設計と開発が含まれます。 私の作品を一言で表すのは難しい。 現在、私はオープンソースのTarantoolプロジェクトを開発および推進しています。 また、時々私は例Centrifugo（Webにこのメッセージ・ブローカー）のために、外部に他のプロジェクトを支援します。



私の情熱といえば、これはビデオストリーミングです。 人生で一度やってみました。RBCで、RBC-TVのバックエンド全体を作成しました。 これはおそらく、アーキテクチャとコードの点で私の最も興味深いプロジェクトでした。



PG Day：Tarantoolプロジェクト内で正確に何をしていますか？



バジル：Tarantool、コア部品および外部モジュールの開発に基づいて基本的には、計画と建築の決定。 例えば、私から開発：Tarantoolカール - libcurl'a Tarantoolに結合されます。 Tarantool MQTT - MQTTのバインディング。 そしてnginxのためのモジュール-リバースプロキシはタランチュラプロトコルストリームとその逆に変換し、HTTP要求するモジュールです。 カーネルに関しては、最近、外部プロジェクトをカーネルに転送することに参加しました。



PG Day：タランチュラの開発には何人の人が関わっていますか？ ルートチームのようなものはありますか？



バジル：はい、もちろん。 実際、これらは開発者だけではありません。 これらはまた、テクニカルライターであり、少しマーケティングを行っています。 私たちは完全に21人。 これらは、モスクワのMail.ruのオフィスに座っており、タランチュラを開発している人々です。 私たちのコミュニティの人々はかなり大きな貢献をしています。 たとえば、さまざまな言語用の新しいコネクタを追加し、機能を考え出し、さらに実装します！



PG Day：データベースとしてのタランチュラのクールさは？ 他の製品との違いは何ですか？



バジル：答えは簡単です- OLTP。 タランチュラでは、時間の経過や負荷のかかる深刻な劣化などの問題はありません。 すべてのディスクデータベース、および一部のインメモリも大幅に低下します。 それは負荷の重いと同時に、 スナップショットを作成する。例えば、同じワイドのRedis、 -私たちは、負荷の下でもあり、私のノートメモリのサイズとブレーキにX2を取得します。 Tarantoolにはこれらの欠点はありませんが、トランザクションに対応しています。



現在、予測可能な待機時間（応答時間）と予測可能な低下で実際に機能するデータベースはほとんどありません。 タランチュラが「製品」でどのように機能するかを毎日見ており、負荷プロファイルが変更されても、1年でこの方法で機能することを知っています。



PG Day：高いトランザクション負荷での作業におけるこの予測可能性と安定性はどのように達成されますか？



バジル： 内部アーキテクチャ。 一般的に、これは私のマスタークラスになります。 したがって、私は今話したくありません。 私が今あなたに言ったら、それは観客にとってあまり面白くないでしょう。 誰が気にしているのか、彼はグーグルで、コンスタンチン・オシポフのいくつかの記事と報告書を入手します。 そして、マスタークラスに来たほうがいいです！ 美しい図を描き、スライドがなぜこれほど速く安定して機能するのかを説明します。 だからもう少し容認してください。



PG Day：予想外ですが、まあ、そのような答えは受け入れられます！ 私はそれを理解しているように、マスタークラスで理論と実践を組み合わせることを計画していますか？



バジル：私はいくつかのセクションを計画しています。 最初のセクションは、練習なしで最短です。 それはそれが何であるか、タランチュラが内側に配置する方法についてですとその使用方法。 また、その中にある問題についても説明します。 それは非常に重要です-操作中のすべての問題について知ること！ 第二部-それは非常に軽く練習になります。 私たちは、 アプリケーションサーバのどのような考え方、それがどのように動作するかを参照してくださいTarantoolを起動します。 3番目の部分は最も困難です。本格的なサービスを作成し、それをスケーリングし、ケーキのチェリーとして、このすべてをフォールトトレラントにします。 まとめます。 理論は約50分程度で、その後は練習のみです。



PG Day：参加者は、いくつかのプログラミング言語などを知っている必要がありますか？ 実践的な部分に参加するためのトレーニングのレベルは？



バジル：いいえ、必要に応じて、ラップトップだけ。 Lua言語は原始的です。皆さんに説明します。 構成ファイルはgithubから取得できます。リンクを提供します。







バジル：そうです。 予測スケーリングとフォールトトレランス ：我々は2つの要件を満たすプロジェクトを作成します。 実際には、Tarantulaとnginx（私が話した非常にリバースプロキシモジュール）の2つの技術が使用されます。



PG Day：タランチュラに追加したい機能は何ですか？ すぐに表示されるクールなものを今すぐ実行していますか？



バジルは：まず、私たちは地域社会に影響を与える可能性が完全にオープンなロードマップを、持っていることを言いたいです。 SQLはおそらく、現在開発されている最大の機能の1つであり、アルファ版は既に利用可能です。 私たちの計画：安定した状態に追いついてから、分散SQLと本格的なクエリプランナーの実装を開始します。



PG Day：SQLはSQL標準またはある種の意味ですか？



バジル：私たちは SQLite3のパーサを取りました。 SQL標準、私の記憶が正しく機能する場合、2003年。 しかし、それにはいくつかの非標準的なものがあることを理解する必要があります。



PG Day：Tarantulaの組み込みSQLを一般的なDBMSとの互換性にする計画はありますか？



バジル：私たちは、このような考えを持っていたが、正直なところ、我々はそれに多くの価値が表示されません。 それでも、私はある種のアイデンティティを保ちたいです。 これが行われる場合、それを行うように私たちに頼む特定の顧客のために。 しかし、プロジェクト全体の開発の一環として、それはありそうにありません。 ロードマップでも、これは見つかりません。



PG Day：タランチュラは、開始時、製品の発売時、または既存のインフラストラクチャにアプリケーションの例がありますか？



バジル：間違いなく、新しいプロジェクト、はいてください。 古いTarantoolでは、いくつかの問題を解決できます。 OLTPはTarantoolの理想的なケースであり、これはすべてのプロジェクトに当てはまるか、今後当てはまることを思い出させてください。



これは、最近優れたケースだった：タランチュラは、MySQL Cluster内の読み取り専用レプリカとして使用し、大いに助けたこのすべては、MySQL Clusterの緩和と応答時間を向上させます。 Mamba（Wamba）社によって作成されました。



コミュニティについて言えば、Mambaの同僚自身がこれらのデータベース間のレプリケーションメカニズムを開発し、一般的な使用のためにオープンソースに入れました。 コミュニティチャットの参加者が複製について積極的に質問し始めたとき、私たちは皆これについて知っていました。



しかし、我々はTarantoolでOracle GoldenGateを複製を通じて行われた一つのクライアントを持っています。 スキームは同じです。OLTPロード全体がTarantoolに転送されます。 これにより、彼らは多くのお金を節約し、応答時間を増やすことができました。



PG Day：会社がタランツールを彼らの現実に適応させるためにあなたの専門知識を引き付けたいなら、何をすべきですか？



バジル：契約ベースで。



PG Day：タランチュラの誤用の例はありますか？ これに関する推奨事項はありますか？



バジル：はい。 Tarantoolの1つのインスタンスを使用して非常に難しい分析を行おうとしている人々がいます！ 簡単かつ柔軟に拡張できる階層化アーキテクチャを構築しようとさえしません。 これは、私が遭遇した最も一般的なアンチパターンです。



典型的なストーリーは次のようになります。まず、彼らは小さなリクエストを出し、高速で満足します。 その後、彼らは非常に非常に重い要求を出し始めます。Tarantoolの動作は悪く、これは非常に論理的です。OLAPにはまったく異なるアーキテクチャが必要であり、設計段階で検討する必要があります。 TarantoolはOLAPベースかもしれませんが、これは最良のケースではありません。



PG Day：Tarantulaを安定した高速なOL​​APに適した製品にする計画はありますか？ それとも、彼のイデオロギーにまだ反していますか？



バジル：考えはありますが、それはまだロードマップではありません。 私たちは自分の得意なことをしようとしています。 すなわち- 小さな多数のトランザクションを処理するために、それは非常に明確で大きな市場です。 どこに移動するかは明確です。 特定の顧客なしで大規模なOLAP開発を開始することは、良い方法ではありません。



PG Day：現在のロードマップは、現在の要件と実際のユースケースで構成されていますか？



バジル：そうです。 ロードマップにはいくつかの異なるタイプのタスクがあります。 非常に小さなもの（大まかに、いくつかのオプションを追加）と非常に大きなもの（修正すべき大きな問題）があります。 新開発 -他のタイプがあります。 これはすべて、お客様、ユーザー、および製品に対する当社独自のビジョンの要件で構成されています。



PG Day：製品のロードマップに含まれるべき何らかの機能があることをどの時点で認識していますか？



バジル：それは複雑な質問ですね。 それは全く異なる方法で起こります。 私は最近の経験を語ることができます。



このようなタスクがありました：HTTPステータスとヘッダーをTarantoolからnginxモジュールに返す機能を追加すること。 このアイデアは約1年の間保留され、多くの人がこのアイデアに投票しましたが、私の手は実装に至りませんでした。 「みんな、ここにはSOAPとRESTがあります。本当にステータスコードが必要です。」 当然、この機能はすぐにオープンソースに登場しました。



PG Day：マスタークラスの内容については、すでに少し話しました。 そもそも誰に役立つのでしょうか？



バジル：私はプログラミングについて、アーキテクチャについて話すだろう-私は強いよ何ということ。 したがって、まず建築家、開発者に。 一般に、タランチュラに基づいて新しいプロジェクトを作成する方法を学びたい、または既存のプロジェクトに適用したいすべての人を招待します。



PG Day：ありがとう、Vasily！ あなたが私たちに与えてくれた時間に感謝します。 サンクトペテルブルクでお会いできることを楽しみにしています。



バジル：相互、ローマ！ 本当に楽しみにしています。 それは私にとって興味深い経験になるでしょう。