「だから、私は今ではデートエンジニアであり、別の方法で自分を市場に位置付けることができることに気付きました」

こんにちは、こんにちは！ 卒業生との別のインタビューは、XINGのチームリーダー、ニコライレクブラツキーです。 ニコライは、ドイツでの生活、仕事を見つけたリソース、仕事に対するヨーロッパの専門家のロシア人との違い、ヨーロッパでのデータエンジニアの職業に対する要求、XINGでのプロジェクトなどについて話しました。



-Kolya、あなたの経歴とデータエンジニアとチームリーダーでのキャリアはどのように発展しましたか？



-私は約1年前にティムリッドになりましたが、私の手が届くときに少しプログラムする機会を逃さないようにします。 それ以前は、私は長い間開発者であり、現在は日付エンジニアと呼ばれています 。







私の最後のオフィスでは、ビデオ広告に携わり、クライアント向けの分析システムを構築しました。 それは破裂するまで徐々に成長したスタートアップでした。 業務量が増加し、それに伴い-処理されたデータの量、およびある時点で使用したツールと使用したアーキテクチャが機能しなくなりました。 その結果、新しいツール、新しいアーキテクチャを導入し、ラムダアーキテクチャは非常にファッショナブルになりました。



次に、何億人ものユーザーのプロファイルをコンパイルするプロジェクトがありました。これも非常に興味深いものです。 そして、これらすべてのプロジェクトで、私は挑戦が好きでした。応答、データの一貫性、他の何かのために、いくつかの要件があります。 これらの期待と要件を満たすために、現在のアーキテクチャを再考する必要があります。 それは同時に挑戦と行動の自由の両方であり、それがまさに私を惹きつけたものでした。



-そして、あなたのキャリアパスはどうでしたか？



-私は11年間の勤務期間中、これほど多くの企業で働いたことはありません。XINGは4番目です。 そして、私はWeb開発者として始まり、Ruby on RailsフレームワークでRubyをたくさん書きました。 彼はモスクワで、ビデオストリームに関連する多くの興味深いことを行ったオフィスで働いていました。ライブブロードキャストとインタラクティブビデオの両方です。 また、このオフィスはさまざまなビデオシステムの構築に従事し、ソチでオリンピックの放送を企画し、その後閉鎖しました。 私が働いていたすべての会社が死にました。 これは、私とは何の関係もないと思います（笑-著者のコメント）。



-XINGは過去の会社の運命を知っていますか？



「XINGは順調です。」 Undevに戻って、私は再び、必要だと考えたすべてのテクノロジーを自由に使用できることを気に入りました。 私はなんとか「帽子」をかぶることができました。私はバックエンド開発者でもフロントエンドでもあり、サーバー管理に携わり、さまざまな言語で書きました。 とても興味深い経験でした。



5年後、私はサンクトペテルブルクに移り、別の会社に移りました。実際には、ビデオ広告に従事していました。 私はRuby開発者としてそこに来ましたが、他のアプローチと他のツールを必要とするより多くの興味深いタスクが現れました。 当時、私は記事、ブログ、本を読むのに多くの時間を費やしていました。それらは私が一緒に仕事をしたことに専念し、この作品のいくつかの苦痛を解決しました。



新しいスキルを習得し、LinkedInで履歴書を更新した後、採用担当者からメッセージを受け取り始めました。 彼らは「デートエンジニア」という用語が登場する空席を提供しました。 それから、私が働いていた地域にはその名前があり、独自の特徴があり、今ではこれらの人々は「デートエンジニア」と呼ばれていることに気付きました。



そして、私は今、私が日付エンジニアであることに気づきました。あなたは少し違った方法で自分を市場に位置付けることができます。 私は空席を見て始め、XINGに行き着きました。 XINGはドイツ語を話す世界のリーダーであるドイツの専門的およびソーシャルネットワークですが、他の言語では表現されていません。



-開発者のバックグラウンドが非常に強いため、ビッグデータスペシャリストプログラムに参加した理由と時期を教えてください。



-私がViroolで働いていたとき、彼女はビデオ広告に従事していました。 その瞬間、私はすでにSparkを使用した分析システムを構築していました。 データ管理プラットフォームの構築への道の真っin中にいた。 また、データを効率的に処理するために特定のケースでアーキテクチャを構築する方法を理解することは困難でした。 そのような質問は多くあり、ある時点で、私の同僚の1人がこのプログラムへのリンクをチャットに投げ込みました。 私は興味があると言った、オフィスは私をサポートし、参加の代金を支払った。 このプログラムでは、DMPに関するクラスが私にとって非常に重要でした。多くの質問に対する答えが私を苦しめました。 プログラムでは、私たちは多くのことを手で行い、理論を読みましたが、それでも、タスクに知識を適用し始めると最も利益を得ます。 そして、私はとても幸運でした。機械学習に携わる仕事をしている個人はいなかったので、バナーのクリックを予測するタスクに関する私の新しい知識を実践することができました。 それは非常に興味深いプロジェクトであり、非常に長い期間続いたので、残りの時間はそれに取り組みました。モデルを開発し、どういうわけかそれらを改善し、それを自分の手で生産する必要がありました。 会社にはスタートアップの雰囲気があったので、従業員はあまりいなかったし、仕事もあまりなかったので、これをすべてやった。



-あなたは、多くの異なる企業があなたとロシア人と外国人をノックしていると言いました。 XINGを選ぶ理由 なぜドイツに移動するのですか？ 他の国を検討しましたか？



-最後から始めます。 もちろん、他の国を検討しました。 最後の会社はサンフランシスコで働く機会がありました。 私の妻と私はそこに数ヶ月住んでいた、見た。 最終的に、彼らはサンフランシスコは家庭生活にはあまり適さないと判断しました。 若くて勇気のある人にはとても良いかもしれませんが、この街は私たちにはあまりふさわしくないように思えました。 しかし、別の経験を得るためにロシアのどこかで働きたくはありませんでした。 それは私の目標でした-国際的な会社で働き、物事がどのように異なるかを見ることができました。 そして、ロシアからそれほど遠くないことを望みました。



私たちはヨーロッパ、つまりイギリスとドイツの2つの経済機関車に注目し始めました。 その他の国は、IT企業であまり広く知られていません。 イギリスでは、潜在意識レベルでの悪天候についてのステレオタイプに少し混乱していたので、ドイツにもっと目を向けました。 そして、私が現在ハンブルクに住んでいるという事実にはいくらか皮肉があり、これは天気の面でドイツの同じピーターズバーグであり、ここではかなり雨が降っています。 しかし、私は過去4年間サンクトペテルブルクに住んでいたので、どんな天気でも、どこに移動しても天気が良いようです。



ドイツのさまざまな会社を見ました。 最初は、広告に関する知識が蓄積されていれば、広告会社でそれらを適用する方が簡単だと思いました。 しかし、チームとの試合と彼らが持っていたタスクが判明する企業はありませんでした。 自分にとって面白いオフィスは見なかったし、人々や彼らの態度にも満足していなかった。



「仕事をどのように探しましたか？」 LinkedInでプロフィールを更新することに加えて、履歴書を投稿しましたか？



-開発者向けのデートサービスなどのHoneyPotサービスがあります。 あなたは履歴書を置き、あなたの要件と期待を示し、企業はあなたに手紙を書き始めます。 私はそこでいくつかの会社と話をしましたが、会社が書き込もうとしているという感覚がありました。 すでにいくつかの段階を経ているこのようなものは何もありませんが、おそらくもっと良いものがあるかもしれません。



ある時点で、彼らはXINGから、エンジニアの日付ではなく、Ruby開発者の立場で私に手紙を書きました。 また、それは私にとって面白くないと思ったので、会社について読みました。それは2年連続で推奨システムのコンテストの共同主催者であり、「まあ、彼らと話をするのは面白いかもしれない」と思いました。 最初のインタビューでは、自分の背景、自分が知っていること、できることについて話しました。「期待とプロフィールが違うことがわかりました。空席、エンジニアの日付があります。切り替えましょう。」 だから私は彼らとのコミュニケーションを続けました。数か月間、この仕掛けはインタビューから続き、多くの段階がありました。 私が一番夢中になったのは、最後のステージ、つまりチームとのミーティングでした。



-将来のチームとのミーティングはどうでしたか？



-通常、昼食のためにレストランに行き、そこで1時間話し、食事をし、そのようなリラックスした雰囲気の中で、あなたは彼らと一緒に仕事をしたい人の種類を理解することができます。 そして私にとって、これは私が欲しいものを決めた瞬間でした。それは私にとって興味深いことです。 私たちは妻と子供と一緒になって引っ越しました。 会社はあなたがあなた自身のものを見つけるまでしばらくの間住宅を提供しますが、それはあなただけのものではなく、アパートには5つの部屋があり、ほとんどすべてが占有されていました。 そして、午前5時に起きるのが好きな子供との生活は、隣人にとってのテストでした。 しかし、おそらく、これが彼らの家をすぐに見つけようとする動機になったのでしょう。 それから私たちは避難所も見つけました。







-現在チームで行っているプロジェクトについて教えてください。



-いくつかの領域があり、それらはすべてユーザーに関連しています。なぜなら、ユーザーデータに特に焦点を当てたチームがあるためです-推奨事項とコンテンツ制作。 空室、ニュースを扱う別の部門があり、ユーザーデータに焦点を当てています。 しかし、同時に、Xingはかなり大きなオフィスであり、さまざまなことを行う約60のチーム、つまり製品チームがあり、サイトのさまざまな部分を見ました。



推奨セクションには2つの興味深いプロジェクトがあります。 現在、さまざまな信号に基づいてユーザー間の接続の強さを調査しています。 現在、ユーザー間のコミュニケーションの存在についての情報だけがありますが、それがどれほど強力かはわかりません。 学生が現在取り組んでいるいくつかの仮説があり、彼女はネットワークトポロジに基づいてユーザー間の接続の強さについて修士論文を書いています。



推奨事項にも関連付けられている別のプロジェクトがあります。ユーザーが今すぐサイトにアクセスした理由、現在の彼の目的は何かを理解しようとしています。 つまり、このような強調は正確にリアルタイムデータに基づいています。つまり、このユーザーのセッション履歴をリアルタイムで見て、彼がどこに行くのか、必要なもの、この人またはその人を追加する理由を理解し、これに基づいて、提供するアルゴリズムを変更します彼に最高の推薦。



コンテンツ生成についても言えます。 最近、2つの新しいストーリーが登場しました。ユーザーが会社で働いた記念日と、新しい馴染みのない同僚が会社のユーザーに登場したときです。 ここで関心があるのは、ユーザーが会社を自由な形式で示し、何でも指定できることです。また、異なる名前を比較して、これが同じ会社であることを理解するのが難しい場合があります。 、これは1つの同じエンティティであることを理解する必要があります。 たとえば、従業員1万人の会社を取り上げる場合、新しい人の姿を全員に見せたくはありませんが、興味やその他の事柄に基づいてより個人的な推薦を行いたいと考えています。



-仕事で最も頻繁に使用するデータエンジニアリングツールとその理由について教えてください。 あなたのお気に入りはどれですか？



-ほぼ定期的に作業しなければならないスタックでは、これらはNive、Spark、Kafka、Cassandra、Akka Streams、ElasticSearchです。 私のお気に入りはAkka StreamsとKafkaです。リアルタイムで処理される新鮮なデータを扱うのが好きなので、Kafkaは私のキャリアの中で何度も助けてくれました。 私がマネージャーとして最も頻繁に使用するものから、それはむしろ、人々とのコミュニケーションであり、これは非常に重要であり、多くの日付エンジニアはこのツールを過小評価しています。



-ほとんどの企業は、データサイエンティストとデータエンジニアを分離せず、これらが個人の2つの異なるプロファイルであることを理解せず、すべてを実行できるユニバーサルスペシャリストのチームを探します：データを収集し、それを処理し、モデルを準備し、それを運用に投入します。 なぜこれが起こっていると思いますか？このアプローチは正当化されますか？



-これは正常なことだと思います。それは会社が利用できるリソースに起因しています。 小規模なスタートアップが必要なスペシャリストの全ラインを雇うことは非常に困難です：QA、バックエンド、フロントエンド、モバイル開発者、データエンジニア、データサイエンティスト、その他の人。 彼らはただ引っ張ることはありません。彼らはすべてを行う準備ができている開発者を雇うスタートアップで。 企業が成長すると、特定の分野に焦点を当てた専門家を雇う余裕ができます。 大規模なオフィスでは、データエンジニアとデータサイエンティストへの分離がよく見られます。 XINGにはそのような分離がありますが、同時に、データサイエンティストは実稼働コードを書くことができると予想されます。



-あなたは現在、管理職にあり、チームに参加する人を探していますが、候補者を選ぶ際に重要なハードスキルとソフトスキルは何ですか？ そして、あなたの観察によると、何が欠けていますか？ チームとして自分自身を雇って、あなたが話をした人々について話しているなら、それはより多くの開発を必要とします。



-ハードスキルについては、自分のスタックに一致する人を見つけるのは非常に困難です。大企業の場合、スタックは非常に具体的です。 たとえば、私が雇われたとき、私はScalaの知識を持っていたので、このオフィスのスタックに非常によく合いました。これは、主に日付エンジニアリングに関連するすべてのタスクに使用されます。 同時に、Rubyのバックグラウンドがあり、XINGでは多くの食料品がRubyで書かれています。 私の背景は非常によく一致しました。 しかし、従業員を雇用するとき、データエンジニアリングスタックを含めて、従業員が完全にヒットすることを期待していません。



学習するのが難しい基本的なこと、つまり適切にプログラムを作成したり、統計を理解したりすることを人が知っているのは素晴らしいことです。 たとえば、Scalaでうまく書くことは困難です。言語は簡単ではないため、時間がかかります。 ただし、SQLであるため、Hiveで書き込みを開始するだけで、あなたはただ座って書き込みを行うだけで、誰かがリクエストがサーバーによって処理されていることを誓い始めると、何が起こっているのかを把握し始めます。 私たちは、自分のスタックに合った何かを持っている人、そして私たちにとって非常に重要な特性を持っている人を雇います-学習する能力。 私のチームにとって、人々は好奇心が強いことが重要です。そうすれば、何かを知らなくても、すぐに習得し、それを理解し、何らかの形でこの知識を得ることができます。 学習能力は、採用時に検討する重要なスキルの1つです。 別の重要なスキルは、チームに前向きなものをもたらすために、人々と普通にコミュニケーションをとる能力です。



-Kolya、あなたのチームについて教えてください。



-XINGには興味深い構造があります。多くのチームには、それぞれ3人のマネージャー（アジャイルプロジェクトマネージャー、チームリーダー、製品マネージャー）がいます。 チームリーダーと製品の2人のマネージャーが常にチームにいます。 製品は、私たちが実装できる機能と、既存の機能を改善する方法を考え出します。 ティムリッドは私です。チーム内の人々の技術的解決と開発を担当しています。 アジャイルプロジェクトマネージャーは、チームがどのように機能するかを確認し、プロセスの改善点についてアドバイスしたり、外部の競合を解決しようとしています。 そして、これら3人のマネージャーの他に、5人の開発者がいます。1人はQAエンジニア、1人はフルスタック開発者、3人はエンジニアです。 私が言及しなかった別の人、学生は博士号を書いています。



-チームメンバーの出身国はどこですか？



-ドイツだけで専門家を見つけることは不可能です。非常に多様な会社があります。 ベルリンのほとんどの企業ほど国際的ではありませんが、それでもかなり国際的です。 私はウクライナから2人の同僚、ドイツからの男と女、オランダからの女がいます。 クロアチアのアジャイルプロジェクトマネージャー。 社内では、公用語は英語であり、全員が英語でコミュニケーションを取ります。



-次の質問は前の質問の続きです：ヨーロッパ人はあなたの観察において私たちのものと異なりますか？ あなたは長い間ロシアで働いてきましたが、今ではすでにヨーロッパ人と仕事をした経験があります。



-私はヨーロッパ人と仕事をした経験がありますが、ヨーロッパの会社に限られているので、私が見ているものについてのみ話すことができます。 非常に目立っているのは、開発者間のコミュニケーションの量-私たちが行うこととその理由です。 これは、多くの同期と会議を意味しますが、誰もが何が起こっているのか、なぜ、なぜなのかを非常によく把握しています。



-これらの会議は製品によってトリガーされますか？



-これは上から行く企業文化です。 私たちは、何が起こっているのか、どのようなニュースを定期的に伝え、人々が好きなもの、嫌いなもの、それを変える方法についてのフィードバックに非常に注意深く耳を傾ける非常にオープンなガイドを持っています。 このフィードバックを経営陣に提供するツールがあります-匿名または公然。 すべてのレベルのフィードバック文化は非常によく組織されています。 そして、これは他社での私の以前の経験とは非常に異なる最初のことです。



第二に、仕事と私生活のバランスが非常にはっきりと観察されます。 6時までにオフィスは空になり、人々は夜に座ったり、締め切りに間に合わせるために夜に座ったりする必要を感じなくなり、噂はありません。 ロシアでは、仕事は通常の就業日を超えることがよくあります。ドイツでは、人々はこれに非常に注意を払っており、18：00以降は長引くことを望みません。誰もがこれを理解しており、すべての管理レベルで奨励されています。 彼らには多くの伝統があります。彼らは土曜日の朝にカフェに座ってブランチを注文するのが大好きです。 彼らは人生を楽しんでいるだけで、仕事に興味がありません。



-午後6時までに空いているオフィスについて：作業が正しく計画されており、過剰なタスクがないという事実によるものですか？ または、比較的明日、締め切りに、まだ行われていないタスクがありますが、個人的な生活があるために6時に起きて立ち去る人はいますか？



-締め切り（私が見たものから）はそれほど厳しくないので、明日何かが生産されなければなりません。 フィードバック文化により、計画どおりに何かが成功しなかった場合、最後の瞬間ではなく数週間で明らかになり、期待を調整することができます。



-ドイツでの生活に満足していますか？



-はい、私はドイツでの生活に非常に満足しています。私がそこに引っ越したこと、ハンブルグに引っ越したことを嬉しく思います。 私はベルリンについて知っていて、ドイツで活発なインタビューを始める前にそこで一週間過ごしました。 私はハンブルグで研究をしませんでしたが、非常に良い街であることが判明し、ベルリンよりも好きです。 今、私は私が来る多くの都市を比較し、ハンブルクと比較し、ほとんどの場合ハンブルクが勝ちます。



-あなたは専門的にどこかに移動したいですか？



-マネージャーとしての自分の快適さを理解しようとしています。一方で、このポジションでは、製品の開発、ひいては会社全体に大きな影響を与えることができるようです。 しかし、一方で、テクノロジーを直接使用することからさらに遠く離れていることに気付く場合があります。 そしてこれまでのところ、私に合ったバランスを見つけることができなかったので、一方で、私は管理活動と実用的な何かを直接練習するのに十分な時間を持っています。 現時点では、階層の上位になりたくないことを明確に理解しています。 そのため、何らかの予算の調整、優れたタブレット、およびこれがデータ処理に最も近いためです。 だから私はまだそこに努力していません。