Amazon MTurkとEmotion Miner：クラウドソーシング、ビッグデータ、感情的なテクノロジー

質問してみましょう：感情的な（および神経認知）技術の分野でクラウドソーシングツールはどの程度需要がありますか？ クラウドリソースに基づいて、大量のデータを収集、ラベル付け、および前処理する方法を教えてください。 デモンストレーションのケースとして、Amazon MTurkプラットフォームと、感情的な問題に加えて、 Neurodata Lab - Emotion Minerのプロジェクトについて説明します。

理論入門（スキップ）

英国の社会学者Zygmunt Baumanの有名な定式化を使用する場合、最近の数十年間の共通の場所は、現代-グローバル化された世界で、新しいネットワーク化社会が発展し、「液化社会」または「流動性近代」の概念である程度明確化されているという事実の言及です。



目の前に起こる変化の体系的で複数の同期性の性質により、さまざまな期間と浸透の深さの現象の重大な現象（暗号通貨や拡張現実から「共有」イニシアチブやビッグデータに至るまで、実際に議論されているものは何でも）が作成され、技術を置き換えます基本的に新しい地平線へのパラダイム（クーンの意味で）。 別のマトリックスであっても、人類学的により包括的に議論する場合。 ネットワークが組織の決定方法および生命のメタファーになる場合、生命はネットワークに「忍び寄る」ことを意味します。 さらに、並行していくつかのレベルで：専門的、プライベート、知的...そして感情的-特に。



革新的な概念と技術的ソリューションを中核とするビジネスの場合、目標は人を思考、行動、そして何よりも感情、主題、商品やサービスの消費者、資本の移動、資源、生成ツールとして分析し解釈することですアイデアと価値の生産、最終的にインターネット上の仕事-無視すべきではない新しい機会の源。 統一、すべての人が共有する規範と標準の段階的な実装は、長期戦略の構築にも役立ちます。 そして、問題を解決するためのツールとアプローチを試してください。



クラウドソーシングは、データサイエンス、人工知能、ニューラルネットワーク開発、ディープラーニング、コンピュータービジョンに基づいて、ITおよびハイテクの分野に長い間登場しています。 Kaggleサイト（Alphabet Inc.の一部として）およびその他の「カグルのような」イニシアチブに対する人気、権威、および国民の注目は、最も顕著な例であり、教育およびゲーム、ならびに真剣な研究およびビジネスプロジェクトの両方において重要です。 クラウドソーシングと感情的（および行動）テクノロジーの方向性は過ぎ去りませんでした。



いくつかのニュアンスを思い出してください。 感情コンピューティングおよび感情検出および認識システム（EDRS）は、グローバルなビッグデータ業界および人工知能技術の不可欠かつ重要な部分です。 これは若い、活発に成長しているサブ産業であり（2016年の市場予測は2016年の60億ドルから安定した予測で2022年までに約320億ドル）、集中的なペースで発展し、理論的見解、概念、技術製品の独自のエコシステムを徐々に形成しています-エモーションAI（言い換えれば、感情的な人工知能）。 現在までに、企業（Facebook、Apple、Microsoft、IBMなど）と民間企業（2010年代初頭に市場に参入した「古い」プレイヤー）の両方がすでに関与しています。 （または以前、たとえば、 言語コミュニケーションを超えて ）およびそれを設定するリズム（たとえば、 Affectiva 、 Eyeris 、 NoldusまたはSightcorp ）。



私たちは、静的モード（画像-写真、フレームなどの分析）と動的（オーディオ-ビデオストリームがさまざまな方法で研究されている）の両方で、感情、生理学的パラメーター、および行動パターンの分析に焦点を当てた、非常にリソース集約的で知識集約的な方向について話しているフォーム-skypeやyoutubeからテレビやネットワークコンテンツ、従来のスマートフォンのカメラで撮影したビデオまで）。



Neurodata Labの場合、包括的な分析に必要なデータが複数のチャネルから同期的に抽出される場合、最も正確な検出および認識アルゴリズムに言及することは、基本的にマルチモーダルアプローチを意味します：顔の微小表現、眼球運動、その特徴の集合体の音声、身体言語、運動、身振り、皮下血流、生理学的および行動上のニュアンス。 それらはすべて、ダイナミクスに現れています。人と人、周囲の世界とのコミュニケーションの瞬間です。



感情を検出して認識するとき、人間の感情は非常に多様で、とらえどころのない存在であり、人から人へ、社会から社会へとしばしば変化し、民族、年齢、性別、社会文化的な違いがあることを考慮することが重要です。 絶え間ないミキシングと平均化、多かれ少なかれ一般的なパターンへの世界の微調整があるという事実にもかかわらず、感情の絶対的な普遍性を宣言することは困難です。 パターンを識別するには、品質データの膨大なサンプルでアルゴリズムをトレーニングする必要があります。



したがって、膨大な量の非構造化、未処理の「生の」情報を収集し、それをクラスタリングして、ニューラルネットワークのトレーニングに適した必要な機能を抽出するには、クラウドソーシングツールと関係するリモートスペシャリストのコミュニティにアクセスする必要があります。

Amazon MTurkの機能と機能

群を抜いて、最も有名でブランド化された「高度な」クラウドソーシングプラットフォームであるマイクロタスクプラットフォームは、Amazon Mechanical Turk（以下MTurk）です。 参加者の総数と並行して進行中のプロジェクトに加えて、その成功の指標は、科学研究だけでなく、定期的に彼らの目的としても機能しているという事実と考えることができます（たとえば、今から話します）。



それでは、少しの間自然科学と認知科学に目を向けると、MTurkではどのような種類のケースとタスクが「投げ捨てられる」のでしょうか。 それらのいくつかがあります：

• 「経済ゲーム」-いわゆる 社会的ジレンマと囚人のジレンマ 。
• 「クラウドクリエイティビティ」-ストーリー、台本などを書く。
• 「フィールド調査」-たとえば、参加者は家庭用サーモスタットの写真を送信するように求められます。これにより、インジケーターの正確性と正しい設定を追跡できます。
• 「子供の注意のテスト」-子供がビデオクリップを見るとき、たとえば、ウェブカメラが目の動き、「停止」、「切り替え」をリアルタイムでキャプチャするとき。
• いわゆる 「トランザクションクラウド」、たとえば、MTurkの参加者は、他の従業員の否定的な考えに応じて独自の認知的再評価を提供しました。視覚障害を持つ人々が画像をダウンロードし、その内容のほぼリアルタイムの説明を受信できるアプリケーションも開発されました。ソーシャルメッセージ;
• 「タイミングと日記」-たとえば、参加者は、アルコール摂取、症例の分布、または実施した作業についてメモを取るように求められました。これにより、研究室での参加者の身体的存在の期間に限らず、より長いセクションでデータを収集することができます（縦断的研究）。 、空間的注意、習慣などの生産性の程度。
• 「科学助手のコミュニティとしての群衆」-統計的に広範囲のサンプルの場合、判明したように、人々はしばしば専門家の見積もりと同等またはそれ以上の判断を策定します。 たとえば、MTurkは、一連の政治テキストからの発話のイデオロギーを研究するために使用されました。15人の参加者が、政治学の5人の博士候補者に見合った品質で評価することがわかりました。 群衆がデータを迅速に配信できることに注意することが重要です。リモートの参加者は、22,000件のオファーのコンテンツを5時間以内にわずか360ドルで処理しました。

MTurkの統計も注目に値します。

• 参加者の大多数はアメリカ人とインド人です。 比較のために、ヨーロッパ人は他のサイト（ 多作およびクリックワーカー ）で作業する可能性が高く、東南アジアの人々はマイクロ ワーカーを好み、日本人は独自の国内サイトCrowdWorksを好みます。
• 主要なコミュニケーション言語は英語です。
• アメリカの参加者は、大学生、無料の職業の代表者、または社会的に不利な立場にあるグループだけに限定されませんが、彼らのサンプルは一般的に全アメリカの人口の代表ではありません。
• 少なくともヨーロッパおよびアジア系のアメリカ人の過剰な存在-アフリカ系アメリカ人およびラテンアメリカからの移民。
• 奇妙なことに、性別セクションでは男性が支配的です。
• 遠隔労働者のサンプルは、若者（最大35年）、教育の向上（大学）、宗教性の低下、自由な政治的見解によって区別されますが、一時的/安定した職業的失業、低収入も特徴です。
• プロジェクト参加者は、原則として、目的意識、勤勉さ、反応の速さ、および明確に表明された知識の必要性によって区別されます。これは、内向性、社会不安、身体的および心理的不快感に対する弱い抵抗、特定のレベルによって補償されることがあります（繰り返しますが、これは頻度ではありません）軽度の自閉症スペクトラム （ASD）の障害に固有の神経症と特性。

Amazonは、MTurkに50万人以上の従業員が登録されていると主張していますが、彼らの積極的な役割は計り知れないほど小さいです。 多くの場合、より長く複雑な研究​​プロジェクトに適した参加者のプールは、すでに正常であると考えられていますが、コミュニティの枯渇を伴います（退去した人々の代わりに更新されて補充されます-約7ヶ月に1回ですが、一部は数年そこに残ります）典型的な科学的問題や研究室や能力センターの特定の要件に開かれています。 同時に、多くの参加者はMTurkを本格的な仕事だと認識し、アンケートやアンケートへの記入に週n時間を費やすことに同意しています。 平均的なレポートのMTurk参加者は、レポート月に約160の学術研究に関与しており、機会があればもっと一生懸命働くことを望んでいます。 参加者の約60％はフォーラムでコミュニケーションを取りますが、同じプロジェクトを意図していても、サイトの他の従業員と直接接触した経験があるのは10％だけです。 これらは事実です。

Emotion Miner：ホームプロジェクトから完全なプラットフォームまで

別の例として、特に感情的および行動的研究にクラウドソーシングを統合した私たち自身の経験を簡単に強調することが適切かもしれません。 マイクロタスクとデータ処理に関連するすべてのサイト（MTurkとCrowdSourceを含む）を慎重に研究し、それらの所定の機能が私たちを完全に満足させるものではないという結論に達しました。



それでは、今日のEmotion Minerとは何ですか？ PCおよびFacebookブラウザーに最低限必要なバージョンがオンラインで利用可能になりました。多機能プラットフォームは2018年春までに利用可能になります。



現在の形式でサイトを作成できるもの：

• 使用可能なコンテンツ（トークショー、討論、独白、インタビュー、公開スピーチ、プレゼンテーションなど）から以前に抽出されたオーディオビデオファイルを配置し、並べ替え、スライスし、短いシーンに分割します（タイミング-最大5秒-できます）変更）定期的にプロのアノテーターを使用するか、もちろん、法的拘束力のある瞬間とコンテンツ所有者の権利を考慮して、サードパーティのチャンネルとソースからより長いオリジナルの録音を「ピックアップ」します。
• 数百および数千のサードパーティアノテーターの手によって言及されたビデオクリップの複数の注釈を実行します。各アノテーターは、原則として、金銭的な観点からこの種のイニシアチブに参加することに興味があるだけでなく（参加は支払われます）、初期スキルを「活用する」ことも望んでいます感情の認識について。

構造的およびスタイリスト的に、このタイプの作業は、フリーランス/クラウドソーシングの通常の形式だけでなく、デジタル遊牧民のコンテキストと心理学に最適に適応します.21世紀の「デジタル遊牧民」は、日常的な作業が身体的だけでなく知的でもあります。



このプロジェクトでは、英語を話すすべての成人ユーザーがアノテーターとして行動できます。ただし、参加の基準、およびサイトで公開されているオファーに記載されている条件とルールを満たしている必要があります。



主題のより包括的なビューのためのいくつかの数字。 私たちのプラットフォームでは、16,000を超える（継続的に成長しているコミュニティ）アノテーターが登録および検証されました。 私たちが自由に使えるデータベースは、巨大な感情スペクトル上の数千万の調整された断片です（より正確には、基本的な感情、複雑な感情的および精神的状態、さらには社会行動パターンと生理学を含む分類モデルについて話しているのです。より高度なコンピュータービジョンメカニズムなどを使用することも必要です。



ユーザーの地理は印象的です。主要な地位は、アジア太平洋地域（インド、マレーシア、フィリピンなど）、アメリカとカナダ、ヨーロッパとラテンアメリカにあり、アフリカ（ケニア、南アフリカ、ナイジェリア）の一部を占めています。 利用可能なすべての統計を収集（および個別に公開）することで、最終構成のプラットフォームが「リモート従業員」の期待とニーズを満たすようにします。 Facebookグループや専門フォーラムから、リモートワークやターゲットを絞ったGoogle広告を検索するためのサイトまで、アトラクションのチャネルが不足することはありません。



プロジェクトは以下を提供します。

• 効果的な学習アルゴリズム：チュートリアルとレコード全体を表示する機能、そのコンテキスト化。
• テスト：必須の英語テスト。
• 難易度の異なるタスクの参加者によるフルフィルメント：タスクのラダーはステップごとに複雑になります。
• インタラクティブなプロセス制御：アノテーターとのリアルタイムのコミュニケーションおよび合理化された品質管理（プロジェクトチームはアノテーターに実用的なサポートを提供し、24時間年中無休の英語を話すサポートチームがあります）。

MTurkとは異なり、私たちは多くの分野の岐路にある業界の詳細な研究と専門知識ほど規模と普遍性に依存していません。

計画と見通し

モバイルバージョンとアプリケーション（IOS / Android）を備えた2018年の本格的なプラットフォームのリリース。 コンテンツ（ビデオ、オーディオ、画像、テキスト）の多様化、言語（英語とロシア語に加えて、その他も関連）、そのようなタスク（感情や行動だけに焦点を当てるのではなく、パートナーの要求に応じてML / CVの他の側面に移行する;など）個人の統合およびニューロ編集の分野の研究は、多くの場合「トレーニングデータ」に基づいており、これに必要なすべてのインフラストラクチャを導入しています。



私たちは科学的な共同研究を受け入れており、特にロシアの研究所や部門などの同僚に、二国間協力の一環として彼らの仕事でEmotion Minerを使用することを提案しています。



また、ニューロデータラボとパートナー投資ファンドとの協力に基づいたテストのためのハブアプローチも準備されています。製品にパッケージ化されたプラットフォームは、スタートアップや企業のプレーヤーの両方にとって興味深いものです。多くの場合、ニーズや要求は、基礎科学とは直接関係なく、実用的でビジネス的なものであり、ただし、これはそれほど興味深いものではありません。

Datacombatsプラットフォームは、DS / ML環境と神経認知科学者の輪の両方で競技とオンラインハッカソンを実施するために、単一のパッケージの一部として密接に関連します。



実現したいアイデアがたくさんあります。 もちろん、本質的にインタラクティブなプロジェクトは、外部コミュニティのサポート、積極的な参加、熱意に応じてスケールアップし、最も重要な仮定を共有します：一般的な人工知能（AGI、Artificial General Intelligence）、これについてはあまり書かれていませんが、人工的に行われることはほとんどありませんエモーショナルインテリジェンス（エモーションAI）。少なくとも当面は、日常生活、ビジネス、およびテクノロジーの世界の主な推進力および開始力です。



エモーショナル・マン：ホモ・センティエンスそのまま。