私的調査と分析におけるビッグデータの役割





2013年11月、ニューヨーカー誌は、特定のエリオットヒギンズに関する記事を発表しまし 。 しかし、Twitterの読者には、彼はブラウンモーゼスとして知られています。 当時は失業中の投資家であり管理者だったヒギンズは、インターネット上で絶えず配信されるあらゆる種類の情報の巨大なシャフトによって提供される幅広い機会を賢く利用しました。



民間の職業のみを有する軍や他の法執行機関の代表者ではないヒギンズは、ジャーナリストから「恐らくシリア戦争中に使用された武器の最高の専門家」として洗礼を受けました。 人生で武器や知性とは何の関係もない人のための非常にお世辞の称号。 失業者の「ホワイトカラー」は、どのようにして尊敬される出版物からそのような認識を受けたのでしょうか?



オープンソースインテリジェンス



ヒギンズはアラビア語を話せず、中東に行ったことがない。 しかし、これは彼がシリア紛争に関与する当事者に関する膨大な情報を収集し、深い分析を行うことを止めませんでした。 彼の作業ツールは、インターネットにアクセスできるコンピューターでした。 ヒギンズは、英国レスターの自宅にいる間にすべてのデータを収集します。 さらに、これらのオンライン調査はすべて彼にとって趣味です。 ヒギンズは2012年に彼のブログを開始し、 分析情報を公​​開したときに一般に知られるようになりました。シリア軍はクラスター爆弾を使用し、イランからシリアに武器を配達するチャネルも明らかにしました。 そして、これらすべては、ラップトップの助けと細部への注意を払ってのみ行われました。







この作業は、「 オープンソースインテリジェンス 」として説明できます。 もちろん、世界中のインテリジェンスサービスはこれを何世紀にもわたって行ってきましたが、今では誰でも利用できます。 ヒギンズは、写真、ビデオ、ソーシャルネットワークへの投稿など、公開されているソースから情報を収集します。 少しずつデータを収集してデータを比較し、彼は苦労してそれらを大局的に収集します。 その結果、HigginsはThe Guardianでの公開とThe New York Timesでのブログを開始し、 ヒューマンライツウォッチは彼の研究を引用しています。 ブログの才能と、事実とフィクションを区別したいという強い願望の組み合わせにより、 「知性」がもたらされました。







あなたがより高いレベルに上がると、このプライベートなサクセスストーリーは「オープンソースインテリジェンス」の信じられないほどの可能性を示しています。 ネットワーク上の情報の量と多様性により、 誰もがイベントと関係の真の姿構築できる時代に突入しました。これまでは、インテリジェンスネットワークと傍受および聴取の手段を備えた特別なサービスでのみ利用可能でした。 現在、右手でネットワークに入力される情報は、秘密で明白な現象を分析するための強力なツールになる可能性があります。



ビッグデータの役割



「オープンソースインテリジェンス」の現象の出現は、2つの重要な要因の組み合わせによって可能になりました。



第一に、ソーシャルネットワークの爆発的な成長により、ユーザーが豊富に生成したコンテンツへのアクセスが可能になりました。 必要に応じて、運が良ければ、地球に住む人なら誰でも世界中に大勢の観客を集めることができます。 ユーザー数の増加とソーシャルツールの開発により、ますます多くの人がネットワークで自分の考え、意見、観察を「共有」しています。 情報を生成するこのプロセスは、膨大な数の信じられないほどの数の「 デジタルコミュニティ 」の出現をもたらしました。







第二に、ビッグデータの開発により、分析に利用できる情報の規模が完全に変わりました。 「ビッグデータ」という用語は、「サイズがまともなデータベースのサイズに達する情報の集まり」と誤解されることがよくあります。 いくつかの推定によると、約1,200 エクサバイトの情報が現在ネットワークに保存されており、この量の90%が過去2年間で作成されています。



ソーシャルメディアはビッグデータジェネレーターの良い例です。 たとえば、Twitterユーザーは1日に約5億の投稿を作成します。 Tumblrに関する約9,000万の投稿も毎日公開されています。 毎分、 100時間以上のビデオが Youtubeにアップロードされます。 ソーシャルメディアは本当の情報の世界です。







この巨大で複雑なデジタルコミュニティは、分析の新しい機会とアプローチを生み出しました。 ネットワークリソースの秩序の日々の維持から内戦やテロとの戦いに至るまでのシーイングアクティビティは、世界で起こっているプロセスの新しい見方を形成しています。 この情報の海で、必要なものを見つけることは、草本植物の乾燥した茎や葉を縫うための悪名高いツールよりもはるかに困難です 。 しかし、それでも可能です。



Higgins自身は、YouTubeにアップロードされた何時間ものビデオを見て、有用なデータを強調し、他のサイトで収集された情報と比較します。 しかし、彼のアプローチは多くの可能性の1つにすぎません。 彼は古代の大工のようで、ビルダーのチームと比較して、exclusivelyだけで働いています。 ビッグデータのオープンソース分析の分野では、コンピューター科学とコンピューター技術の最新の進歩を利用して、ハイテクの分析方法も機能しています。 また、ヒギンズの「手動」作業と自動化されたソフトウェアとハ​​ードウェアの複合体の間には、無料の分析ツールを使用した独立した研究を組み合わせるさまざまな方法があります



Twitterの例に関する調査会社Demosのレポートは、警察の調査においてソーシャルネットワークが提供する豊富な機会を示しています。 公開されたメッセージとステータス変更の履歴は、証拠と証拠につながり、インシデントに関与するすべての関係者間の情熱の強さを測定するための一種の尺度になります。 また、場合によっては、最もアクティブな会話を常に監視することで、違法行為を防ぐことができます。 しかし、ここでは、国家による完全な監視のための正当化の滑りやすい道に入ることはすでに簡単です。







自動分析システムは、通常の意味では「オープンソースインテリジェンス」の分野に属していません。 むしろ、それはすでに電子知能の分野からのものです。 おそらくこの理由のために、ソーシャルメディアの分析に特化した研究者は、彼らの仕事のために別の用語を思いついた: ソーシャルメディアインテリジェンス 、SOCMINT( ソーシャルメディアのインテリジェンス )。 ただし、本質的に、これはすべての必要な情報が公開されている場所から取得されるという意味で、オープンソースのインテリジェンスです。



実際、技術開発はこの現象に新たな命を吹き込みました。 公開されているビッグデータの対象分析に基づいて構築された、中小企業業界の全盛期を目撃する可能性があります。



All Articles