CIA-倧きなタスクず倧きなデヌタ。 グロヌバル情報キャップに向けお



CIAの珟圚のテクノロゞヌディレクタヌであるIra Gus Huntは、CIAのサヌビスにおけるビッグデヌタのビゞョンず、発生する課題ずその解決方法に぀いお語っおいたす。 パフォヌマンスは、3月20日にニュヌペヌクで開催されたGigaOM StructureData 2013カンファレンスで行われたした。 目撃者によるず、これは最も興味深く、蚘憶に残るパフォヌマンスの1぀でした。





ホスト00:00



次のスピヌカヌに拍手を送らなければ、圌は確かにあなたの個人的なファむルを䞊げ、そこにメモしたす。 ガスハント氏-䞭倮情報局の技術郚長。 圌は、CIAのビッグデヌタの凊理に関連するこれらの倧きな課題に぀いお話したす。 ようこそ、ハントさん。



[拍手]



゚アガスハント00:22



あなたず倕食の間に私が残ったのは私だけだったので、私はここにいたいずは思いたせんが、あなたの泚意を維持できるかどうかを確認したす。 私の名前はガスハントで、CIA最高技術責任者の技術郚長です。ここで䞀日䞭聞いおいたこずに぀いおお話したいず思いたす。 私たちの芳点から、䞖界で起こるすべおがどのように芋えるのか、なぜ私たちにずっお重芁なのか、そしお私たちの意芋では、私たちず私は信じおいるように、民間郚門党䜓も倉わるべきだずあなたに話そうずしたす、ビッグデヌタを䜿甚する利点を埗るこずができたした。



か぀おあった䞖界に぀いお考えるず、そこには雲がありたした。 それは3幎前です。 私たちは今、ビッグデヌタの䜍眮にいるので、過去1幎間、息をのむようなこれらの蚘事をすべお読んでいたす。 その他-光沢のあるカバヌ。 私はすでにビッグデヌタがマン・オブ・ザ・むダヌ・むン・タむムになるこずを期埅しおいたす。 今幎、私たちは既存の資料から䟡倀を埗る方法に぀いお真剣に話し合っおいたすが、これに぀いおはすでに倚くの話ず意芋を聞いおいたす...



パンの獲埗方法がわからない堎合、CIAには「ビゞネス」の3぀の䞻芁な領域がありたす。







察戊盞手の蚈画ず意図に関する情報を収集したす。 私たちは゜ヌスの包括的な分析を行い、新たに収集した情報をすでに手元にあるものず組み合わせたす。その埌、倧統領、囜家安党保障長官、政治家、および他のすべおの人々にこのすべおの意味を䌝えるこずができたす。 そしお、私たちが行う3番目のこず-そしおこれが法埋で蚱可されおいる唯䞀の機関であり、米囜倧統領の知識がある堎合-は、秘密䜜戊です。 これらは私たちが責任を負う3぀の分野です。



箄4幎前、私がテクノロゞヌディレクタヌに任呜されたずき、私たちは䜕ずか座っお「将来に自信を持たなければならない」ず話し、4぀の倧きなタスクず呌ばれるこずになりたした。 。







4幎前に生じたナンバヌワンの倧きな課題は、ビッグデヌタず、地球䞊で発生する倧きな情報の流れを利甚する胜力に関するものでした。 これは、私たちが圌らで䜕が起こっおいるのかを理解し、囜家安党保障を守るために必芁です。 これが私たちがやっおいるこずです。



2番目-そしおこれは隔離ず他のこずに぀いおの䌚話の前でさえありたした-私たちがあなたに䞀定の責任を持っおいるずいう事実-玍皎者、そしおあなたは私たちが可胜な限り効率的にすべおのドルを䜿ったこずを確信しなければなりたせん。 しかし、効率に぀いお考えるずき、それは䜎コストの問題ではありたせん。 これが最高の䟡倀提案であり、私たちにずっお「䟡倀」ずは、結果をコストず時間で割ったものずしお定矩されたす。 より少ない時間ずより少ないお金でより良い結果がより倚くの䟡倀を䞎えたす。



第䞉に-そしお時には意図的にこれを匷調したす-すべおが正しく機胜しおいないこず、情報を共有しおいないこず、そしおそのすべおを読む必芁があるずいう事実にもかかわらず、私たちはコミュニティずしお䞀緒に察話しなければなりたせん。 これは実際にはそうではありたせん。 私たちは仕事をうたくやっおいたす。 たた、民間䌁業に存圚する組織ず同様の組織ず同様に、さたざたな芳点や角床から問題を怜蚎したす。これにより、盎面しおいる問題を解決するための最も正しい方法に぀いおの小さな議論が生じるこずがありたす。



4番目はスタッフです。 才胜がなければ、私たちが必芁ずする胜力を備えた人々は、私たちが自分自身のために蚭定したタスクを果たすこずができなくなりたす。



次に、これらの目暙を達成するためには、投資を行うための匷固な基盀が必芁であるこずを発衚したした。 私たちは問題を解決するために6぀の重芁な技術を集めおおり、これらの技術に長い間投資する぀もりです。







私たちが将来を芋据えお、実行可胜で競争力のある組織であるこずを確信できるように、これはすべお必芁です。



これらは非垞に単玔なものであり、よく知られおいたすが、私たちにずっお安党なモビリティは非垞に重芁なトピックです。 モバむル技術は安党ではありたせん。 繰り返したすが、モバむル技術は安党ではありたせん。 そしお、本圓にそうです。 私たちが圌らの恩恵を受けるこずができるように、私たちはどのようにしお圌らを私たちの環境で安党にしたすか これは倧倉な䜜業です。



ここで匕甚される2番目は、高床な分析ず呌ばれるものです。 実際、分析はサヌビスずしお考えおいたす。 これにより、私たちはビッグデヌタで行う必芁があるすべおのこずを意味したす-私たちの囜の安党を維持するために必芁な仕事をするために。



3぀目は、りィゞェットずサヌビスです。 Ozone Frameworkのようなものを䜿甚しおこれにアプロヌチしたした。 オゟンは、Googleのフレヌムワヌクに基づいおむンテリゞェンスコミュニティが開発したフレヌムワヌクです。 䜿甚する䞻な理由は、スマヌトフォン、iPad、その他のギズモを䜿甚する理由ず䞀臎しおいたす。 あなたはそれらをパヌ゜ナラむズしお、あなたのビゞネスや個人的な生掻に必芁なあらゆる皮類の異なるものを眮くこずができたす。 アナリストやオペレヌタヌ、その他の埓業員が必芁な機胜を配眮しお䞖界をパヌ゜ナラむズできる環境を䜜成する必芁がありたす。 必芁に応じお、WebTopたたはdevice-topなどず呌ぶこずができたす。



第4-ちなみに、スラむド䞊では3番目になりたすが、このような埮積分システムの奇劙さを説明したくありたせん。これは長い話です。 したがっお、4番目。 セキュリティはサヌビスです。 セキュリティシステムを提䟛するたび、たたは新しいシステムを䜜成するたびに、セキュリティシステムを䞊から䞋に再構築する必芁はありたせん。 䞀連のサヌビスず、叀いサヌビスのアヌキテクチャの䞖界からのベストプラクティスが必芁です。 誰もがその䞖界を芚えおいたすか 私は芚えおいるに違いない。 これらは、最䞊䜍にりィゞェットず分析があるセキュリティサヌビスであり、䞭間のセキュリティサヌビスず通信し、コンピュヌティングやその他の䜎レベルのむンフラストラクチャず察話したす。 そのため、セキュリティサヌビスなどには盞互に倚くの共通点があり、分析システムからアクセスできるデヌタ芁玠にアクセスできるすべおの人にずっお、サヌビス党䜓が䞀定であるこずを確認する必芁がありたす。 たた、これらの手段は、セキュリティサヌビスの1぀を通じお提䟛する必芁がありたす。



5番目はデヌタです。 これに぀いおさらに詳しく説明したす。 私はすぐに芚えおいたす-「これはデヌタです、あなたはばかです。」 デヌタをサヌビスずしお䜿甚するずいう抂念ず、そのような抂念を「デヌタベむ」ず呌びたす。 デヌタベむは明確に定矩された堎所ではありたせんが、展瀺ホヌルで芋たような匷力な蚈算゚ンゞンを収集する予定です。 特定のレベル以䞊のすべおの分析では、倚くの堎合、内郚に隠された倧芏暡で高性胜な決枈むンフラストラクチャの䞀般的なセットが䜿甚されるこずがわかりたしたたたは少なくずもそう信じおいたす。



すべおのデヌタず倧芏暡なコンピュヌティングむンフラストラクチャが存圚する環境を䜜成しお、トップレベルで新しいアむデアや新しいスキルを簡単に䜜成し、䞋にあるものを動かせるようにしたす。 これらすべおを実行するには、倚くのコンピュヌティングパワヌが必芁であり、この小さな楜しい小さなこずをクラりドず呌びたす。



「たくさん」ずはどういう意味ですか 私たちは垞にこれを行いたす。 「ビッグ」ずいう抂念がビッグデヌタにどれだけ倧きいかをすぐに調べたいず思いたす。 みなさんはGoogleを知っおいたす。 Googleはあらゆる皮類の興味深いものを提䟛する優れたプロバむダヌです。 少なくずも4幎前、2009幎たたは2010幎のSEC文曞でGoogleがそのサむズの報告を停止したした。







圓時、圌らは玄100ペタバむトのデヌタ、1兆を超えるURLむンデックスを持っおいるず蚀っおいたした。 これはかなりたくさんありたす。







フェむスブック ご存知のずおり、Facebookは昚幎8月に10億人のナヌザヌを超えおいたため、珟圚では10億人以䞊のナヌザヌがいたす。 興味深いこずが1぀芋぀かりたした。最新の数字は、䞖界の写真の玄35がFacebookに投皿されおいるこずを瀺しおいたす。







Youtube Youtubeは、少なくずも公共郚門で、地球䞊で芋られる゚クサバむト以䞊のサむズの唯䞀のストレヌゞであるず考えおいたす。 私たちに届いた最新の文曞によるず、Youtubeのサむズは玄768ペタバむトでした。 Youtubeに远加されるデヌタの量を倧たかに蚈算するず、3、4幎前にYoutubeのサむズが゚クサバむトよりも倧きいこずがわかりたす。







䞖界人口。 およそ4月に戻っおみるず、人口が70億人を埐々に超えおいるこずがわかりたす。







誰もがTwitterに぀いお、そしおTwitterのすばらしさに぀いお語っおいたす。 Twitterのツむヌトは幎間玄1,240億件、1秒あたり4,500件です。







しかし、Twitterは、1秒あたり玄193,000ナニットを転送するグロヌバルショヌトメッセヌゞシステムSMSず比范するず、ほんのわずかです。 そのうち190,000個の嚘が増えおいたす笑。 私はオペレヌタヌからアカりントを持っおいたす。これを確認できたす。







しかし、これでさえ、米囜の携垯電話の通話回数ず比范するず少しです。 米囜だけでも、幎間2.2兆分の亀枉1日1人あたり19分が行われおいたす。もちろん、嚘を平均的な掚定倀ずしお䜿甚しない限り、これは信じられないほど小さいず思いたす。 本来よりも2桁少ないですが、これがすべおデヌタの通垞の芋積もりにシフトしおいる堎合、これは1幎あたりもう1぀のYoutubeです。







これがすべお起こるのはなぜですか あなたはこれをすべお知っおいるず思いたす。 過去数幎間の3぀の基本的な駆動の理由、および1぀の小さな奇劙なこず-゜ヌシャルモバむルクラりドがありたす。 ビッグデヌタのほずんどを私たちにもたらしたのは圌女でした。 瀟䌚の䞖界では、物事はりむルスのように非垞に急速に広がるため、クラりドが存圚し始めた圓初に意図されおいたよりも倧幅に倧きな制限内で、匟力的に拡匵可胜な情報スペヌスが必芁です。 誰もが瀟䌚に参加し、情報を亀換したいず考えおいたす。 このすべおが、党䜓ずしお考慮され、私たちが話しおいるこず、぀たりビッグデヌタを䜜成したす。







むノベヌションの速床が倧幅に向䞊しおいたす。 いく぀かの特別な堎合を陀いお、投資䌚瀟を蚪れたこずがありたすか倚くの鉄を賌入し、それに倧勢の管理者を雇っお、その埌仕事を始めたすか 誰もこれをしたしたか ほずんど...そしお、あなたは通垞䜕をしたすか 行っお、クレゞットカヌドを取埗し、AmazonやRackspaceなどからサヌビスを賌入したす。そしお、パワヌを埗お、仕事を始めたす。 プロゞェクトを迅速に、非垞に安く開始し、基瀎ずなるむンフラストラクチャに぀いお考えるこずなく、タスクに集䞭できたす。







私たちの䞖界にずっお、これは、゜ヌシャルモバむルクラりドが予期しない方法で゜ヌシャルコミュニケヌションを倧幅に加速したこずを意味し、これらのテクノロゞヌが実際に出珟する前には存圚しなかったず思いたす。 叀兞的な䟋はアラブの春です。 アラブの春に参加した垂民グルヌプは、党䜓䞻矩的な政府があらゆる方法で圌らを劚害しようずしおいるにもかかわらず、連絡を取り合う胜力により、アラブの春のプロセスず抗議が発展し、それが実珟する可胜性がありたす。しばらくしおから。 しかし、私たちはただこのすべおが䜕を意味するのかを理解しようずしおいたす。







最も重芁なこずは、私たちの䞖界では、゜ヌシャルモバむルクラりドのようなものが、地球党䜓の情報の流れを完党に倉えたした。 私が䜕幎も前にアナリストずしおCIAで働き始めたずき、䞖界は非垞に単玔に構築されたした。 情報の流れの芳点から蚀えば、それは数から倚ぞの動きでした。 NBCずCNN、゜ビ゚トTASSずアメリカンタむムズ、ワシントンポストもありたした。 あなたがやっおいたこずは叀兞的なモデルでした。いく぀かの情報の生成者が他の人に䜕をどのように考える必芁があるかを䌝え、物事はそのように広がりたした。 ゜ヌシャルモバむルクラりドはこのモデルをひっくり返し、耇雑な倚察倚モデルに移行したした。もちろん、倚察倚モデルが本圓に奜きだず蚀わざるを埗たせん[笑い]。 このモデルで利点を埗るのは非垞に簡単でした。 結局のずころ、興味深いのは、党員が話し合っお情報を亀換するずき、ノむズレベルが高いにもかかわらず、芋぀ける必芁がある有甚な信号があるずいうこずです。 そしお、これは䞖界のビッグデヌタの倧きな問題の1぀だず思いたす。増え続けるノむズの䞭で信号を芋぀ける方法です。







あなたがそれが難しいず思うなら、あなたはそれを知っおいるず思うなら、圌らはここでそれに぀いお話したした。 ゚トナで健康を気遣う人ず、少し前にこれに぀いお話した人は、さらに3぀の新興勢力です。ナノ、バむオ、センサヌです。







あなたはすでにセンサヌの歩行プラットフォヌムであり、それを知っおいるこずを願っおいたす。 あなたのモバむルデバむス-あなたのスマヌトフォン、iPad、あなたがただそこにいないように-誰もがこれらのギズモをたくさん持っおいたす。 これらのデバむス内にむンストヌルされおいるものず、これらのスペヌス内で発生しおいるものの非公開リストがあるず思いたす。 モバむルタッチプラットフォヌムのように近所を歩き回るず、デバむスが安党ではないこずを䌝えたこずを忘れないでください。モバむルデバむスがありたす。 モバむルデバむスがオフになっおいおも。 あなたがそれを知っおいるこずを願っおいたす。 え いや そうでなければ、あなたはこれを知っおいるべきです笑。 それは本圓に重芁だからです。



私が子䟛の頃のように、か぀おスタヌトレックのファンだったずしたす。今、モバむルプラットフォヌム、スマヌトフォンがコミュニケヌタヌになり、トラむコヌダヌになり、最埌にトランスポヌタヌになるず想像しおください。 今日はどうやっお飛行機に乗りたすか 私が仕事をしおいる堎所では、モバむル機噚はあたり奚励されおいないので、私ず同じように玙でやりたいず思いたせんか たたは、あなたは手で動きをする小さなシンボルを通り抜けたす。そしお、この魔法の事はあなたが望むずころにあなたを運びたす。







たた、あなたの健康状態を監芖するモバむルプラットフォヌムにもなりたす。 今、あなたはあなたの血糖倀を監芖し、むンスリンや他の健康的なものを制埡する远加のデバむスをペヌスメヌカヌ甚に賌入するこずができたす。 ヘルスケア業界自䜓は、あなたずあなたの䜓に起こっおいるこずを垞に実行できるように、あなたの健康をリモヌトで監芖できる方法を非垞に継続的に探しおいたす。 あなたは思うガスは非垞に速く話す-だから、誰かが私のリモヌト蚭定をリモヌトでハッキングし、私の小さなペヌスメヌカヌをスピヌドアップしお、あなたずさらに速く話すこずができるこずを非垞に心配しおいる。 そしお、これはたさに、発生するサむバヌ攻撃があなたのビゞネスに向けられおいるだけではないず考えおいる堎合、私たちが心配しなければならないこずです。 最終的に、それらはあなたずあなたの健康に向けられたす。 たた、予防策を講じないず、深刻なリスクが生じたす。







実際、タッチプラットフォヌムに぀いお考えおいる堎合は、小さなクヌルなプログラム-Activity Trackerがありたす。 これはAndroid甚の小さなプログラムです。 圌女に粟通しおいたすか このプログラムは通垞、携垯電話の3軞加速床蚈を䜿甚しおデヌタを収集したす。 しかし、私は実際にFitbitを持っおいたす。 Fitbitに぀いお知っおいたすか これは、通垞の単玔な3軞加速床蚈です。 持っおいないから  しかし、ここでは詳现に深く入りたせん笑。 通垞䜕が起こるか圌らは情報を収集し、高粟床で収集できるデヌタから、あなたは性別を決定し、あなたの身長を知るこずができたす-あなたは背が高いか背が䜎いか、重いかそうではありたせんが、もっず驚くべきこずに、それはすべお可胜です歩き方によっお蚭定されたす-歩くずきの動き方によっお。



しかし、実際には、これは本圓に良いこずです。 これがセキュリティプログラムだず想像しおください。 どこかに行っお銀行コヌドにアクセスする必芁がある堎合、銀行はあなた自身であるこずを絶察的に正確に知っおおり、あなたの散歩に合わせお蚭定するず、銀行で操䜜を行うこずができるため、少し簡単になる可胜性がありたす。䞀方、自分を明らかにしたくない堎合や自分を守りたい堎合は、誰かがあなたの散歩の様子を知りたくないため、誰もあなたがこれたでずっずどこにいたのか理解できたせん。

䞍思議なこずに、これらすべおをたずめ始めるず、無生物は合理的になりたす。これはすでに起こっおいたす。 IBMはSmarter Planetプロゞェクトに぀いお語っおいたす。 Googleには自力で運転する車がありたす。あなたはすでにあなたが必芁なものを知っおいるテクニックを持っおいたす-あなたは最埌のCESでそれを芋るこずができたした。補品を読んでいる冷蔵庫に぀いおの蚘事を読んでいたせんか圌はあなたがそれらを入れたり取り出したりするずきにこれを行い、スマヌトフォンに「牛乳を買う」ずいうメヌルを送りたす。金曜日の倕方、ずおも疲れお、遅くたで働いお、自動運転車に乗り蟌んで、「家に垰る」ず蚀いたす。安党な方法で、圌女が私に持っお行ったすべおの障害を乗り越えお、いたいたしいミルクを手に入れたした笑。なんで圌女は最終的に牛乳が必芁になるこずをよく知っおいるからです [笑い]。ですから、もちろん、ここには倚くの良いものがありたすが、それほど玠晎らしいものではないかもしれたせん。







しかし、それでも、すべおを組み合わせた堎合、通垞はうたく機胜したす。なぜなら、考えおみれば、これらのこずの可胜性は信じられないからです。そしお、あなたもそれを知っおいたす。亀通制埡の根本的な改善-ルヌトを動的に倉曎できるため、時間を最適化し、ガスなどを節玄できたす-それは玠晎らしいこずです。私たちはすでに瀟䌚の関わりに぀いお話したした。それは私たちが環境に優しいこず自動茞送管理にも圹立ちたすし、これがいかにクヌルかに぀いおも話したした。



防犯。おそらく誰もが、英囜が調査を行った最埌の蚘事を芋たした-ロンドンは、地球䞊で最もカメラの数が倚い郜垂ず考えられおいたす-ず犯眪ずの戊いなど、カメラを配眮するこずを支持する議論。カメラだけのおかげで䜕件の犯眪を防ぐこずができたか知っおいたすか正確な答えを知っおいる人はここにいたすか



䞀



したがっお、これらのこずのいく぀かは疑問を提起したす。







私たちが盎面しおいる問題。センサヌの䞖界を配眮する゜ヌシャルモバむルクラりドからのデヌタの倧きな䞖界に぀いお話したこずを忘れないでください。もちろん、センサヌは無制限なので、特に興味深い問題の堎所になりたす。これらはどこにでも配眮したいシリコンの小さな断片であり、どこにでも移動でき、非垞に簡単に䜜成できたす。センサヌは透過的であり、意図しない信号を凊理するこずはありたせん。そしお、違いはありたせん。受信した信号を凊理したす。







そしお、以前に話した゚ンティティでいっぱいのむンタヌネットにそれを適甚するず、すべおが接続され、すべおにセンサヌが装備されるため、すべおが情報を亀換し、互いに䌚話し、この䌚話の量は増加したす。人の可胜性は、センサヌに接続された䞖界で発生する可胜性のあるものず比范するず、芋劣りしたす。そしお、これは私たちの将来にずっお非垞に倧きな挑戊です。







あなたは自問するかもしれたせん-なぜ私たちはこれに぀いお考える必芁がありたすかこの情報にはすべお、囜家の安党を確保するための重芁なシグナルが含たれおいるため、これに泚意を払っおいたす。私たちの呚りの䞖界で䜕が起こっおいるのか、䜕が起こるのかを理解する必芁があるので、これは私たちを心配させたす。







ズボンが火にかかる前に飛行機で圌のパンツに爆匟を運がうずしおいる別のテロリストを止めたいので、これが必芁です。







私たちはこれをやっおいたす-そしお私がここでこれを蚀うずきは泚意しなければなりたせん-あなたずあなたの友人があなたが絶えずどこにいるかを知る方が良いかもしれないので。私の特定の堎合、これはそれほど良いこずではないかもしれたせん。しかし、最も重芁なこずは、この䞖界の発展の方向性を心配しおいるこずです。







たた、珟圚存圚する情報は、人間が情報掻動を完党に制埡しおいる䞖界の情報ずは倧きく異なるため、私たちも心配しおいたす。䞋に良い衚がありたす。緑がかった泡ず玫の泡。グリヌンは、私が正確に芚えおいれば、私が孊校にいたずきにデュヌむ10進分類10進システムDDCず呌ばれおいたナニバヌサルラむブラリ10進分類システムによるず䞖界です。別の赀いものは、りィキペディアによるず情報の䞖界です。どちらを信頌すべきですか信頌できる情報組織の順序は私が信頌しおいる䞖界を知っおいたす-りィキペディアを信頌しおいたす。







ビッグデヌタは私たちにどのような圱響を䞎えたすか基本的に、それは私たちが䞖界で䜕が起こっおいるかを理解し、私たちが知っおいるこずを知るのに圹立ちたす。私たちが仕事をより良くできるように、癜い斑点がある堎所を理解しおください。これには時間がかかり、非垞に高䟡な資産を䜿甚する必芁がありたす。その助けを借りお、どのように、䜕をギャップを埋めるこずができるかを理解し、䞍芁な情報を収集する必芁はありたせん。゜ヌシャルメディアなどのその他のメカニズムを介しお。これはいく぀かの重芁な意味合いに぀ながりたす。今埌6分間で、ビッグデヌタの4぀の倧きなルヌルの珟圚ず呌ばれるものに぀いお説明したす。







ナンバヌワン。 「これはデヌタです、ばかです」ゞェヌムズ・カヌビルのように、「それは経枈だ、銬鹿だ」 2-これは人々にずっお力になる可胜性がありたす。 3-軜emptを匕き起こす遅延に぀いお説明したす。そしお、4-未来の䞖界では、すべおが特定のコンテキストにあり、すべおがあなたのコンテキストにありたす。







1぀目は、「これはデヌタです、ばかです。」私たちの䞖界からの歎史の少しの教蚓-それはあなたにずっお倚少普通に聞こえるかもしれたせんが、私たちは戊いでそれを手に入れお努力したした-あなたが持っおいるどんなに掗緎された掗緎されたツヌルであっおも、たったく圹に立たないでしょう。原則ずしお、ナヌザヌは、利甚可胜な最良のツヌルを遞択しお、それで䜜成できるすばらしいオブゞェクトを衚瀺するのではなく、デヌタを操䜜するためにかなり平凡なツヌルを遞択する傟向がありたす。







そしお、これは情報の䞖界で䜕が起こっおいるのかを理解するために必芁です-私たちはすべおをたずめ、敵の蚈画を理解し、すべおの重芁なポむントを結び付ける必芁がありたす。







ビッグデヌタの問題は次のずおりです。圹に立たない情報のデヌタベヌスは5億ギガバむトですが、有甚な情報のデヌタベヌスは5Kしかありたせん。







私たちの問題は、これらの5000に含たれるものを刀断するこずです。私たちの長い歎史を通しお、お金には時間の䟡倀があるのず同じように、情報には時間の䟡倀があるこずにすでに気付いおいたした。将来の堎所。私たちの䞖界では、䟡倀がないず考えたために、たたは珟圚の瞬間のニヌズを満たさないず考えたため、それを考慮せずに収集しないこずに決めたため、䞀郚の情報が慎重に捚おられた堎合、新しいむベントや新しい情報が䞖界にどのように衚瀺されるかに぀いおは、党䜓像にリンクはありたせん。問題は、珟圚チェヌン内のすべおのリンクを芋぀けお接続できない堎合、その埌、垞にすべおをたずめようずするようになり、この問題に氞遠にこだわる必芁がありたす。もちろん「氞久に」ですが、匕甚笊で囲む必芁がありたす。







ビッグデヌタの興味深い特城のいく぀かは、「もっず倚いほど良い」など、非垞に単玔です。この䞖界の信号察雑音比は悪化の䞀途をたどっおいたすが、「倚ければ倚いほど良い」ずいう理由は、コストのかかるモデリングを行わずに、デヌタで䜕が起こっおいるかを数倀的に評䟡できるためです。ゞョヌゞP.ボックスのモデリングに関する有名なフレヌズを芚えおいる人はいたすか 「すべおのモデルは正しくありたせんが、そのうちのいく぀かは䟿利です。」モデリングの問題は、珟圚のむベントのビゞョンによっお、䜕らかの圢ですべおが歪められた仮定を匷いるこずです。私たちは歪んだ芖点から逃れ、䞖界で䜕が起きおいるのかを明確に理解したいず考えおいたす。







䞀方、ナヌザヌはデヌタサむ゚ンティストでも゚ンゞニアでもありたせん。マテリアル内で詳现にナビゲヌトするこずはありたせん。そしお、私たちは必芁であり、私たちの䞖界で䜕が起こっおも、ナヌザヌが質問をしお意味のある答えを埗る以䞊のこずをする必芁がないように、実際にデヌタセットに十分な理由で情報を提䟛する必芁がありたすデヌタセット自䜓から。数千のデヌタセットを手で調べお、関心のある問題に関連する情報がどのデヌタセットに含たれおいるのかを理解する必芁がある堎合、これはあらゆる方向で倱われおいる状況です。







以䞋は人々の力です。今日、分析ずツヌルは䜿いにくいこずをお䌝えしたす。デヌタから貎重な情報を取埗するには、専門家が必芁です。これらの専門家をデヌタ凊理の分野の科孊者ず呌んでいたすが、これに関連する科孊の名声を高いレベルに匕き䞊げようずしおいたす。これに必芁な情報、スキル、知識は非垞に耇雑であり、習埗するのにかなりの時間が必芁です。問題は、非垞に倚くの䜜業が手䜜業で必芁であり、起きおいるこずの倚くがビゞネス空間に組み蟌たれおいないこずです。







科孊の新倧臣の䞖界は、これらの分野の開発に携わっおいたす。これに぀いおは、デヌタ研究者、情報凊理技術者など、すでに倚くのこずを話したした。







りィキペディアに埓っお、このデヌタを凊理する分野の科孊者は、これらすべおの分野で基本的なトレヌニングを受けなければなりたせん。地球䞊の䜕人がこれらのスキルを持っおいたすかそんなにない。もちろん、助成金を受けお、地球䞊の倚くの倧孊は新しい科孊の開発プログラムを開始したした。これは朗報ですが、これたでのずころ区別できない状況は理想からはほど遠いです。







ビッグデヌタの民䞻䞻矩が勝利するず信じおいたす。私たちの目暙は、ビッグデヌタず分析の力を平均的なナヌザヌの手に移すこずができる瞬間をもたらすこずです。本圓の䟡倀が私たちによっお認識される唯䞀の方法は、ずころで、商業郚門ず個々の䌁業の䞡方に圓おはたりたす。誰もがツヌルやデヌタにアクセスしお、それがどのように機胜するかを心配するこずなく仕事をするこずができたす。







明日、゚レガントで䜿いやすいツヌルが登堎したいず思っおいたす。マシンにハヌドワヌクを任せ、同じ怜玢のような単玔なものが必芁です。私たちが垞に話し合っおおり、すでにペタバむト芏暡に䞀臎しおいる珟代䞖界での怜玢は、ただ理解できたせん。







これらすべおを理解しおいるので、分析を行いたい7぀のナニバヌサルコンストラクトに名前を付けるこずができたす。私たちは人、堎所、組織の䞖話をし、時間、出来事、特定の事柄、抂念を倧切にしたす。アナリストに求めおいるのは、Excelの関数を䜿甚するのず同じくらい簡単にするこずです。 Excelにアクセスし、そこで小さな方皋匏合蚈、暙準偏差、ブラケットを開き、倀のリストを遞択、ブラケットを閉じたすを蚘述しお、答えを取埗したす。そしお、それが正しいかどうかを確認したす。たずえば、人々のグルヌプを分析するための同様のツヌルが必芁です。たずえば、人々の぀ながりを確認する必芁がありたす。ブラケットを開き、名前のリストを入力し、ブラケットを閉じれば玠晎らしいこずです。そしお、私は䜕を受け取りたいですかそれが芋られる矎しいネットワヌクグラフ必芁なものに基づいお、さたざたな方法で人々がどのように接続されるか。



私はそれを䜿甚する人にずっお、これはすべお非垞に簡単になるず信じおいたす。そしお、私たちは、人々がこれらすべおのものを、予想倖の方法で䜿甚できるようにし、比范的単玔なビルディングブロックからたすたす耇雑な結果を埗るこずができるようにすべおを倉曎できるようにしたいず考えおいたす。







これはたさにアラブの春の参加者に蚀及したい堎合です。ここでは、時間の経過に䌎う気分を分析し、枩床分垃の地図の圢で地図に茉せたいず思いたす。そしお、Visioのように図を描くだけで、もう䞀方の端で䜕が起こるかを芋るだけで、すべおのナヌザヌにできるこずを望んでいたす。そしお、圌らにずっお可胜な限りシンプルにしたいず思いたす。







䞍泚意を匕き起こす遅延。これは速床に぀いおです。私たちの䞖界で重芁なのはスピヌドだけであり、商業的な芳点からも䜕でも意味するのはスピヌドだず思いたす。







私たちはすべおを高速にしたいので、埅ちたくありたせん。䜕よりもナヌザヌを倢䞭にさせるのは、ナヌザヌが埅぀ずき、䜕かが起こるずきです。だから、私たちは埐々にそれがすでに存圚する䞖界に移動しおいるず思いたす。 MapReduceに関連しおほがリアルタむムで実行される䜜業がありたす。柔軟で匷力か぀䜎速なMapReduceを取り陀き、柔軟で匷力か぀非垞に高速なMapReduceを䜿甚したいず考えおいたす。







このすべおをペタバむト芏暡のメモリアヌキテクチャず呌ばれる構造に転送しお、分散分析やこのタむプのその他のものに察凊できるようにしたす。これらの皮類のこずは、あなたが垞に読んでいる技術の倉化に぀ながりたす。







そしお、これらのプロセスは、新しい競合するアヌキテクチャの開発に぀ながり、䞖界で起こっおいるこずの順序を根本的に倉えるず考えおいたす。







そしお最埌に、すべおが䜕らかのコンテキストにありたす。あなたの文脈で-そしおこれは重芁です。なぜなら、これは私たちがそのように構築し、それを知芚するず信じおいる䞖界だからです。



他のすべおが他の誰かの抂念の範囲内になるため、それはあなたの抂念の範囲内になりたす。したがっお、すべおのりィゞェットの目的は、䜜業を適切に実行するために必芁なツヌルず機胜を䜿甚しお、WebTopを構築したり、WebTopに別の名前を付けたりできるようにするこずです。 「読み取りスキヌム」を䜿甚するずきにビッグデヌタの䞖界で生じたすべおの資料の目的は䜕ですかこれは、コンテキストから倖れたデヌタであり、そこから利益を埗る必芁がありたす。先ほど蚀ったように、ナヌザヌが収集した分析を、尋ねられた問題や質問のコンテキストで受け取りたいず思っおいたす。そうするず、実行された䜜業の芁件のコンテキストで、これらすべおが誀っお蚈算されたす。それが、私たちの䞖界での゚ラスティックコンピュヌティングのタスクです。

結論にいく぀かの考え。私たちの情報化時代は正午だず思いたす-倪陜が頭の䞊に高いずき、私はこの理由でこれを蚀いたす。







私たちはすでに、人類によっお蓄積されたすべおの情報を凊理する胜力に非垞に近い立堎に立っおいたす。センサヌに関しお人々を比范するずきに䜕が良いか知っおいたすか 24時間以内にたくさんのこずができたす。ここに座っお、メモを取り、写真を撮るか、聞くだけです。他の倚くのこずはできたせん。デヌタを生成するだけです。さお、これが事実です。そしおもしあなたが私を信じないのであれば、地球の総人口の7分の1ず撮圱されたすべおのデゞタル写真の35を含む私のFacebookの䟋に戻りたしょう。する。







無生物は合理的になりたす。それが合理的になるず、それは䜕ずなく悲芳的になりたす。コグニティブマシンが登堎するず、コンピュヌティングの3番目の波が珟れたした。ワト゜ンはその代衚䟋です。興味深いこずに、コグニティブマシンのWatsonは、最新のマシンず比范するず、IBM PC 8088ずほが同じです。埐々に、これらの機械は私たちの䞖界を根本的に倉え、医療、蚌刞取匕所での取匕、および海倖での情報分析の支揎にすべお携わりたす。







䞖界が政府よりも速く動き、法埋がそれに远随するこずは既成事実です。圌はあなたが圌に远い぀くこずができるよりも速く動いおいるに違いない。質問をするこずができたす、あなたの暩利は䜕で、誰があなたのデヌタを所有しおいたすかきっずこの問題を提起するに違いない。先ほど蚀ったように、それは私たちが期埅するこずさえできないペヌスで、そしお瀟䌚的な倉化を匕き起こしたす。そしお、これは非垞に興味深い䞖界を䜜りたす。私たちは時間を䜿い果たしおいるので、私はここでサむバヌ脅嚁に぀いお話したせん。どうもありがずうございたす。



[拍手]



モデレヌタヌ28:47



どうもありがずうございたす。それは驚くべきものでした。私たちは今、昌食に行く準備ができおいるず思いたす、そしお、誰でも近くのどこかであなたを芋぀けるこずができるず思いたす。CTO CIAのGus Hunt氏、ありがずうございたす。玳士よ、あなたのこずは知りたせんが、倕食埌に携垯電話を川に投げ蟌みたす。



性胜






プレれンテヌション









All Articles