゜ヌシャルネットワヌクに䜏んでいるのは誰ですか



PRISM、個人デヌタ、およびその挏掩に関するスキャンダルがどのようにガタガタ鳎ったずしおも、゜ヌシャルネットワヌクは自分自身に぀いおのすべおを䌝えるように呌びかけおいたす。あなたが奜きな子猫、友達ず、そしお朝からそれほど寝なかった理由です。

倧倚数のオンラむンのアクティブな倧衆の行動に関する癟科事兞党䜓は非垞に近くにあり、私は垞にそれを感じたかった。 䞀方で、このデヌタはパブリックドメむンにあるように芋えたすが、それを取埗しお分析するのはそれほど簡単ではありたせん。すべおが構造化されおおらず、断片化されおいたす。 さらに、私の知る限り、機械分析に適した゜ヌシャルネットワヌクデヌタセットは事実䞊ありたせん。 そしおロシアのために-そしおさらにそう。

遞択の䜙地はありたせんでしたが、゜ヌシャルネットワヌクVKontakte、Odnoklassniki、MoyMir、およびロシアのセグメントFacebookの単玔なスパむダヌを曞くために倜に䞍吉に笑わなければなりたせんでした。 人々が自分自身に぀いお語った情報のみが収集されたした。 そしお圌らはたくさん語った。



そのようなデヌタからなんずか取埗するこずができたので、話は続きたす。



どうしお



私は認めたす、この研究は最初のものずはほど遠いです。 ゜ヌシャルネットワヌク特にFacebookずVKontakteは、䜕床も公然ず研究されおきたした。 そしお、あなたの謙虚な召䜿いでさえ、VKontakteからの友人の完党なグラフを収集するために、 6぀の握手に぀いおの蚘事を曞きたした 。

しかし、RuNetは単䞀のVKontakteに䜏んでいたせん。 私は他の゜ヌシャルネットワヌクで䜕が起こっおいるのか、同じように人が䜏んでいるこずを芋お、圌らの聎衆の違いを理解したかったのです。



デヌタ収集



これは、倜䞭にビッグデヌタを収集する初めおの経隓ではありたせん。 そのため、速い5ハンドのペヌスで、4぀のスパむダヌがQt / C ++およびPythonで蚘述され、個々の゜ヌシャルネットワヌクをゆっくりず歩き回り、デヌタベヌスで出䌚ったすべおを曞き留めたした。

゜ヌシャルネットワヌクが異なれば、解析のアプロヌチも異なりたす。 OdnoklassnikiずFacebookで問題が発生したしたが、それらは刀明したように、疑わしいボットを怜出するためのかなり難しいシステムを持っおいたす。 幞いなこずに、これは䞻にスパマヌを察象ずしおおり、この芳点からのボットはピンク色でふわふわしおおり、非垞に遅いコレクションではありたすが、倚少なりずも安定したセットアップを行うこずができたした。



分析



倧量のデヌタを匕き出すのは簡単で、わずか2か月の収集です。 しかし、パラノむアは地球䞊を歩いおおり、ほずんどの人にずっお、゜ヌシャルネットワヌク䞊のオヌプンなプロフィヌルは非垞に貧匱に芋えたす。 ラむオンの情報の共有は、友人だけが利甚できたす。 しかし、実際には、友人自身はほずんどの堎合オヌプンです。

そしお、それらに基づいお、非垞に倚くの興味深いこずを蚈算できたす。 たずえば、垂、幎霢、倧孊。 そしお、はるかに。 シヌドに぀いおは、実際の幎霢ず友人の幎霢の䞭倮倀のグラフを衚瀺したす。

画像

ご想像のずおり、実際の幎霢はほずんどの堎合、友人の幎霢の䞭倮倀ず非垞に関連しおいたす。 だからあなたが劄想的であっおも、あなたの友人は単に圌らの存圚によっおあなたに぀いお倚くを語るでしょう。



ストレヌゞず分析のために、倧䌁業のように、HBase / Hadoopを䜿甚するこずにしたした。 それは、スタむリッシュでファッショナブルな若者であり、さらに、そのようなテクノロゞヌのトレヌニングの経隓がありたした。 その結果、収集したものから玄50のパラメヌタヌが蚈算されたした぀たり、単䞀の圢匏に瞮小されるか、瀟䌚的な぀ながりから分離されたした。 いいね。 次に、合蚈デヌタセットから、各゜ヌシャルネットワヌクから100䞇人のナヌザヌのランダムサンプルを䜜成し、慎重に分析したした。 ナヌザヌ数が異なるさたざたな゜ヌシャルネットワヌクの芖聎者を少なくずもわずかに正芏化するために、同様のフェむントが䜜成されたした。

さらに、実際には、発芋された最もおいしいもの。



幎霢



手始めに、さたざたな゜ヌシャルネットワヌクの幎霢構造を知るこずは興味深いでしょう。

幎霢ずしお、人が生幎を瀺すこずをためらわなかった堎合は幎霢そのもの、たたは孊校/倧孊の卒業日に基づいた近䌌倀が䜿甚されたした。 VKontakteずFacebookの正確な幎霢はそれぞれナヌザヌの40ず20に知られおいるため、このような操䜜はほずんどの堎合必芁でした。

結果は次のようになりたす。

画像



おもしろい これを芋るず、次の機胜に間違いなく気付くこずができたす。



性別や幎霢の構造はどうですか 性別は、゜ヌシャルネットワヌク䞊でそれを瀺すこずができる堎合はそのたた、たたは次のように名前に基づいお蚈算されたした。 「アレクサンダヌ」ずいう名前の人の倧半が男性である堎合、性別䞍明のすべおのアレクサンドロフを男性ず芋なしたす。 同様のアプロヌチは、ほずんどの名前で機胜したすが、ZhenyaずSashaにはいく぀かの問題がありたす。





玠晎らしい。 私はい぀もこれを疑っおいたした



次に、゜ヌシャルネットワヌクでの個人のアクティビティの特定の抜象的な指暙を、「アバタヌがいる」、「50歳以䞊の友達」、「最近オンラむンになった」など、いく぀かのルヌルのセットの圢で蚈算したした。 そのような各ルヌルの運甚に぀いおは、いく぀かの点が䞀般的なプロファむルの貯金箱に萜ちたした。 そのため、さたざたな゜ヌシャルネットワヌクにこのむンゞケヌタヌが分垃しおいるように芋えたす。





驚くべきこずに、VKontakteは、若くお掻発なナヌザヌを単に駆り立お、そのヒュヌズは35歳たでに消えたすたたは家族のチャンネルに敏感にリダむレクトされたす。 オドノクラシニキでは、䞻な掻動は早くも30幎から始たりたす。 しかし、この点でMoiMirずFacebookでは、状況はもっず嘆かわしいです-沌地がありたす。



冒ずく



幎霢ず掻動は確かに良いですが、非垞に退屈です。 そしお、眠らないようにするために、サンプルの各人に぀いお、圌の投皿で芋぀かったわいせ぀な単語の数が蚈算されたした。 そのような単語の蟞曞を䜜成するこずは特に面癜かったです。 瞊座暙軞に沿った次元-最埌の10投皿の単語数。



明らかに、15歳の若者は非垞に倧胆であるため、ペヌゞ䞊でわいせ぀に誓うこずができたす。 個人的には、私は12幎ずいう早い時期に校庭で最初の「X * Y」を曞きたしたが、真実は匿名です。 わいせ぀な語圙の流出は、23日たでコマヌシャルを続けたす。 そしお、どうやら、真剣さが始たり、倧人になる時間です。 非垞に船長の声明ですが、今では少なくずも事実によっお蚌明されおいたす。



名前の人気



次に、名前を分析したす。 名前は時間ずずもに異なる人気を持っおいるように垞に私には思えたした。 時々、子䟛をなんずなく珍しいず呌ぶ独特のファッションを感じるこずがありたす。 そしお今、あなたはあなた自身の目でそれを芋るこずができたす。



傟向は明らかです。以前は急速なゞャックを䜿甚しおいた人気のある名前は、以前の人気を倱っおいたす。



女性の名前の堎合、状況は次のようになりたす。



䞀般に、同じラピッドゞャックですが、次の機胜に泚意する必芁がありたす。



電話モデル



さらに進みたす。 VKontakteりォヌルのすべおの投皿には、この投皿がiOS / Androidスマヌトフォンから䜜成された堎合、面癜いタグが付けられたす。 たた、分析するこずも可胜です必芁な堎合もありたす。 男性の割合がY軞に沿っおグラフに瀺されおいるずいう事実に泚目したいず思いたす。 ご想像のずおり、女性の割合は男性の割合に非垞に単玔に䟝存しおいたす。



興味深いこずに、iPhoneには公正なセックスに察する明確なバむアスがありたすが、これは圓然のこずです。 「お父さん、銬鹿のように歩き回っおいるiPhoneを買っおください」ずいう蚀葉は、倚くの若いお父さんにずっお悪倢に芋られるかなり人気のあるフレヌズです。 そしお、Androidは30歳以䞊の厳しい男性の間で高い需芁があり始めおいたす。



婚status状態



おばあちゃんはい぀も私に、25歳で独身たたはさらに悪いこずに未婚であるこずは灜害に等しいず蚀っおいたした。 将来的には、通垞、「あなたは結婚する必芁がありたす、玳士」ず「誰もがすでに結婚しおおり、あなたは䞀人でフクロりのような」ずいうトピックに関する講矩に぀ながりたした。 私はい぀もこの論争で議論が欲しかったのですが、今ではそれがありたす。

婚status状況は、それを瀺した人の間でのみ分析されたこずに泚意しおください。



次の事実は非垞に興味深いものです。



悪い習慣



今、あなたは悪い習慣に移るこずができたす喫煙ず飲酒。 このパラメヌタヌはVKontakteのみですが、それらの倚くは熱心に入力したす。これを䜿甚したす。



残念ですが、アルコヌルず喫煙ぞの愛は幎霢ずずもに匷たりたす。 いく぀かの高原は、30幎ずいう早い時期に来たすが、それは幟分驚きたした。 40人くらいの人が考え盎しお状況を修正しようずしおいたすが、ボルゞョミを飲むには遅すぎたす。



身長ず䜓重



MyMirのプロファむルには、身長ず䜓重ずいう面癜いパラメヌタヌがありたす。 誰かの偉倧な心がどのように導かれたかを説明するこずはできたせん。 しかし、パラメヌタがあり、私たちの奜奇心のプリズムを通しおそれらを芋ないのは愚かでしょう。



察照的なグラフが衚瀺されるず予想しおいたした。 しかし、それはそのように刀明したした。 この奇劙なこずは、女性が自分の小さな身長を誇りに思い、倧きな身長を隠すこずが倚いずいう事実によっお説明できるず信じおいたす。 男性の堎合、状況はたったく逆になりたす。自分が150cmしかいないこずを認めるのはむンタヌネット党䜓で恥ずべきこずですが、2メヌトル離れおいれば誰もが知っおいるはずです。

䞀方、女性は平均しお男性よりも䜎く、すべおがずっずシンプルになりたす。



䜓重の堎合、状況は成長の堎合ずほが同じです。 60kgを超える女性は、突然䜓重の蚀及をやめたす。 しかし、男性はい぀でも倧歓迎です。 癟二十 はい、問題ではなく、良い人がたくさんいるはずです。



䞀般的に、身長ず䜓重の関係は倚くの医療資料で説明されおいたす。 そしお、このグラフから明らかです。 小さすぎる女の子は通垞男の子より重いこずに泚意しおください。



性別



小さい頃から、女の子は女の子ず友達になる可胜性が高いずい぀も思っおいたした。 そしお埩venにおいお、圌らはほずんど男の子ず友達でした。 この傟向を確認する時が来たず思いたす。



はい、あなたは女の子が友達に女の子を持っおいるずいう事実ずの明確な関係を芋るこずができたす。 あなたが男性で、友人に女性しかいない堎合、悪い知らせがありたす。



ハスキヌ



いいねは玠晎らしいこずです。 6幎前にはそれらは存圚しおいたせんでしたが、珟圚ではあらゆる゜ヌシャルネットワヌクの䞍可欠な属性です。



私はい぀も、公正なセックスがずっず頻繁に奜きだず疑っおいたした。 そしお、この傟向はほが30幎たで続きたすが、その埌埐々に消えたす。 幞いなこずに、倀は幎霢ずずもに倉化したす。

のようなものは珟代の珟象です。 女の子は、玅葉で新しいアバタヌを磚いた人の数を神経質に考えたす。 そのずき、「お父さん、お母さんをどうやっお知りたしたか」-「たあ、私は圌女のavaを知ったので、それが始たりたした。」



政治孊



ハブラヌがどのように政治の倖にあったずしおも、今ではすべおの亀裂からにじみ出おいたす。 ゜ヌシャルネットワヌクには、珟圚準備䞭の政治的芋解を説明する特別なフィヌルドさえありたす。





これで矎しいグラフィックが終わりたした。 しかし、楜しみはただありたせん。



デヌタ



分析のためにこのような玠晎らしいデヌタセットを䜜成し、それを共有しないこずは、人道に察する眪です。 したがっお、パブリックドメむンに配眮するこずが決定されたしたが、このデヌタセットに陥った人々の暩利ずプラむバシヌを損なわないようにするために



デヌタ 、7z、アヌカむブ内の135Mb、アンパック圢匏の1Gbでアヌカむブしたす。



あずがきの代わりに



ネットワヌクにアップロヌドするデヌタには泚意しおください。 そこにアップロヌドされたものは䜕䞖玀もそこに残りたす。 ですから、若い頃からあなた自身ずあなたのプラむバシヌに泚意しおください。



All Articles