Linuxでの偽のChatroulette-Windowsよりも柔軟

CRのようなサービスについては皆さんご存知でしょう。CRは今日インターネット上で十分に離婚しています。 これらのサービスのユーザーの基本的な振る舞いは、控えめに言っても気のめいるようです。 いいえ、もちろん、次のボタンをアクティブにクリック/押すことで破壊されるキーボードとマウスのメーカーにとっては非常に有益ですが、私見では、脳を通常のホモサピエンスに吹き飛ばし、創造的なかゆみを引き起こし、完全な対称性を破壊するアクションが必要です証拠を示す人々の行動の均一性。 さらに、76,800ピクセルもの広告スペースがあります。 一般的に、あなたはそれについて何かをする必要があります。 また、このテキストでは、Linuxでこれらのこと（チャットルーレットで任意のビデオストリームを起動することを目的としたケース）を開始する方法についてのストーリーを紹介しています。 さらに、（1）ddを使用してバッファリングする方法、（2）ffmpegを使用して画面またはビデオ画像の任意の領域を取得する方法、（3）vloopbackとavldの違い、（4）の効果Atomのさまざまなスレッドにプロセスを修正する、（5）ビデオ編集にXvfbを使用する、（6）1つの社会実験について、（7）何か他のことを学びましょう。







1. Linux



一般に、もちろん、manycam.comのようなユーティリティをダウンロードして、Windowsの一部の機能にアクセスできます。 しかし...これらの可能性は、多様ではありますが、このプログラムの作者とプラグインの作者の意志によって制限されています。 これらのプラグインを書くのはそれほど簡単ではありません。 そして、情報処理の哲学として、これらのタスクにLinuxとunixwayが優れているのは、さまざまな程度のfun'ovityのあらゆる種類のフィルターを非常に簡単かつ柔軟に結合し、最終的に興味深い結果を得ることができるということです。 より多くの自由があるので、Linuxでは以下のすべてが展開されています。 しかし、もちろん、Windowsユーザーも、少なくとも同じManyCam.comの助けを借りて、さまざまな種類のチャットルーレットの闘争に参加する必要があります。



2. avldおよびvloopback



最初に行うことは、これらすべてのチャットルーレットが機能するフラッシュプレーヤーとのビデオインターフェイスを確立することです。 Linux上のFlashplayerはvideo4linux（2）サブシステムのビデオデバイスを理解するため、このような仮想デバイスを整理する必要があります。 これは、特別なドライバーを使用して実行できます。 それらの多くは荒野にありますが、私は個人的にはavldとvloopbackのみを動作させることができました。 多かれ少なかれ、カーネルバージョン2.6.33.4でも動作します。 別のプラスは、これらのドライバー（私の知る限り）がUbuntuリポジトリに含まれていること、そして（確かに）AUR Arch Linuxにあり、おそらくGentooにもあることです。したがって、システムに正しくインストールするのは簡単です。 ：自己組み立てを行う必要はありません。 これらのパッケージをインストールする方法を説明する時間を無駄にしませんが、すぐに質問の答えに戻ります：なぜ2つのドライバーについて話しているのですか？



答えはこれです。 ほとんどの楽しいシナリオでは、avldで十分です-冬のフェルトブーツのように非常に使いやすく、信頼性が高いですが、重大な欠点があります：avld（これまで）は多くのビデオデバイスをサポートせず、1つの仮想v4lデバイスのみが作成されますドライバーのダウンロード、これは十分ではありません。 vloopbackを使用すると、多くのデバイス（ビデオパイプ）を作成できますが、同時にFlashplayerをブラウザーでしっかりと一時停止することができ、かなりシャーマニスティックなシナリオに従って使用する必要があります。 もちろん、複雑さを気にせずにvloopbackのみを使用することもできますが、もう1つの重大な欠点があります。このビデオストリームを読み取るプロセスが受信できる速度でビデオストリームを生成し、fpsはまったく制御されません。 ビデオストリームプロセスが生成されている場合でも、フレームを生成することはほとんどありません。この場合、vloopbackはしばらくの間同じフレームを生成します。 そのため、vloopbackデバイスを使用する場合、fireplayerを介したfirefoxは100％CPU豚になります。 したがって、ラップトップでvloopbackを楽しんでいる場合は、プロセッサを省電力モードにするのが理にかなっています。そうしないと、システムはあまりメリットなくウォームアップします。



avldでは、fpsを設定できます。これにより、flashplayerのCPUの大食いが制限され、ビデオを制御する追加の機能があります。



それで、ドライバーをインストールしました。次に何をしますか？



1.1。 avld



まず、ドライバーをダウンロードする必要があります。 チームでもっとうまくやる

  modprobe avld幅= 320高さ= 240 fps = 30 

その後、デバイス/dev/videoN



がシステムに表示されるはずです。ここで、番号Nはシステム内の既存のv4lデバイスの数に依存します。 理論的には、Linuxディストリビューションの標準によれば、 video



グループのユーザーはこのデバイスへの読み取りおよび書き込みアクセス権を持っている必要があるため、必ず自分自身を追加してください。



モジュールパラメーターに示されている番号が明確である必要があります。また、avldのドキュメントには、 /dev/videoN



新しい構成を書き込むと、これらのパラメーターを実行時に変更できることが記載されています。

  echo 'width = 640 height = 320 fps = 15'> / dev / videoN 

しかし、この方法では設定を変更できませんでした。 ただし、モジュールをリロードするだけで変更できます。



モジュールを必要なパラメーター（およびflashplayer 320x240 25fpsの場合、他のサイズでも動作します）で読み込んだ後、すぐにブラウザーを起動し、chatroulette.comにアクセスし、右マウスボタンでフラッシュプラグイン領域を突いて、設定に表示されるカメラを選択できます（その名前は「ダミービデオデバイス」という単語で始まります）。



カメラの電源を入れると、ほぼ自分の作品の黒い四角が見えるはずです。 ペイントで塗りつぶすには、生の画像を順番に書き込む必要があります。つまり、ピクセルの色をdevice /dev/videoN



エンコードする一連の値だけを書き込む必要があります。 次の方法で実行できます。

  ffmpeg -an -i some_video.avi -f rawvideo -s 320x240 -pix_fmt bgr24-|  dd obs = $（（320 * 240 * 3））of = / dev / videoN 

つまり、特定のビデオファイルが取得され、そこからビデオストリームが抽出され（ -an



にオーディオトラックに注意を払わないように指示します）、適切なサイズの生画像のシーケンスにデコードされ、ピクセルに関する色情報の望ましい形式で、ブロック全体に記録されますサイズ（320 * 240 * 3）バイト、avld。



ffmpegからストリームをすぐに/dev/videoN



と、対応するファイル記述子を使用してwrite



個別の呼び出しによってavldが各フレームを完全に提供し、ffmpegがその出力をそれぞれ数キロバイトで小さな部分に書き込むため、 、avldはフレーム全体を受け取ると考えますが、同時に小さな断片のみを受け取ります。そのため、何らかのおridgeを配ります。 上記を修正し、ddを使用して、obsオプションは、出力ファイルでデータを出力するブロックを指示します。 つまり、ここでddは、フレームに関する完全な情報を蓄積するバッファーとして使用され、それをavldの不可解なブロックとして吐き出します。



実際、すべてがavldにあります。 /dev/videoN



何でも書き込むことができます。 また、avldが最後のフレームを記憶し、このv4lデバイスからのビデオストリームを消費するアプリケーションにそれを提供することも役立ちます。 したがって、 /dev/videoN



に1枚の写真を記録することができ、チャットルーレットの住民のあまりはっきりしない視線の前に表示されます。



ところで、はい。 MEncoderは、ビデオデコードの結果をフレームごとに生形式で書き込むため、ddなしで使用できます。



1.2。 vloopback



このことのインターフェースは、avldに比べてはるかに複雑です。 その理由は、vloopbackは偽のビデオカメラとしてではなく、リアルタイムビデオ処理用のパイプ（bashで|）のようなデバイスとして考えられていたためです。 この点で、このものにはかなり洗練されたオプションのセットがあり、かなり複雑なプログラムインターフェイスがあり、特別なユーティリティを使用してこれらの非常にビデオパイプのパラメーターを構成する必要があります。たとえば、ビデオをスケーリングできます（カーネル内で、はい... Linuxが発生します）変） しかし、vloopbackの複雑さをすべて理解するのではなく、楽しみを得ることが目的であれば、簡単な方法で行動できます。



もちろん、最初に、モジュールをカーネルにロードする必要があります。



modprobe vloopback pipes=M







ここで、pipesパラメーターを使用してvloopbackを要求し、適切な数のパイプを作成できます。 ロード後、vloopbackは、対応するチャネルの入力および出力の名前が/dev



配置される場所を通知します。 この情報は次のように表示できます。

  $ dmesg |  grep vloop
 [vloopback_init]：video4linuxループバックドライバーv1.4-trunk
 [vloopback_init]：ループバック0登録、入力：video0、出力：video1
 [vloopback_init]：ループバック0、2つのバッファーを使用
 [vloopback_init]：ループバック1が登録され、入力：video2、出力：video3
 [vloopback_init]：ループバック1、2つのバッファーを使用 

各チャネルには/dev



2つの名前があり、v4lデバイスのふりをしています。もちろん、チャネルの出力であり、このデバイスのデータは入力に書き込まれます。 ただし、vloopbackチャネルへの書き込みプロトコルは、単純ではありますが、avldの場合のように簡単ではなく、チャネルに一連のフレームを書き込むには、 mjpegtools_yuv_to_v4l



という名前のユーティリティを使用する必要があります。 このパッケージはリポジトリとAUR Arch Linuxにはないので、個人的にこのユーティリティをソースからコンパイルする必要がありました。これは非常に簡単です：（1）ソースwww.filewatcher.com/m/mjpegtools_yuv_to_v4l-0.2.tgz.11065.0.0.html （ 2） make



実行しmake



。



これで、ビデオストリームをvloopbackチャネルに送信する準備がすべて整いました。 ただし、vloopbackには穏やかな処理が必要であるため、何もハングしないようにするには、いくつかのルールに従う必要があります。 まず、最初にビデオストリームを最初にvloopbackで開始してから、ビデオデバイスからデータを読み取るアプリケーションを実行する必要があります。 動作を停止するには、最初に読み取り、およびデータをvloopbackチャネルに書き込むアプリケーションを閉じる必要があります。 要するに、スタックのように。



さらに、vloopbackでは、ピクセルのジオメトリと表示形式を調整する必要があります。これは、mplayerを使用して実行できます。 そのため、最初にvloopbackチャネルへのビデオストリーム：

  ffmpeg -an -i some_file.avi -f yuv4mpegpipe -s 320x240 -pix_fmt yuv420p-|  mjpegtools_yuv_to_v4l / dev / video0 

この場合、flashpluginのあるブラウザーは起動しないでください。 チャットルーレットを開く前に、ビデオチャネルの出力側を構成/確認する必要があります。 これは、mplayerを使用して実行できます。

  mplayer tv：// -tv 'driver = v4l：width = 320：height = 240：device = / dev / video1' 

mplayerを完了すると、チャットルーレットを使用してブラウザーを起動し、新生児の仮想カメラを選択できます。 覚えておいてください：何もハングしないように、最初にブラウザを閉じる（またはflashpluginを無効にする）必要があります。その後、チャンネル内のフレームの記録を停止します。



2.コンテンツ。



そのため、flashpluginによって認識される仮想カメラは、その方法が知られています。 しかし、それらを埋める方法-それが問題です。 一般的に、これをすべて始めたとき、私はチェックしたい鋭い欲求がありました：私の顔が曲がっているか、これらのシャトールで人々が常に次のボタンで突くためにそこに座っています。



したがって、私が最初にしたかったのは、2人のユーザー間の「中間者」になること、つまり、最初から2番目のビデオストリームをブロードキャストすることでした。 おそらく、事前にロードされたライブラリを介して、このビデオストリームの背後のflashpluginにアクセスできますが、長くて困難です。 画面から完成した写真を撮る方が簡単です。 ffmpegはこれに役立ちます（avldの場合）：

  ffmpeg -f x11grab -s 320x240 -r 15 -i：0.0 + x_offset + y_offset -f rawvideo -pix_fmt bgr24-|  dd obs = $（（320 * 240 * 3））of = / dev / videoN 

-r



パラメーターは、fps（画面からフレームを取得する頻度）を設定します。 そして、正しいパラメータx_offsetとy_offsetを数回選択すると、目的の相互翻訳を達成し、それによって気分を台無しにすることができます。なぜなら、彼らは目の前に誰がいても（これは、これらのすべてのシャトールが、いくつかのボタンのより速い着用を望んでいるマウスとキーボードのメーカーの陰謀であるという仮説を生み出します）。 おそらく、この行動はニュートンの第二法則の社会的類似物の現れであり、身体が力のない状態で（環境の対称性の条件で）直線的かつ均一に動くときです。



しかし、別の問題が発生します：人々の注意を引く方法（できれば、女の子の注意）。 一般的に、良い点は、デスクトップの翻訳（チームの始まりであるトピックにあまり詳しくない人にとって）です。

  ffmpeg -f x11grab -s 1680x1050 -r 15 -i：0.0 ... 

たとえば、チェスのゲームが公開されているか、多少なりとも知的です。 もちろん、デスクトップには、明るく思慮深い顔を投稿して、別のウィンドウに実際のカメラからのビデオストリームを表示することもできます。

  mplayer -nosound tv：// 

しかし、非プロダクションウィンドウが干渉するため、メモリ内のさまざまなビデオストリームをオーバーレイし、それらを仮想Webカメラに送信したいという要望があります。 もちろん、これを行うユーティリティを見つけることもできますが、X-Window自体が何かに何かを課す良い機会を提供することを思い出すこともできます。



3. xvfb



仮想フレームバッファに描画できるように、これはバッファです。もちろん、最初に作成して実行する必要があります：

  Xvfb：1画面1 640x480x32 

これにより、新しい画面1で仮想ディスプレイ1が作成されます。解像度と色の深さは、どの画面で明確になるはずです（Yodaマスター）。 まあ、それだけです。 さらには明らかです。 デスクトップのビデオストリームをこの仮想ディスプレイに送信できます。

  export DISPLAY =：1.1;  ffmpeg -f x11grab -s 1680x1050 -r 15 -i：0.0 -f yuv4mpegpipe -pix_fmt yuv444p -s 640x480-|  ffplay -f yuv4mpegpipe- 

初期化時のffplayはDISPLAY環境変数を参照し、どのXサーバーが描画されているかを理解します（ここではyuv4mpegpipeを使用してパイプの受信側でより少ないキーを記述しますが、色をyuv444に変換してから、写真はCPU負荷を増加させるため、-f rawvideoを使用する方が効率的ですが、ピクセル形式とフレームサイズをどこでも指定する必要があります）。 次に、この混乱にビデオ画像をオーバーレイできます。

  mplayer -nosound tv：// -tv 'width = 160：height = 120' -display：1.1 -geometry + $（（640-160-10））+ $（（320-120-10）） 

さて、ビデオストリームを仮想ビデオカメラに送信します。

  ffmpeg -f x11grab -s 640x480 -r 15 -i：1.1 -f rawvideo -s 320x240 ... 

わかりました。現時点では、写真の中に写真があります。チェスの能力などを他の人に示すことができます。 など しかし、残念ながら、現実は過酷でポルノ的なものです。 チャットルーレットに住んでいるほとんどの人（女の子を含む）は、カップルがウェブカメラの前で恋をするビデオシリーズに夢中になっています（ええ、人々はのぞき見が好きです）。



4.切り抜き



しかし、インターネットで入手できるこれらのビデオのほとんどは...



（ところで、Firefoxのフラッシュメディアからビデオを引き出す簡単な方法は次のとおりです。現在、flashplayer-10.0.42.5はこのようなビデオコンテンツで動作します。ブラウザのキャッシュからビデオのダウンロードを開始し、ビデオのバッファリング中に対応するファイルがキャッシュにありますfirefox、しかし、バッファリングが終了すると、ファイルは削除され、開いたままになり、flashpluginはそれを読むことができますが、もちろん、あなたはこのファイルをディスクに保存するためのLinux OIDです、あなたはそれへのハードリンクを作成する必要がありますしたがって、ビデオを保存する場合は、それを使用してページを開き、id そのハードリンクコマンド作る性質のものとすべてが、所望の映像を削除しますブラウザのキャッシュをきれいに、 ln



私が見つけたあなた- 、よく、すべてを。



そのため、インターネット上の疑わしいコンテンツのほとんどのビデオには、見ている人の錯覚を破壊しないように、さまざまな異なるロゴとランニングラインが付いています。 もちろん、全体像からきれいなビデオ素材を切り取って、それらを取り除く必要があります。 これには、ffmpeg-トリミングビデオフィルター（Nashenskyのトリミング）が適しています。 しかし、このフィルターはひどく機能し、次のように記述した場合：

  ffmpeg -an -i some_video.avi -vf crop = 32：32：400：300 -f rawvideo -s 320x240 ... 

次に、座標（left_up-right_low）（32.32）-（432.332）のボックスが320x240フレームに収まらない、つまりffmpegが最初にフレームを拡大縮小してからトリミングフィルターを適用しようとするという事実にscられます。 もちろん、 bc -l



を実行し、適切なサイズのきれいな画像を取得するために必要なすべてを計算できますが、これは面倒です。代わりにパイプラインを使用できます。

  ffmpeg -an -i some_video.avi -vf crop = 32：32：400：300 -f yuv4mpegpipe-|  ffmpeg -f yuv4mpegpipe -i--f rawvideo -s 320x240 -pix_fmt ... 

さて、ここでみんなにこれを言うことができます：あなたの注意、チャットルーレットのオープンスペースでの幸せなビデオ創造に感謝します。 しかし、私はまだ実践的であり、長い間、Habréには書きませんでした。



5. Atomユーザー。



一般的に、これらすべてのエンターテインメントでは、最も強力ではないAthlon II X2の一部のパフォーマンスで十分です。 この時点でも、p720解像度でいくつかの映画を（同時に）見ることができます。 しかし、今ではシングルコアのAtomがこれをひどく引っ張っていて、どうにかして余分なfpsを絞り出したいと思います。



そして、ここでは、ハードウェアスレッドの対称性にもかかわらず、さまざまなプロセスグループのアフィニティ設定が役立ちます。 これはおそらく、スケジューラがハードウェアスレッドを完全に等しいエンティティと見なして区別せず、それらの間でプロセスを自由にスローするという事実によるものです。 しかし、結局のところ、これらのスレッドのTLBは異なるはずです。 また、プロセスがスローされると、これらの同じTLBの強制切り替えが発生します。 firefoxの実行がffmpegと混ざり合っている場合、x86アーキテクチャ内で切り替えを行うには、TLBを完全にリセットし、新しいデータでリロードする必要があります。



したがって、あなたが釘を打つと生産性がわずかに向上します

  taskset -c 1 firefox 

firefoxを2番目のスレッドに、すべてのビデオの処理に関連するすべてのプロセスを最初のスレッド（番号0）のスレッドに追加します。 この方法で、1秒あたり2〜3フレームを獲得できます。



6.オーディオ。



しかし、ALSAから仮想マイクを構築することはできませんでした。 これは、ALSAにはaloopと呼ばれるネイティブループバックドライバーがあるという事実にもかかわらずです。 そして、それは本当に期待通りに機能します：そのチャネルの1つに書き込まれたすべては、対応する他のチャネルから読み取られます。 ジャックサーバーはそれでうまく機能し、さまざまな方法でさまざまなアプリケーション間でサウンドを転送できます。 しかし、このaloopから仮想マイクのように見えるものを構築することはうまくいきませんでした。 しかし、おそらく、可能性はありますが、私はこれらのALSA木製構成を理解する忍耐と時間を持っていませんでした。



そして、これはチャットルーレットのオープンスペースでの音声広告への道を開くでしょう。 誰かがこれで出てきたら、Habréに関する記事を書いてください、私はそのためにカルマを使うことを約束します:)



7.それで終わりです。



退屈でも退屈でもなかったことを願っています。 楽しんで、そしてすべて。