iPi Softからのモーションキャプチャ

モーションキャプチャ （MoCap; モーションキャプチャ ）-俳優の動きを記録する技術で、コンピューターグラフィックスで使用されます。 人間（および動物）の体はかなり複雑であるため、3次元モデルを手動でアニメートするよりも、俳優の動きを記録して3次元モデルに転送する方がはるかに単純で、説得力があり、安価です。



ほとんどのモーションキャプチャシステムは、通常はスーツで、 俳優の体に取り付けられたマーカーまたはセンサーで動作します。 しかし、 クロマキーの助けを借りて動きをキャプチャする方法もあります-iPi Softチームのメンバーの1人（ダブナイノベーションスクールで優勝）のミハイルニコノフと話し、プロジェクトの詳細とその展望について話し合いました。



プロジェクトについて教えてください？



当社は、人の3次元アニメーションを作成するための技術を開発しています。 現在、これは3次元グラフィックスの重要な問題の1つであると考えています。





ミハイル・ニコノフ



なんで？



3次元アニメーションのレンダリングおよびその他の側面-物理モデリングさえも既に開発されているため、視聴者はレンダリングのさらなる進歩、さらなる努力に気付かない。 同時に、私はアニメーションの人間として、多くの映画、特に多くのコンピューターゲームでは、アニメーションの品質を改善する必要があると言えます。



モーショントゥイーンまたはフェイシャルトゥイーン？



顔と全身の両方のアニメーション。



また、特別なビデオカメラ、クロマキー、照明、センサーやマーカー付きスーツを使用して行われる従来の画像キャプチャよりも、どのような問題を解決できますか？



私たちは、アニメーターの最大の使いやすさの原則に基づいてシステムを設計しました。 私たちが連絡するすべてのユーザーは、モビリティが重要であることに注意してください。柔軟な撮影スケジュールは重要であり、事前にスタジオを注文する必要がなく、何かをやり直したい場合は、このスタジオを1か月待つ必要がありません。 まず、この問題を正確に解決します。アニメーターと3Dグラフィックスタジオに、必要に応じて各アニメーターに装備できるポータブルモーションキャプチャシステムを提供します。



どのように見えますか？



このシステムは、画像処理とコンピュータービジョンアルゴリズムを使用して、記録されたビデオから骨格アニメーションを読み取るビデオカメラとソフトウェアで構成されています。 システムはコンピュータにインストールしたソフトウェアのように見え、ユーザーは店でカメラを購入する必要があります。 Sony PlayStation Eyeカメラをお勧めします。このカメラの価格は30ドルで、電気店で販売されています。



マーカーはどうですか？



問題の事実は、マーカーを使用しないことです。これが私たちの決定の基礎です。 それが私たちのシステムの開発を始めた理由です。 マーカー付きのスーツ、センサー付きのスーツを倉庫に送りたいのは、創造的な自由を制限しているからです。



難しい撮影条件はどうですか？



私たちのシステムは、有名なモスクワのスタジオでテストされ、ラップトップとカメラが付属しており、最初に出会った部屋でキャプチャを行いました。 マーカーはなく、複雑な背景ですが、当社の技術は対処しています。



カメラを移動していますか？



移動中のカメラを使用することはまだできません。当社の技術はそれほどテストされていません。 320x240の低解像度カメラであっても、多くの利点がありますが、非常に高品質のアニメーションが得られます。 そのため、640x480をお勧めします。







おそらくフレームレートは非常に重要ですか？



はい Sonyカメラは毎秒最大60フレームをサポートするため、正確にお勧めします。 さらに、複数のカメラを使用することをお勧めします。 現在、3つまたは4つのカメラをお勧めしますが、最大4つまでサポートされています。 最新のコンピューターでは、同時に6台のカメラで撮影できるため、6室のキャプチャに取り組んでいます。



また、シングルチャンバーバージョンで作業を行います。Microsoftは3次元カメラをリリースし、画像キャプチャはさらに簡素化されます。



キャプチャはリアルタイムで行われますか？



まだです。 実際、アルゴリズムにはコンピューターの多くの計算能力が必要です。システム内のすべてのプロセッサーコアを使用し、計算にはビデオカードを使用します。これはGPGPUと呼ばれます。 そのため、最も強力な最新のコンピューターでさえ、これまでに1秒あたり2フレームの速度に達しました。 しかし、もちろんこれは時間の問題です-昨年はアルゴリズムを4倍に加速し、コンピューターの速度は約2倍に増加したため、来年はビデオ処理を高速化し、リアルタイム処理を行います遠くない。



今後の予定は？



今、私たちは旅の始まりです。 もちろん、私たちはこの技術を改善しますが、成熟するためにはその開発に数年かかります。 関連技術に取り組んでいるのは秘密ではありません。 現在見ているのは、人間の俳優のモーションキャプチャです。 人間は複雑な生き物であり、演技は重要であり、コンピューター上で演技をモデル化することはほとんど不可能です。 動物の場合、その反対は真実です。コンピューターでシミュレーションする必要があると考えています。 これは、いわゆる動きの統合です。 現在、遺伝的アルゴリズムを使用して動物やモンスターのアニメーションを現実的にシミュレートできる技術のプロトタイプを作成しています。仮想ラボでは、いくつかの生き物を繁殖させ、さまざまな状況で結果の生き物のアニメーションを記録できます-たとえば、アニメーション食物のために動く群れ、または捕食者の攻撃。



胞子を振り返ることなくしませんか？



たぶん、Sporeは多くの人にとって失望していると言わざるを得ないが、著者はゲームを大幅に簡素化し、オリジナルのアプローチを放棄しました。彼らは生物学的要因や物理法則さえ考慮せずに、より正直にクリーチャーをモデル化し、よりかわいいものにしたいと考えていました。 同時に大きな質量を持つクリーチャーが存在する可能性がありますが、同時に速いものが存在する可能性があります-これは人生では起こりません。 あなたは大きな質量を持っている場合-あなたは抜本的な象ですが、速度のためには、チーターのようにコンパクトで薄くする必要があります。







ちなみに、画像キャプチャテクノロジーをご自身でお試しいただけます 。 最新のラップトップはビデオの録画に適していますが、処理にはWindows OSを搭載した強力なデスクトップコンピューターをお勧めします-おそらく、アニメーションをすばやく処理できるゲームコンピューターです。



* * *



私たちは、パリのパノラマビューのプロットからすでにおなじみのアナトリー・ベリコフに 、iPi Softの開発についてコメントするように依頼しました。 専門家がiPi Softキャプチャシステムについてコメントする方法は次のとおりです。「1つありますが、」。 このプログラムの主な利点は、マーカーなしの作業です-その主な欠点。 実際、従来のモーションキャプチャデバイスは、空間内のマーカーの動きを追跡するだけです。 プログラムは追跡対象を認識していないため、このようなデータのさらなる使用は自動化されません。 結果のアニメーションは、仮想オブジェクトに手動で「ねじ込む」必要があります。 これにより、すべての困難にもかかわらず、何かの動きを追跡することができます。 顔、俳優の手の中、猫、犬などにマーカーを貼り付けることができます。また、家庭用カメラを使用してマーカーを光学的に追跡するプログラムは長年にわたって使用されています。 したがって、iPi Softテクノロジーはこれまでのところ、人間の俳優の動きをキャプチャすることに限定されていることを理解する必要があります。 しかし、もちろん、私は間違いなくそのような技術を使用します、これはブレークスルーです。 」



* * *



ps：新しい映画：







HabréでIntelの読者の仲間入りをしてください。

Intel Galaxyの一部を引用した記事



頑張って！