ラベル Kinect の投稿を表示しています。 すべての投稿を表示
ラベル Kinect の投稿を表示しています。 すべての投稿を表示

2012年4月12日木曜日

kinect2台をPCに接続するときのドライバインストール手順について

■kinect2台をPCに接続するときのドライバインストール手順について

2012年4月現在、PCでKinect2台用いてモーションキャプチャする場合には、iPi Desktop Motion Captureを使うのが良いと思いますが、1台目のkinectを使用中にもう一台追加したい時、2代目をUSBに接続したけどドライバがうまく入らない、なんて場合があります。


そんなときは次のことを試してみるとよいかもしれません。



■kinectを2台接続するときには必ず1台毎にUSBのHUBが違うコネクタに接続する。
USBのコネクタが違っていても、HUB、つまり根元が同じだとうまくいかないことがあります。
そういう場合はHUBの違うUSBポートにそれぞれを接続してみましょう。

■一旦2台ともドライバをアンインストールする
デバイスマネージャから2台のドライバセンサーをすべて削除します。1つにつきドライバが3つ
インストールされていると思いますが、すべて削除します。 ?となっているのも削除です。

■Peimesenceドライバアプリも削除
プログラムの追加/削除 などでPeimesenceドライバアプリ自体も削除しておきます。
こうしないと後述するiPiRecoderからドライバがインストールできないためです。

■いったん再起動
おまじないかもしれませんが、私の環境ではこうするとうまくいきました。
■iPiRecorderSetup.exeからドライバをインストール
OS起動後iPiRecorderSetup.exeでKinextドライバをインストールしてみると
2台ともきちんとドライバが入っていると思います。

Kinectの目は無事にピカピカ光ったでしょうか。



先ごろ、PCを更新したのでkinectドライバを入れ替える際、1台目を誤って先に取り付けてPCを
起動してしまい、2台目でかなりてこずりました・・・。いやいや難儀なことです。

2011年11月27日日曜日

iPi Desktop Motion Capture 収録まとめ4 キャプチャー本番編

iPi Desktop Motion Capture 1.3.1.124のモーションキャプチャの手順と成果メモです。
今回いよいよ本番です。


以下の手順説明部分は結構 iPi soft wikiから引用してます。手順は一応守ってますが、
正確でない可能性があるのでこちらも参照してください。



■iPi Recroderでモーション録画
・最初の2-3s何も動かない環境を録画
・アクターがキャリブレーション時に取り決めた所定の位置と角度にあわせて立ち、Tポーズする
・1秒程度Tポーズした後、アクションする



取った動画がこれです。最初の数秒とTポーズするまでは省いています。
この動画ではkinect1台分しか流れてませんが、 収録動画は2台分の映像情報が収められてます。

動画を収録したらiPi Desktop Motion Captureでモーション解析に移ります。 iPi soft wikiには
iPi Desktop Motion Captureでアクターの身長設定をする方法や、キャラクターとアクターのマッチン
グをスムーズに行うためにいくつか方法が用意されています。

キャリブレーションの時にしっかりとアクターとキャラクターの位置関係を揃えておくと、ここに使う
労力をかなり減らせます。

iPi Desktop Motion Captureに動画を読み込み、キャラクターとアクターのマッチングを済ませたら、
あとはTrackFwardボタンを押してモーション解析が終わるのを待つだけです。

終わったのモーションは多少ガタ付いていたり、抜けがあったりするかもしれません。
手の抜けなどがあれば、腕を回転させるなどで修正できます。位置合わせする時にはIKではなくジョイントを
選択してFKで合わせるのが良さそうです。IKだと特に肘とかが変な場所へ行ってしまうことがありました。
許容出来るモーションになったら、最後にガタつきをsmooth3程度でスムージングすると丁度良くなります。

このレベルのモーションがキャプチャ出来ればガイドだけでなく、RIGに流しこんでの修正にも
使えると思いました。正直ここまで取れるとは思わなかったのでたいへん驚いています。

iPiは標準のbvhの他にも3DSMAX(biped),MotionBuilder,iClone,Blender,Endorphinに対応したbvhを
出力できます。softimageには標準bvhで読み込むのが良さそうです。

以上 iPi Desktop Motion Capture 収録まとめ でした。


次回前転してみる に続く

2011年11月26日土曜日

iPi Desktop Motion Capture 収録まとめ3 キャリブレーション編

iPi Desktop Motion Capture 1.3.1.124のモーションキャプチャの手順と成果メモです。
今回は収録前のキャリブレーション編

以下の手順説明部分は結構 iPi soft wikiから引用してます。手順は一応守ってますが、
正確でない可能性があるのでこちらも参照してください。

iPiはKinectを2台使う場合キャリブレーションが必須になりますが、撮影環境が保持できる場合や
ビス、テープやカメラ撮影しておくなどで、後日正確に再現できれば1度だけで済みます。
またキャリブレーション情報はiPi Desktop Motion Captureで編集/保存できるので、Kinectの部屋の中での位置を予め定規などで測っておけば後で正確に合わせることが可能です。



 Kinectを所定の場所に配置したら、iPiの環境を実空間と正確に合わせるキャリブレーションに入ります。

ここは、流れが把握できていれば、PCの性能にもよりますが5-10分程度で終了します。
2度目以降は環境変化がなければ必要ありません。

以下順番に手順をメモします。一部、個人の体験上よさそうだと思った事が加わってます。
特にアクターとキャプチャ後の仮想空間でのキャラとのマッチングを素早く行うため、
事前調整部分が必要なくなるように色々書き加えて見ました。参考程度ってことで。



・iPi Recorderを起動して2台のKinectを選択
・同心円上に配置した2台のKinectの中心にアクターが立つ
・ここで、仮想空間でのキャラとアクターとのズレをみるための仮素材を数秒録画する

・iPi Desktop Motion Captureを起動して仮素材の動画を開く
・iPi仮想空間内のキャラクターの初期位置とアクター位置のズレをメモなどで記憶する
・アクター位置、身体正面や手先の回転がずれていたら動画を元にアクター/Kinectの位置など調整
・調整が終わったらアクターは収録可能範囲から出て、リファレンスプレーンを持って待機

・iPi Recorderで録画開始。最初の数秒は2-3秒は何も動くものがない動画を撮り続ける
 
・アクターがリファレンスプレーンを持ってKinectの中心に立つ
・2台間の中点に正面を据えて、それぞれのカメラから板の正面が見えるのを確認する
 
・正面に板を据えてから、数秒かけて板を、体を中心にして左右20度程度回す
・なるべく板の黄色部分が少なくなるようにするのが正解
・板の黄色部分がほぼ無くなっている動画が5-10s収録できたらストップして録画終了

・iPi Desktop Motion CaptureにうつってCalibrationタブに移動しAngleのラジオボタンで適切な方を選択
・下のバーで最初の2-3s間をbackgroundで指定、また板をもってアクターが立ち、適切にキャリブレー
ションできた範囲の5-10s間をROIで指定して[Calibrate based ~]ボタンを押す
・数分待つとキャリブレーションが終了する。事前にメモした位置と大体合っているか確認する
・違いが5cm単位である場合は、メモに合うようにカメラを動かして調整する。キャリブレーションし直すより早い




・キャリブレーションがある程度満足行く内容になったら一旦設定を保存する。
・設定ファイルをロードすると実空間がiPi Desktop Motion Captureの仮想空間にほぼ一致する


キャリブレーションの流れはこんなでしょうか。精度は低くはないですが、予めカメラ位置や角度をメモして
おき、キャリブレーション後の仮想空間に展開しているカメラ位置とアクターの録画された震度マップがうま
く同一空間上に重なっているか確認できるようにすると手間が省けると思います。
メモした数値と結果を照らしあわせ、手動で仮想カメラを修正すると、より良い調整ができると思います。

事前計算で大体あわせてメモを見ながらより正確にあわせるという流れで行くのが良さそうです。
数センチは許容、5センチ以上は修正な感じでしょうか。


次回 キャプチャー本番編 に続く

iPi Desktop Motion Capture 収録まとめ2 セッティング編

iPi Desktop Motion Capture 1.3.1.124のモーションキャプチャの手順と成果メモです。
今回は機材と収録環境のセッティング編

以下の手順説明部分は結構 iPi soft wikiから引用してます。



 ■PCとKinectの接続するときの注意点など
・Kinectは給電が別途必要なので必要なコンセント数を用意
・Kinectは必ずPCのUSB2.0以上のポートに単体で接続
・録画前の段階でKinectは使用ポート毎にドライバインストールを済ませておく
・PC起動後数分はKinect及びPC機材が安定しないため収録しない

また、初めて録画をする場合は、Kinectのドライバがきちんとインストールされているかを
デバイスドライバで事前に確認するのが良いです。左がOKで右がNG一例です。
 
右になっていたら、一部ポートがUSB2.0未対応か配電自体がセパレート構成の可能性ありです。
PCを起動して数分後、一度iPirecorderを起動してKinectが2台認識されるか確認し、

画像のdepth入力を確認します。
問題ないようだったら次に進みます。


■キャプチャ環境の条件
・3m*3m*2m程度以上の範囲に大きな凹凸のない照明付きの室内、または薄曇りの公園など
・秒数間Tポーズで立っていられるアクター
・そこそこ体にフィットした、赤外線を変に反射しないジーンズと長袖

ココらへんの条件は結構曖昧ですが、キャプチャの精度を高めるためにはいろいろカオス要素を
排除していくのが肝心だと思います。

キャプチャ環境は 1R程度の広さで最低限のキャプチャは行えますが、床のゴミは片付け、
服装は形状がひらひら変わるようなものはやめたほうが良いです。

キャプチャ環境を整えたらKinectを配置していきます。

■二種類のKinect配置方法
iPiで選択できるKinectの配置方法は2つ
・2台をアクターを中心にした同心円状に30-90度で並べる


・2台をアクターを中心にした同心円状に110-180度で並べる


この二種類は部屋の環境によって選ぶのが良いと思います。 どちらも選べる空間があるなら、
収録アクションの胴体~手がどのように重なるかを念頭において配置するのが良いです。
立ち止まって両手を交差させる演技が多いなら30-90、くるくる回る演技なら110-180でしょうか。


配置を決めたら実際に置いて行きます。

各Kinect配置の位置と高さは図に書かれた通りにですが、追加で幾つか注意点を守るようにすると
、収録後作業や全体の精度が上がると思います。

■配置時に気をつける点
・30-90度で展開する場合、80度程度が理想に近い
・1台目のKinectで上半身と接地面を過不足なく捉えられる場所に配置する
・2台目はアクターの身長より少し高い位置で、接地面を捉えつつ胸部をカバーできるよう配置する
・次回以降、環境を正確に再現できるように、Kinectの位置と高さをメモで残しておく。



 次回 キャリブレーション編に続く

iPi Desktop Motion Capture 収録まとめ1 機材編

なぜか家にKinectが2台あったので、iPi D0esktop Motion Capture 1.3.1.124でモーションキャプチャして
見ました。キャプチャテストの手順と成果メモです。

結果は驚きの精度でした。

iPiのKincet1台接続の場合、足と胴体のキャプチャについてはかなり精度が高かったのですが、
どうしても肩から先、特に胴体正面で両腕をクロスさせる動きの精度が悪くなりがちでした。
剣道の面をカメラ正面に向けて演技するのがわかりやすいかもしれません。
それが2台使用することで、きちんと収録できるようになりました。


今回は使用した機材についてのメモ


■iPiでKinectを2台接続するときの使用条件
・(必須) Direct3D 10互換のグラフィックカード
・(必須) 2つ以上の USB 2.0 または USB 3.0ポート
・(推奨) HDDまたはSSDの書き込み速度が 55 Mb/sec 以上あるもの
・(推奨) Windows7 64bit

今回は、以上の条件を最低限クリアできる環境として次のものを使いました。

■テストに使用した機材
・ASUS K53U
・iPi Recorder  1.6.0.79
・iPi D0esktop Motion Capture 1.3.1.124
・Kinect2台
・横1m縦1.3mのボード (キャリブレーションプレーン)
・ノートPC冷却台(一応)


K53Uの3DMARKのスコアは大体1700程度ですが、録画環境としてのコスパは優秀だと思います。

http://www.asus.co.jp/Notebooks/Versatile_Performance/K53U/
しかしキャプチャ後計算や長時間連続録画(10000f超~)の収録は向かないので、別途高速のCPU
を積んだPCを用意すると色々スムーズに進むと思います。
今回はこれで録画後計算もしましたが、1f処理するのに安定して12~13sかかりました。
現状Corei7使用のミドルレンジPCでも、3DmarkのCPUScoreが20000程度は出ますので、処理速度
も段違いになります。



次回セッティング編に続く

2011年11月19日土曜日

KinectSDK-v1.0-beta2-x64のインストール

http://blogs.msdn.com/b/kinectforwindows/archive/2011/11/03/it-s-official-kinect-for-windows-is-coming-soon.aspx
KinectSDK-v1.0-beta2-x64をインストールしてみました。簡単すぎて吹きましたわ。
OpenNIの敷居の高さはなんだったんでしょうか。


必須OSがwin7ってところが難点ですが、こちらがユーザーに優しいので、是非Kinect関係を
使ったモーションキャプチャー開発が活発になってほしいです。
mikumikudanceも対応してくれないかな・・・

211/11/2現在、表立った対応アプリがなさそうなですが、インストール手順は大きく3つです。

------------------------------------------------------------------------------
1.Microsoft .NET Framework 4 をインストール

http://www.microsoft.com/downloads/ja-jp/details.aspx?FamilyID=9cfb2d51-5ff4-4491-b0e5-b386f32c0992
2.Visual C# 2010 Expressをインストール(ファイル名はvcs_web.exe)

http://www.microsoft.com/japan/msdn/vstudio/express/
3.自分のOSに応じて32bit,64bit対応のKinectSDKをインストール


http://www.kinectforwindows.org/download/

---------------------------------------------------------------------------------
OpenNIをインストールしていると競合するとの情報もありますので、これを入れる場合は、
回避策を調べたほうがよいかもしれません。



土日にiPiの体験版を触ってみたので、次書くことがあったら、そこらへんを書いてみようかと。
Kinect2台でかなりパフォーマンスがあがってます。マジで。

2011年11月8日火曜日

Kinect for Windows is Coming Soon...


2011年の春先から夏にかけて、Kinectについて新しい動きがありました。
Microdoftからデベロッパー向けに幾つか告知があり、またカンファレンスなどが各地のゲーム系
コンベンションで行われ、ここ数週間でゲーム系サイトを中心に正式な情報が出回り始めたました。
http://game.watch.impress.co.jp/docs/news/20110301_430252.html
http://xbox360.ign.com/articles/121/1211083p1.html
KinectというデバイスがWindowsへ本格対応するとしたら、iphoneなどで始まったデバイスの新たな
流れが一層加速するかも知れません。
http://blogs.msdn.com/b/kinectforwindows/archive/2011/11/03/it-s-official-kinect-for-windows-is-coming-soon.aspx
現在のKinectは、深度センサーの精度があまり良くありませんが、これからデバイスメーカー各社が
MicroSoftライセンスを受けて開発を進めれば、より良いものがたくさん出てくるきがします。
ゲームモーションの敷居もグッと下がりそうでワクワクします。
こんな文章書いてたら、本日(11月9日))ASUSTECからOpneNIを利用したモーションキャプチャデバイス
が発表されました。11月11日発売。価格はどんなもんでしょうか
http://plusd.itmedia.co.jp/pcuser/articles/1111/09/news042.html
大体\25,000程度?こちらのブログで導入まで細かく説明されています。
http://d.hatena.ne.jp/hagino_3000/20111106/1320562275
この流れが続いてくれると嬉しいです。