HomeKinect for Windows(キネクト）でペダル認識、VRトレーニングバイクのための研究開発
| R＆D | kinectとアプリの連携 |
|---|---|
| 業界 | スポーツジム |
| 制作期間 | ２週間 |
Kinect for Windowsでペダルを認識、VRトレーニングバイクのための研究開発
動画を見ながらトレーニングバイクでエクササイズするためのアプリ開発のための基礎研究
実写の画像・動画とサイクリングの動作と連携してサイクリング体験を実装
Kinnect for windowsでトレーニングバイクのペダルとトレーニングをしている人の顔をセンサリングします。ペダルの回転速度と動画の再生スピードを連動させます。トレーニングしている人の顔の傾きなどで画像の向きも調整します。
Kinect for Windowsでセンサリング
Kinect for Windows（マイクロソフト キネクト）へ接続できました。
体と頭の動きを認識してトラッキング
複数の画面（左、右、真中）を同期できる。頭を移動したらアングルを変更
ペダルの回転数をKinectで認識し自転車の速度を取得
べダル速度により動画の速度も調整できる
トラッキングできるかどうか検討（足の動きにより、値を取得できるかどうか）
踝（くるぶし）の動きでべダルの回転数をトラッキング
Kinectの配置によりトラッキングに影響する
今後の課題：4K映像の場合
高精細で動画再生したらどのようにするか検討
下記のPCにテストいたしました
– CPU: Core i7-7700k
– GPU: GTX 1060
– Screen Resolution: 1920×1080
結果は下記の通りです。
– Resolution <= 2K (2560×1440): スムーズになっています
– Resolution <= 4K (3840×1920)): 時々解像度が悪くなる
Kinect for Windows(マイクロソフト キネクト）とは
Kinect（キネクト）はマイクロソフトから発売された身体の動きであるジェスチャー・音声認識によってゲーム機、コンピューターの操作ができるデバイス。
RGBカメラ、深度センサー、マルチアレイマイクロフォン、および専用ソフトウェアを動作させるプロセッサを内蔵したセンサーがあり、プレイヤーの位置、動き、声、顔を認識することができる。
出典:wikipedia
建設業向けのシステムに強いお客様より建設工事の施工管理アプリの開発をお請けしました。 ホロレンズを利用して施工の進捗、品質管理、レポートが行えるように対応しました。
ゴルフのグリーン上のラインを読むためのARアプリの研究開発です。iPhone13 proのLiDARを使い、Unityで開発したアプリでは、画面上にグリーンの傾斜をメッシュで表示します。最終的に地面の傾斜や摩擦などを物理エンジンで計算してカップまでをARでラインを表示します。
本アプリは定期的に点検業務が必要なある機器の点検手順をARで補助するホロレンズアプリです。業務の標準化による人手不足の解消などに役立つソリューションとなります。UNITYで開発しました。HoloLensは、現時点では最も優れたMRのデバイスの一つでもあります。
寿司職人の育成のための専門学校向けMRによる真鯛の捌き方アプリを作成 真鯛の捌き方をリアルに再現するための3Dモデリングとアニメーション Microsoft HoloLens 2アプリをUnityで開発 HoloLens 2を装着してリアルな体験ができるインタラクティブな学習体験の設計
VR対応アプリケーション用3Dモデリング実績を紹介。ポリゴン数やブラウザでも表示するという制約内でリアルな車両モデルの製作。質・技術の向上に注力。クライアント満足実績多数。ベトナムオフショアで低コストで製作可能。