ミチコンPlus ARモード


ミチコンPlus利用風景


ミチコンPlusのARモード図説


ミチコンPlusのARモード切り替え方法

株式会社ネクストシステム(本社：福岡県福岡市、代表取締役：藤田 義生)は、スマートフォンだけで全身をモーションキャプチャし、任意のキャラクターに反映して動かすことが可能なiOSアプリ「ミチコンPlus」に新たにARモードを搭載した新バージョンを11月21日(木)にリリースしました。このARモードは、背景をカメラ映像にすることでお気に入りのキャラクターがまるで現実空間にいるかのような演出が可能になります。VTuber配信用途や、手軽なモーションキャプチャアプリとしてご活用いただけます。今後はUI面など含め、より使いやすいアプリとなるよう開発を進めてまいります。



画像1: https://www.atpress.ne.jp/releases/199222/LL_img_199222_1.jpg

ミチコンPlus ARモード



▼アプリはこちらからDLできます。

https://itunes.apple.com/jp/app/id1468862870





■フルトラッキングのVTuberに簡単になれる「ミチコンPlus」とは？

ミチコンPlusとは、人物の全身の動きを当社開発の人工知能エンジン「VisionPose(R)(※1)」で捉えて3DCGキャラクターに反映する、最新技術を利用したモーションキャプチャアプリです。モーションデータの書き出し、VRoid Hubと連携することでVRoid Hub上に投稿された任意のキャラクターへの変更等にも対応しています。(※2)

通常、モーションキャプチャを行う際はカメラを複数台用意し、対象にマーカー等のデバイスを装着する必要がありますが、当アプリではスマートフォン・タブレットのカメラに全身を映すだけでマーカレスの全身モーションキャプチャが完結できます。



また、リアルタイムでのモーションキャプチャだけでなく、端末に保存された動画ファイルからモーションを読み込み、キャラクターに反映する方法もご用意しています。(※3)

動画読み込み機能を利用することで、端末によりリアルタイムでのモーションキャプチャが難しかった場合でも、ご利用いただくことが可能です。(最大15秒)



※1 VisionPose、及びVisionPoseロゴは、NEXT-SYSTEM co.,Ltd.の登録商標です。

※2 キャラクター変更、モーションデータ書き出し機能の利用にはアップグレード(370円/月)が必要となります。課金体系は自動更新ではなく、非更新型のサブスクリプションです。

※3 端末によっては、読み込みに時間がかかる場合がございます。全身が写っている動画ファイルをご利用ください。



画像2: https://www.atpress.ne.jp/releases/199222/LL_img_199222_2.jpg

ミチコンPlus利用風景



■ARモード追加でキャラクターをより身近に

本アップデートでは、キャラクターの背景を背面カメラの映像にできる、ARモードを搭載しました。本機能を利用すると、キャラクターがまるで現実空間にいるかのような体験が可能になります。(※4)



ミチコンPlusでは、前面カメラの映像、または動画ファイルから、人間の動きをモーションキャプチャし、背面カメラに映った映像をキャラクターの背景として描写することでARモードを実現しています。



※4 ARモードの利用には端末に制限がございます。利用できる端末は、iPhone 11/11 Pro/11 Pro MAX、iPhone XR、iPhone XS/XS Max、iPad Pro(第3世代)です。



画像3: https://www.atpress.ne.jp/releases/199222/LL_img_199222_3.jpg

ミチコンPlusのARモード図説

画像4: https://www.atpress.ne.jp/releases/199222/LL_img_199222_4.jpg

ミチコンPlusのARモード切り替え方法



■ミチコンPlusに利用している技術「VisionPose(R)」について

当社では、カメラのみで複数人の骨格の深度情報を検出可能なAIエンジンを含む、国内唯一のSDKパッケージ製品である「VisionPose(R)」を提供しています。リハビリ支援用ロボットの姿勢確認機能などに利用されるほか、スポーツのフォームチェックアプリへの利用、工場や店舗での人の流れや動作の確認、医療、エンタメなど、幅広い分野で導入実績を築いています。



ミチコンPlusでは、VisionPoseシリーズの1つであり、カメラ1台だけで骨格を検出できる「VisionPose Single3D for iOS」を利用してモーションキャプチャを可能にしています。



また最近では、VisionPoseシリーズから、より手軽に骨格情報を検出できるオールインワンパッケージとして「VisionPose Nano」をハードウェア込み98,000円にて発売を開始しました。姿勢推定技術を利用するハードルを下げることで、さらなる技術の発展を促し、基幹技術の1つとして社会に貢献していきたいと考えています。



画像5: https://www.atpress.ne.jp/releases/199222/LL_img_199222_5.jpg

VisionPose利用例(野球)

画像6: https://www.atpress.ne.jp/releases/199222/LL_img_199222_6.jpg

VisionPose利用例(フィットネス)



■「ミチコンPlus」製品概要

アプリ名 ： ミチコンPlus

カテゴリ ： 仕事効率化

価格 ： 無料(有料コンテンツあり)

App Store URL： https://itunes.apple.com/jp/app/id1468862870

WEBサイトURL ： https://www.next-system.com/michico



＜参考動画＞

「ミチコンPlus」プロモーション用動画 ： https://youtu.be/8Vpo3dZUanc

VisionPose Single3D プロモーションビデオ： https://youtu.be/KVlBEFNr54w



＜主な機能＞

キャラセレクト ：キャラクターを選択できます。VRoid Hub上に

投稿されたキャラクターの追加が可能です。

(連携が必要です)

動画読み込み機能 ：端末に保存された動画を読み込み、

モーションキャプチャが可能です。

リップシンク切り替え：キャラクターの口を動かすかどうか選択できます。

プレビュー切り替え ：カメラ映像のON/OFFを選択できます。

カメラ切り替え ：前面カメラ、もしくは背面カメラを選択できます。

録画書き出し機能 ：モーション録画しCSVで書き出しできます。

背景切り替え ：デフォルト背景、グリーンバック、

カメラ映像に切り替えできます。



＜リアルタイムモーションキャプチャ推奨端末＞

iPhone 11/11 Pro/11 Pro MAX、iPhone XR、iPhone XS/XS Max、iPad Air(第3世代)、iPad mini(第5世代)、iPad Pro(第3世代)

※ A12以上のプロセッサが搭載された端末を推奨いたします。



＜ARモード推奨端末＞

iPhone 11/11 Pro/11 Pro MAX、iPhone XR、iPhone XS/XS Max、iPad Pro(第3世代)

※iOS13以上の端末でご利用ください。





■会社概要

商号 ： 株式会社ネクストシステム

代表者 ： 代表取締役 藤田 義生

所在地 ： 〒811-1302 福岡市南区井尻3-12-33 アンビエント井尻2F

設立 ： 2002年8月

事業内容 ： 情報通信業、情報サービス業、ソフトウェア業

資本金 ： 8,075万円

WEBサイト： https://www.next-system.com/

Facebook ： https://www.facebook.com/nextsystemcom/

Twitter ： @next_kinesys

情報提供元： ＠Press