unity 写真から特定の物を2Dまたは3Dにオブジェクト化する

Question

お世話になります！

リアルな世界の物(家具や人物など)を2Dまたは3D化するアプリができたら面白いなと思い、自分のイメージしているアプリが実現できるか情報収集をしています。

ですが、初めての分野でもあり本当に実現できるのか、皆様の意見を仰ぎたいと思っています。

実現したい内容は以下の機能です。

・スマホや一眼で撮った写真から特定なもの(家具や人物や服など)をプログラムが読み取り、自動で2Dまたは3D化する。

・2Dまたは3D化したものをアプリ上で見れる。

※ここでいうアプリは、スマホアプリ・Webアプリのことを指しています。

・2Dまたは3D化したオブジェクトを重ね合わせることもできる。

※人が服を着るというのをイメージしています。

色々調べておりますが、今のところunityであればこれらの機能が実現できるのではないか？と思っています。
ですが、unityでもどういった機能を使えばいいかだとか、これらを実現する流れなどわかっていない状況です。

また、これらを実現するためにお勧めな書籍や勉強する内容なども伺えれたら尚嬉しいです！

わかり辛い質問内容となってしまっているかもしれませんが、どうぞよろしくお願いしますm(_ _)m

※情報に不足がありましたらご指摘ください！

Comments

[buibui80]

こちらの質問が他のユーザから「質問の範囲が広すぎる」という評価を受けています
わからない点を明確にし、調査したこと・試したことと共に記入していただくと、回答が得られやすくなります。

Answer 1

先の方がおっしゃる通り高度な分野で容易でないかと思います。
そういった機能はunityや他のほとんどのgame engineでは標準的には用意されていません。
ただ2dのオブジェクトであればopencvのような画像処理ライブラリを駆使することで、静的画像からの特定形状取得は出来そうに思います。
http://independence-sys.net/main/?p=1619

3dの場合かなり先進的で高度な分野になるかと思います。複数の静的画像から3D形状を復元する試みは
Sfmと呼ばれておりいくつもの製品やライブラリが公開されていますのでそちらをご覧になってはどうでしょうか。openmvgなどはオープンソースのようです。
https://en.m.wikipedia.org/wiki/Structure_from_motion

Answer 2

写真から2d3dのオブジェクトをつくるのは相当な技術力が要ります。
一枚の写真からでは解析不可能な部分角度もあるので、3dはまず無理でしょう。
海外の質問サイトの英語で質問すれば、もしかすれば写真から2dオブジェクトを生成する方法を教えてもらえるかも知れません。