【動画処理】壁や手すりへの人間の接触有無の検知

Question

前提・実現したいこと

動画から、固定された物体（壁・手すり・銅像など）に人間が触ったことを検知したいです。

発生している問題

実現方法が思いつきません。
実現のアイデアがあれば何でも欲しいです。

使用言語・前提

使用言語：Python3
動画は単眼カメラで撮影されたものとし、リアルタイムに処理する必要はありません。

Answer 1

本当にアイディアだけです。

• 手と対象物の距離がゼロになる ... 各対象物の距離を計算
• 触った場所を支点として体の動きが固定される ... 体をスケルトン検出して判定(OpenPoseでいける?)
• 触ったことにより指の形状が(対象物に依存して)固定される ... 指の形状を識別し判定
• 触ることにより対象物が遮られる ... セマンティックセグメンテーションにより遮っているか判定(誤判定が多そう)

実現できたら応用範囲は広そうですね。

Comments

[musashi634]

回答ありがとうございます！
OpenPoseの存在を知り、実現の目途が立ちそうです。
趣味利用なので判定精度はそこまで高くなくても大丈夫なのですが、色々と試してみます。

Answer 2

丸投げ質問にも程があります。少しくらい自分で考えてもいいんじゃないですか？

##簡単にヒント
まず、動画はopencvで写真化してから処理するのが普通です。動画で処理しようとしている人は絶対にいません。
そして、触れた触れないの検知についてですが、輪郭検出をして、その輪郭が重なっているor一定の距離で近い場合は接触ということにすればいいのでは？（輪郭検出がとてつもなく難しいが）

---

そんな感じです。あとは自分で考えてください。
あと、こんな質問はteratailでは推奨されていません。そのような質問なら、別の質問サイトで質問することをおすすめします。

Comments

[musashi634]

場違いな質問をしてしまい申し訳ありませんでした。