推しアイデア
パソコンについているwebカメラを使用し、親指と人差し指の座標を認識する。そのデータをもとにカードをつまむか否かを判断する。
―
パソコンについているwebカメラを使用し、親指と人差し指の座標を認識する。そのデータをもとにカードをつまむか否かを判断する。
友達とトランプアプリで遊んでいて、誤タップで捨てたくないカードを捨ててしまった経験がある人も多いでしょう。このアプリでは、実際にカードをつまむ動作で捨てることができるので、より快適にゲームを楽しめること間違いなし!
MediaPipeを使い、カメラ映像から親指と人差し指の座標をリアルタイムで認識。認識したデータをUnityに送信し、指同士が近づいているか離れているかを判定することで、直感的な操作を実現。
現実で行うトランプは絶対に意図しないカードを捨ててしまうことは無い。しかし、アプリとなるとそれは変わってくる。誤タップなどで捨てたくもないカードを捨てたり取りたくもないカードを取ったりと、ゲーム以外のところに気を配らなければなくなってくる。 この問題を解決するために、実際の指の動作をwebカメラから認識してカードを直感的につまむことができるシステムを開発した。
https://youtu.be/nbDc_d1MhW4 logで指が近づいたり離れたりするとTureとForseと判定されることが分かる。