MediaPipeでジェスチャー認識

GoogleのMediaPipeが優秀。

以下のジェスチャーが認識できる。

0 – Unrecognized gesture, label: Unknown
1 – Closed fist, label: Closed_Fist
2 – Open palm, label: Open_Palm
3 – Pointing up, label: Pointing_Up
4 – Thumbs down, label: Thumb_Down
5 – Thumbs up, label: Thumb_Up
6 – Victory, label: Victory
7 – Love, label: ILoveYou

■デモ
パー「 Open palm」を認識して紙吹雪を表示する。

■所感
・ドローンの操作をジェスチャーで行う
・ピースサインを認識してその瞬間の画像を取得する
・Thumb_Up を認識してメールを飛ばす

などなど、ジェスチャー認識をトリガーにして何かの処理ができる。
Javascript用も公開されているのが汎用性高い。