Skip to content
/ VHub Public

Apply pose estimation to a 3D avatar / MediaPipeによるポーズ推定を、3Dアバターへリアルタイムに適用する

License

Notifications You must be signed in to change notification settings

Yupopyoi/VHub

Repository files navigation

VHub

Overview in English

The goal of this project is to apply pose estimation to a 3D avatar using MediaPipe. All you need is an RGB camera that captures you. No depth camera or motion capture is needed.

The most advanced branch is "feature/MediaPipeDevelop" as of 8th November.

Docs are here.

日本語概要

このプロジェクトでは、MediaPipeによるポーズ推定を、3Dアバターへリアルタイムに適用することを目標にします。
必要なのは、RGBカメラのみです。デプスカメラやモーションキャプチャーは必要ありません。

11月8日現在、最も進んでいるブランチは "feature/MediaPipeDevelop" です。

製作における参考資料は このディレクトリ に格納してあります。

Progress

SampleGif

(Updated on Nov. 11, 2024)
I'm implementing the movement of the left arm...
I know that the movement is sometimes unnatural, and I will modify that in the future.
In addition, the slight delay is intentional.

Environment

Unity 2022.3.42f1

Contribution

This project uses MediaPipeUnityPlugin created by homuler.
I would like to express my sincere gratitude to him.

License

MIT License

About

Apply pose estimation to a 3D avatar / MediaPipeによるポーズ推定を、3Dアバターへリアルタイムに適用する

Topics

Resources

License

Stars

Watchers

Forks