1adrianb / 1adrianb/face-alignment
3D facial landmarks from videos jittering
- 主要言語
- Python
- スター
- 7.5k
- フォーク
- 1.4k
- PR マージ指標
- 30日以内にマージされた PR はありません
説明
Very excellent work! Thank you so much for your open source.
I tried to extract 3d facial landmarks from a video (one clip of LRS3), but got jittering landmarks.
I use "face-alignment" installed by pip. Should I build from the repo?
Any suggest to stable the landmarks will be appreciated. : )
facial landmarks:
https://youtu.be/QX7Ra3HNs6s
original video:
https://youtu.be/rQlial7BGaI
コントリビューションガイド
このリポジトリのコントリビューションガイドは索引されていません
調査の方向性
この issue は、pip でインストールした 'face-alignment' ライブラリを使用して動画から取得した 3D ランドマークが揺れると報告しています。まず、リポジトリからビルドすると結果が変わるか確認します。動画処理パイプライン、おそらく時間的な平滑化やフレームごとのモデル推論を確認します。ライブラリの動画サンプルスクリプトを確認し、後処理での安定化の追加を検討します。目標は、フレーム間で安定したランドマークを生成することです。
索引モデルが issue の本文から書いたものです。
評価
- 技術スタック
- python, pytorch
- 領域
- computer-vision
- issue の種類
- バグ
- 難易度
- 4/5
- 見積もり時間
- 3〜5日
- 活発さ
- 停滞
- 明瞭さ
- おおむね明確
- 初心者へのやさしさ
- 35/100