Daily Arxiv

世界中で発行される人工知能関連の論文をまとめるページです。
このページはGoogle Geminiを活用して要約し、非営利で運営しています。
論文の著作権は著者および関連機関にあり、共有する際は出典を明記してください。

ETCH: Generalizing Body Fitting to Clothed Humans via Equivariant Tightness

Created by
  • Haebom

作者

Boqian Li, Haiwen Feng, Zeyu Cai, Michael J. Black, Yuliang Xiu

概要

本論文は3D衣類を着た人のポイントクラウドに身体をフィッティングする問題を扱う。既存の最適化ベースの方法は多段階パイプラインを使用して姿勢の初期化に敏感であり、最近の学習ベースの方法は様々な姿勢と衣類タイプの一般化に困難を抱えている。本論文では、衣類-身体表面マッピングを局所的に近似したSE(3)等変性を通じて推定し、身体表面からの変位ベクトルとして密着度合いをエンコードする新しいパイプラインであるEquivariant Tightness Fitting for Clothed Humans (ETCH)を提案する。このマッピング後、姿勢不変身体特徴が稀な身体マーカーを回帰し、衣服を着た人のフィッティングを内部ボディマーカーフィッティング作業に簡素化する。 CAPEと4D-Dressの広範な実験は、ETCHが緩い衣類の身体フィット精度(16.7%〜69.5%)とフォーム精度(平均49.9%)で最先端の方法(密着度を考慮しない方法と考慮する方法の両方)を大幅に上回ることを示しています。等辺密着設計は、ワンショット(または分布外)設定(~1%データ)で方向誤差を67.2%~89.8%まで低減することができる。定性的結果は、困難な姿勢、目に見えない形態、緩い衣類、および非剛体力学に関係なく、ETCHの強力な一般化を示しています。コードとモデルはhttps://boqian-li.github.io/ETCH/에서公開される予定です。

Takeaways、Limitations

Takeaways:
SE(3)等変性を活用した新しい衣類を着た人の身体継手パイプライン(ETCH)提案。
従来の方法よりも緩い衣類のためのボディフィッティング精度と形状精度を大幅に向上。
様々な姿勢、衣類の種類、および非剛体力学のための強力な一般化性能
ワンショット設定で方向誤差を大幅に低減。
コードとモデル公開予定。
Limitations:
まだコードとモデルは公開されていません。
実験データセットの多様性の追加検証が必要です。
特定の種類の衣類または身体形態の一般化性能の低下の可能性。
👍