Sign In

Mind the Generative Details: Direct Localized Detail Preference Optimization for Video Diffusion Models

μž‘μ„±μž
  • Haebom
μΉ΄ν…Œκ³ λ¦¬
Empty

μ €μž

Zitong Huang, Kaidong Zhang, Yukang Ding, Chao Gao, Rui Ding, Ying Chen, Wangmeng Zuo

πŸ’‘ κ°œμš”

이 μ—°κ΅¬λŠ” ν…μŠ€νŠΈ-λΉ„λ””μ˜€ 생성 λͺ¨λΈμ„ μΈκ°„μ˜ μ„ ν˜Έλ„μ— 맞좰 κ°œμ„ ν•˜λŠ” μƒˆλ‘œμš΄ 방법둠인 LocalDPOλ₯Ό μ œμ•ˆν•©λ‹ˆλ‹€. κΈ°μ‘΄ DPO λ°©μ‹μ˜ λΉ„νš¨μœ¨μ„±κ³Ό λͺ¨ν˜Έν•œ 전역적 감독 문제λ₯Ό ν•΄κ²°ν•˜κΈ° μœ„ν•΄, LocalDPOλŠ” μ‹€μ œ λΉ„λ””μ˜€μ—μ„œ κ΅­μ†Œμ μΈ μ„ ν˜Έλ„ μŒμ„ μžλ™μœΌλ‘œ κ΅¬μΆ•ν•˜κ³  μ‹œκ³΅κ°„μ  μ˜μ—­ μˆ˜μ€€μ—μ„œ λͺ¨λΈμ„ μ΅œμ ν™”ν•©λ‹ˆλ‹€. 이 방법은 μ™ΈλΆ€ 평가 λͺ¨λΈμ΄λ‚˜ μˆ˜λ™ 주석 없이도 효율적으둜 데이터셋을 μƒμ„±ν•˜λ©°, μ‹€ν—˜ κ²°κ³Ό λΉ„λ””μ˜€μ˜ 좩싀도, μ‹œκ°„μ  일관성, μ‚¬μš©μž μ„ ν˜Έλ„ 점수λ₯Ό ν–₯μƒμ‹œν‚΅λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
ν…μŠ€νŠΈ-λΉ„λ””μ˜€ 생성 λͺ¨λΈμ˜ 인간 μ„ ν˜Έλ„ 정렬을 μœ„ν•œ 효율적이고 μ„Έλ°€ν•œ μƒˆλ‘œμš΄ νŒ¨λŸ¬λ‹€μž„μ„ μ œμ‹œν•©λ‹ˆλ‹€.
β€’
μ‹€μ œ λΉ„λ””μ˜€ 데이터λ₯Ό ν™œμš©ν•˜μ—¬ κ΅­μ†Œμ μΈ μ„ ν˜Έλ„ ν•™μŠ΅μ„ κ°€λŠ₯ν•˜κ²Œ ν•¨μœΌλ‘œμ¨, 더 μ •ν™•ν•˜κ³  μ‚¬μš©μž λ§Œμ‘±λ„κ°€ 높은 λΉ„λ””μ˜€ 생성을 μ§€μ›ν•©λ‹ˆλ‹€.
β€’
μ œμ•ˆλœ λ°©λ²•λ‘ μ˜ μ „λ°˜μ μΈ 효과λ₯Ό 더 넓은 λ²”μœ„μ˜ λΉ„λ””μ˜€ 생성 λͺ¨λΈ 및 데이터셋에 λŒ€ν•΄ κ²€μ¦ν•˜κ³ , 잠재적인 편ν–₯성을 μ™„ν™”ν•˜κΈ° μœ„ν•œ μΆ”κ°€ 연ꡬ가 ν•„μš”ν•©λ‹ˆλ‹€.
πŸ‘