Sign In

Tiled Prompts: Overcoming Prompt Misguidance in Image and Video Super-Resolution

Created by
  • Haebom
Category
Empty

μ €μž

Bryan Sangwoo Kim, Jonghyun Park, Jong Chul Ye

πŸ’‘ κ°œμš”

ν…μŠ€νŠΈ 쑰건뢀 ν™•μ‚° λͺ¨λΈμ€ ν”„λ‘¬ν”„νŠΈλ₯Ό 의미둠적 사전 μ •λ³΄λ‘œ ν™œμš©ν•˜μ—¬ 이미지 및 λΉ„λ””μ˜€ μ΄ˆν•΄μƒλ„ λΆ„μ•Όλ₯Ό λ°œμ „μ‹œμΌ°μ§€λ§Œ, 고해상도 처리λ₯Ό μœ„ν•œ 잠재적 타일링 κΈ°λ²•μ—μ„œ 단일 μ „μ—­ μΊ‘μ…˜ μ‚¬μš©μ€ μ’…μ’… ν”„λ‘¬ν”„νŠΈ μ˜€λ„(misguidance)λ₯Ό μœ λ°œν•©λ‹ˆλ‹€. λ³Έ 논문은 각 잠재 타일에 λŒ€ν•΄ 타일별 ν”„λ‘¬ν”„νŠΈλ₯Ό μƒμ„±ν•˜κ³  κ΅­μ†Œμ μœΌλ‘œ ν…μŠ€νŠΈ 쑰건뢀 사후 ν™•λ₯  ν•˜μ—μ„œ μ΄ˆν•΄μƒλ„λ₯Ό μˆ˜ν–‰ν•˜λŠ” "Tiled Prompts"λΌλŠ” 톡합 ν”„λ ˆμž„μ›Œν¬λ₯Ό μ œμ•ˆν•˜μ—¬ ν”„λ‘¬ν”„νŠΈ μ˜€λ„ 문제λ₯Ό μ΅œμ†Œν•œμ˜ μ˜€λ²„ν—€λ“œλ‘œ ν•΄κ²°ν•©λ‹ˆλ‹€. μ‹€μ œ 고해상도 이미지 및 λΉ„λ””μ˜€μ— λŒ€ν•œ μ‹€ν—˜ κ²°κ³Ό, Tiled PromptsλŠ” μ „μ—­ ν”„λ‘¬ν”„νŠΈ 기반 λͺ¨λΈμ—μ„œ λ°œμƒν•˜λŠ” ν™˜κ° 및 타일 μˆ˜μ€€μ˜ μ•„ν‹°νŒ©νŠΈλ₯Ό μ€„μ΄λ©΄μ„œ 지각 ν’ˆμ§ˆκ³Ό 좩싀도λ₯Ό μΌκ΄€λ˜κ²Œ ν–₯μƒμ‹œν‚€λŠ” κ²ƒμœΌλ‘œ λ‚˜νƒ€λ‚¬μŠ΅λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
ν…μŠ€νŠΈ 쑰건뢀 이미지/λΉ„λ””μ˜€ μ΄ˆν•΄μƒλ„μ—μ„œ λ°œμƒν•˜λŠ” ν”„λ‘¬ν”„νŠΈ μ˜€λ„ 문제λ₯Ό 효과적으둜 ν•΄κ²°ν•˜λŠ” μƒˆλ‘œμš΄ 방법둠을 μ œμ‹œν•©λ‹ˆλ‹€.
β€’
타일별 맞좀 ν”„λ‘¬ν”„νŠΈ 생성을 톡해 κ΅­μ†Œμ μΈ μ„ΈλΆ€ λ¬˜μ‚¬μ™€ 관련성을 λ†’μ—¬ μ „λ°˜μ μΈ μ΄ˆν•΄μƒλ„ 결과물의 ν’ˆμ§ˆμ„ ν–₯μƒμ‹œν‚΅λ‹ˆλ‹€.
β€’
μ œμ•ˆλœ 방법은 기쑴의 μ „μ—­ ν”„λ‘¬ν”„νŠΈ 기반 μ ‘κ·Ό 방식 λŒ€λΉ„ ν™˜κ° 및 타일 μˆ˜μ€€ μ•„ν‹°νŒ©νŠΈ κ°μ†Œμ— κΈ°μ—¬ν•©λ‹ˆλ‹€.
β€’
μ‹€μ œ 고해상도 λ°μ΄ν„°μ…‹μ—μ„œμ˜ μΌκ΄€λœ μ„±λŠ₯ ν–₯상을 μ‹€ν—˜μ μœΌλ‘œ μž…μ¦ν•˜μ˜€μœΌλ‚˜, ν”„λ‘¬ν”„νŠΈ 생성 κ³Όμ •μ˜ 계산 λ³΅μž‘μ„± 증가 κ°€λŠ₯μ„± 및 좔가적인 μ΅œμ ν™” λ°©μ•ˆμ— λŒ€ν•œ 연ꡬ가 ν•„μš”ν•  수 μžˆμŠ΅λ‹ˆλ‹€.
πŸ‘
Made with Slashpage