Sign In

EchoTrail-GUI: Building Actionable Memory for GUI Agents via Critic-Guided Self-Exploration

Created by
  • Haebom
Category
Empty

μ €μž

Runze Li, Yuwen Zhai, Bo Xu, LiWu Xu, Nian Shi, Wei Zhang, Ran Lin, Liang Wang

πŸ’‘ κ°œμš”

κΈ°μ‘΄ GUI μ—μ΄μ „νŠΈλŠ” κ³Όκ±° 성곡 κ²½ν—˜μ„ μ²΄κ³„μ μœΌλ‘œ ν•™μŠ΅ν•˜μ§€ λͺ»ν•˜λŠ” ν•œκ³„λ₯Ό 가지며, μ΄λŠ” μž‘μ—… μˆ˜ν–‰μ˜ λΉ„νš¨μœ¨μ„±κ³Ό 반볡적인 였λ₯˜λ‘œ μ΄μ–΄μ§‘λ‹ˆλ‹€. λ³Έ 논문은 μ΄λŸ¬ν•œ 문제λ₯Ό ν•΄κ²°ν•˜κΈ° μœ„ν•΄ 'EchoTrail-GUI'λΌλŠ” μƒˆλ‘œμš΄ ν”„λ ˆμž„μ›Œν¬λ₯Ό μ œμ•ˆν•©λ‹ˆλ‹€. EchoTrail-GUIλŠ” 보상 λͺ¨λΈμ„ 톡해 κ²€μ¦λœ 성곡 ꢀ적 λ°μ΄ν„°λ² μ΄μŠ€λ₯Ό κ΅¬μΆ•ν•˜κ³ , 이λ₯Ό μƒˆλ‘œμš΄ μž‘μ—… μˆ˜ν–‰ μ‹œ μΈμ»¨ν…μŠ€νŠΈ κ°€μ΄λ“œλ‘œ ν™œμš©ν•˜μ—¬ μ—μ΄μ „νŠΈμ˜ μ˜μ‚¬κ²°μ •μ„ λ•μŠ΅λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
κ²½ν—˜ 기반 ν•™μŠ΅ λ©”μ»€λ‹ˆμ¦˜: μ—μ΄μ „νŠΈκ°€ κ³Όκ±° 성곡 κ²½ν—˜μ„ ν•™μŠ΅ν•˜κ³  이λ₯Ό μƒˆλ‘œμš΄ μž‘μ—…μ— μ μš©ν•¨μœΌλ‘œμ¨, 지속적인 μ„±λŠ₯ ν–₯상과 μƒˆλ‘œμš΄ ν™˜κ²½μ— λŒ€ν•œ μΌλ°˜ν™” λŠ₯λ ₯을 높일 수 μžˆμŠ΅λ‹ˆλ‹€.
β€’
μ™„μ „ μžλ™ν™”λœ 지식 기반 ꡬ좕: μΈκ°„μ˜ κ°œμž… 없이도 μ—μ΄μ „νŠΈκ°€ 슀슀둜 성곡적인 μž‘μ—… ꢀ적을 νƒμƒ‰ν•˜κ³  이λ₯Ό 기반으둜 λ©”λͺ¨λ¦¬λ₯Ό ꡬ좕할 수 μžˆμ–΄, μ‹€μ œ 적용 및 ν™•μž₯에 μš©μ΄ν•©λ‹ˆλ‹€.
β€’
AndroidWorld 및 AndroidLabμ—μ„œμ˜ μ„±λŠ₯ ν–₯상: μ œμ•ˆλœ EchoTrail-GUI ν”„λ ˆμž„μ›Œν¬κ°€ κΈ°μ‘΄ μ—μ΄μ „νŠΈμ˜ μž‘μ—… 성곡λ₯ κ³Ό νš¨μœ¨μ„±μ„ μœ μ˜λ―Έν•˜κ²Œ κ°œμ„ ν–ˆμŒμ„ μ‹€ν—˜μ μœΌλ‘œ μž…μ¦ν–ˆμŠ΅λ‹ˆλ‹€.
β€’
κΈ°μ–΅μ˜ ꡬ체성 및 검색 νš¨μœ¨μ„±: ν˜„μž¬ κ΅¬ν˜„λœ λ©”λͺ¨λ¦¬ 검색 방식이 λͺ¨λ“  상황에 μ΅œμ ν™”λ˜μ§€ μ•Šμ„ 수 있으며, 더 λ³΅μž‘ν•˜κ³  λ‹€μ–‘ν•œ μ‹œλ‚˜λ¦¬μ˜€μ— λŒ€ν•œ κΈ°μ–΅μ˜ ν™œμš© λ°©μ•ˆμ— λŒ€ν•œ μΆ”κ°€ 연ꡬ가 ν•„μš”ν•  수 μžˆμŠ΅λ‹ˆλ‹€.
πŸ‘
Made with Slashpage