LifeEval: A Multimodal Benchmark for Assistive AI in Egocentric Daily Life Tasks
Created by
- Haebom
Category
Empty
μ μ
Hengjian Gao, Kaiwei Zhang, Shibo Wang, Mingjie Chen, Qihang Cao, Xianfeng Wang, Yucheng Zhu, Xiongkuo Min, Wei Sun, Dandan Zhu, Guangtao Zhai
π‘ κ°μ
μ΄ λ
Όλ¬Έμ νμ€ μΈκ³μ λμ μΈ νκ²½μμ μΈκ°μκ² ν¨κ³Όμ μΈ λμμ μ 곡νλ λ©ν°λͺ¨λ¬ λκ·λͺ¨ μΈμ΄ λͺ¨λΈ(MLLM)μ λ₯λ ₯μ νκ°νκΈ° μν μλ‘μ΄ λ²€μΉλ§ν¬μΈ LifeEvalμ μ μν©λλ€. LifeEvalμ μ€μκ°, κ³Όμ μ§ν₯μ μΈ μΈκ°-AI νμ
μ μΌμμνμμ μ¬μ©μ μμ (egocentric)μΌλ‘ νκ°νλ©°, 6κ°μ§ ν΅μ¬ μλ μ°¨μμ κ±Έμ³ 4,075κ°μ μ§μμλ΅ μμΌλ‘ ꡬμ±λ©λλ€. 26κ°μ μ΅μ MLLMμ λν νκ°λ μκΈ°μ μ νκ³ ν¨κ³Όμ μ΄λ©° μ μμ μΈ μνΈμμ© λ¬μ±μ μλΉν μ΄λ €μμ΄ μμμ 보μ¬μ€λλ€.
π μμ¬μ λ° νκ³
β’
κΈ°μ‘΄ λΉλμ€ λ²€μΉλ§ν¬κ° μ£Όλ‘ μλμ μ΄ν΄λ κ°λ³ μΈμ§ κ³Όμ μ μ΄μ μ λ§μΆ λ°λ©΄, LifeEvalμ μ€μκ° μ¬μ©μ μ§μμ μνΈμμ©μ μ΄κ³ μ μμ μΈ νΉμ±μ ν¬μ°©ν©λλ€.
β’
μ΄ λ²€μΉλ§ν¬λ μΈκ° μ€μ¬μ μνΈμμ© μ§λ₯ λ°μ μ μν νμμ μΈ λ°©ν₯μ μ μνμ¬, AIκ° μ€μ μνμμ λ μ μ©ν μ‘°λ ₯μκ° λκΈ° μν ꡬ체μ μΈ κ³Όμ λ₯Ό λͺ
νν ν©λλ€.
β’
μμ§ MLLMμ΄ μ€μκ°μΌλ‘ μκΈ°μ μ νκ³ ν¨κ³Όμ μ΄λ©° μ μμ μΈ μνΈμμ©μ λ¬μ±νλ λ° μλΉν κ°μ μ΄ νμνλ€λ μ μ΄ λλ¬λ¬μΌλ©°, μ΄λ ν₯ν μ°κ΅¬ κ°λ°μ μ€μν λ°©ν₯μ΄ λ κ²μ
λλ€.
