Sign In

PDEAgent-Bench: A Multi-Metric, Multi-Library Benchmark for PDE Solver Generation

μž‘μ„±μž
  • Haebom
μΉ΄ν…Œκ³ λ¦¬
Empty

μ €μž

Zhen Hang, Yushan Yashengjiang, Junhui Li, Huanshuo Dong, Yang Wei, Zhezheng Hao, Jiangtao Ma, Songlin Bai, Haozhong Kai, Xihang Yue, Gangzong Si, Dongming Jiang, Chao Yao, Zhanhua Hu, Jiangqing Zhang, Pengwei Liu, Yaomin Shen, Xingyu Ren, Lei Liu, Zikang Xu, Han Li, Qingsong Yao, Hande Dong, Hong Wang

πŸ’‘ κ°œμš”

이 논문은 νŽΈλ―ΈλΆ„λ°©μ •μ‹(PDE) λͺ…μ„Έλ‘œλΆ€ν„° 수치 해석 해법 μ½”λ“œλ₯Ό μžλ™μœΌλ‘œ μƒμ„±ν•˜λŠ” 'PDE-to-solver μ½”λ“œ 생성' 과제λ₯Ό μœ„ν•œ μƒˆλ‘œμš΄ 벀치마크인 PDEAgent-Benchλ₯Ό μ œμ•ˆν•©λ‹ˆλ‹€. κΈ°μ‘΄ λ²€μΉ˜λ§ˆν¬λŠ” 문법적 μ •ν™•μ„±μ΄λ‚˜ 사전 μ •μ˜λœ ν…ŒμŠ€νŠΈ μΌ€μ΄μŠ€ 성곡 여뢀에 μ΄ˆμ μ„ λ§žμΆ”μ—ˆμ§€λ§Œ, PDEAgent-BenchλŠ” 수치적 μ •ν™•μ„±, νš¨μœ¨μ„±, 그리고 μ „λ¬Έ FEM 라이브러리(DOLFINx, Firedrake, deal.II)μ™€μ˜ ν˜Έν™˜μ„±μ„ ν¬ν•¨ν•˜λŠ” 닀쀑 μ§€ν‘œλ₯Ό ν‰κ°€ν•©λ‹ˆλ‹€. μ‹€ν—˜ κ²°κ³Ό, ν˜„μž¬ LLMκ³Ό μ½”λ“œ μ—μ΄μ „νŠΈλŠ” μ‹€ν–‰ κ°€λŠ₯ν•œ μ½”λ“œλ₯Ό μƒμ„±ν•˜λŠ” λ°λŠ” μ„±κ³΅ν•˜μ§€λ§Œ, μ •ν™•μ„±κ³Ό νš¨μœ¨μ„± μš”κ΅¬μ‚¬ν•­μ„ μΆ©μ‘±μ‹œν‚€λŠ” λ°λŠ” 큰 ν•œκ³„λ₯Ό λ³΄μž…λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
μ‹€μš©μ  PDE 해법 생성 λŠ₯λ ₯ ν‰κ°€μ˜ μ€‘μš”μ„± 뢀각: PDEAgent-BenchλŠ” λ‹¨μˆœνžˆ μ½”λ“œλ₯Ό μƒμ„±ν•˜λŠ” 것을 λ„˜μ–΄, μ‹€μ œ 수치 ν•΄μ„μ—μ„œ μš”κ΅¬λ˜λŠ” μ •ν™•μ„±κ³Ό νš¨μœ¨μ„±μ„ λ§Œμ‘±ν•˜λŠ” 해법 μ½”λ“œ 생성 λŠ₯λ ₯을 ν‰κ°€ν•˜λŠ” μ€‘μš”ν•œ 기쀀을 μ œμ‹œν•©λ‹ˆλ‹€.
β€’
ν˜„μ‘΄ μ½”λ“œ 생성 μ—μ΄μ „νŠΈμ˜ ν•œκ³„μ  λͺ…ν™•ν™”: ν˜„μž¬μ˜ LLM 및 μ½”λ“œ μ—μ΄μ „νŠΈκ°€ λ³΅μž‘ν•œ 수치적 μ œμ•½μ„ λ§Œμ‘±ν•˜λŠ” PDE 해법 μ½”λ“œλ₯Ό μƒμ„±ν•˜λŠ” 데 아직 뢀쑱함이 μžˆμŒμ„ μ‹€ν—˜ κ²°κ³Όλ₯Ό 톡해 λ³΄μ—¬μ€λ‹ˆλ‹€.
β€’
λ”μš± μ •ν™•ν•˜κ³  효율적인 PDE 해법 μ½”λ“œ 생성 λͺ¨λΈ 개발의 ν•„μš”μ„±: μ œμ•ˆλœ λ²€μΉ˜λ§ˆν¬λŠ” ν–₯ν›„ 수치적으둜 μ‹ λ’°ν•  수 있고 효율적인 PDE 해법 μ½”λ“œ 생성 λͺ¨λΈ κ°œλ°œμ„ μœ„ν•œ λ‘œλ“œλ§΅μ„ μ œκ³΅ν•˜λ©°, 이 λΆ„μ•Όμ˜ 연ꡬ λ°œμ „μ— κΈ°μ—¬ν•  κ²ƒμœΌλ‘œ κΈ°λŒ€λ©λ‹ˆλ‹€.
πŸ‘