본 논문은 자동화된 소프트웨어 테스트 분야에서 여전히 명확히 정의되지 않고 충분히 탐구되지 않은 핵심 개념들(강화 테스트와 탐지 테스트)을 공식적으로 정의하고, 이 개념들이 대규모 언어 모델(LLM)을 이용한 소프트웨어 테스트 생성에 있어 새로운 과제를 제기함을 보여줍니다. 특히, 미래의 회귀를 방지하는 강화 테스트와 코드 변경으로 인한 새로운 기능의 결함이나 회귀를 탐지하는 탐지 테스트의 특성을 조사합니다. 강화 테스트는 언제든지 생성될 수 있으며, 미래의 회귀를 탐지할 때 탐지 테스트가 될 수 있습니다. 또한, 새로운 결함이 운영 환경에 배포되기 전에 탐지하기 위해 테스트를 적시에 생성하는 '적시 탐지 테스트(JiTTest)' 챌린지를 정의하고 동기를 부여합니다. JiTTest 생성에 대한 해결책은 레거시 코드의 잠재적 결함을 탐지하는 데에도 활용될 수 있음을 보여줍니다. 강화 테스트, 탐지 테스트 및 JiTTest의 가능한 결과를 열거하고, 공개 연구 문제, 배포 옵션 및 Meta에서 수행한 자동화된 LLM 기반 강화 테스트에 대한 초기 결과를 논의합니다.
