본 논문은 지반 투과 레이더(GPR)를 이용한 도로 하부 손상(RSD) 탐지의 자동화를 위한 딥러닝 기반 접근법을 제시한다. 기존 딥러닝 기법의 한계점인 고품질 데이터 부족 및 RSD 식별 성능 저하 문제를 해결하기 위해, 다양한 유형의 2134개 샘플을 포함하는 엄격하게 검증된 3D GPR 데이터셋을 구축하였다. YOLO 모델을 이용하여 GPR 이미지 3종 스캔 데이터를 학습시킨 결과, 특정 RSD 유형에 대한 민감도가 다르다는 것을 발견하고, 이를 바탕으로 정확도가 뛰어난 새로운 교차 검증 전략을 제안하였다. 현장 테스트 결과, 98.6% 이상의 재현율을 달성하였으며, 온라인 RSD 탐지 시스템에 통합하여 검사 노력을 약 90% 감소시킬 수 있음을 보였다.