본 논문은 스마트 제조 환경에서 산업용 로봇의 동적 적응 제어를 향상시키기 위해 Soft Actor-Critic (SAC) 알고리즘과 디지털 트윈을 통합하는 프레임워크를 제시합니다. Unity 시뮬레이션 환경과 ROS2를 결합하여 디지털 트윈과의 원활한 동기화를 구현하고, 전이 학습을 활용하여 학습된 모델을 다양한 작업에 효율적으로 적용합니다. Viper X300s 로봇 팔을 이용하여 계층적 보상 구조를 적용한 두 가지 제어 시나리오에서 실험을 진행, 시뮬레이션 및 실제 환경 모두에서 빠른 정책 수렴 및 견고한 작업 실행을 보여주며 제안된 방법의 효과를 입증합니다.