Trong bài báo này, chúng tôi đề xuất IPCGRL, một phương pháp tạo nội dung thủ tục dựa trên hướng dẫn học tăng cường. IPCGRL nén hiệu quả các điều kiện ở cấp độ trò chơi bằng cách tích hợp các mô hình nhúng câu, và tinh chỉnh biểu diễn nhúng cho các tác vụ cụ thể. So với các phương pháp nhúng thông thường trên các tác vụ tạo cấp độ hai chiều, chúng tôi chứng minh rằng IPCGRL cải thiện khả năng điều khiển lên đến 21,4% và hiệu suất tổng quát hóa cho các hướng dẫn chưa biết lên đến 17,2%. Điều này cho phép một khuôn khổ tương tác tạo nội dung thủ tục linh hoạt và biểu cảm hơn bằng cách mở rộng phương thức nhập liệu có điều kiện.