En este artículo, presentamos un nuevo punto de referencia para la colaboración entre humanos y IA en entornos con limitaciones físicas: "Moving Out". Moving Out refleja diversos modos de colaboración afectados por propiedades y limitaciones físicas, como mover objetos pesados juntos o mover objetos en esquinas. Diseñamos dos tareas y recopilamos datos de interacción entre humanos para evaluar la adaptabilidad del modelo a diversos comportamientos humanos y propiedades físicas impredecibles. Para abordar los desafíos de los entornos físicos, proponemos un novedoso método denominado Aumento, Simulación y Selección del Comportamiento (BASS) para mejorar la diversidad del agente y su comprensión de los resultados conductuales. Los resultados experimentales muestran que BASS supera a los modelos más avanzados en la colaboración entre IA y entre humanos y IA.