La locura de reactor
Lo ideal sería que mostraras un Vista lateral para poder ver mejor el comportamiento tras la colisión. En prinicipio con el video que muestras da la impresión de que la torre empieza a caer antes del impacto, o al mínimo toque.
Cosas:
Activa la opción inactive en los ladrillos de la torres, de esta forma no reaccionaran hasta recibir un impacto.
Por lo demás es cuestión de ajustar bien parámetros como el world scale, el col tolerance, y en los ladrillos jugar con los parámetros de elasticidad y fricción.
Los ajustes de estos parámetros van supeditados a la escala en la que trabajes y al valor garvitacional, por lo que es imposible darte unos valores funcionales sin más.
Por favor... dignifiquemos esta profesión... dignifiquemos.