se no docker-compose vc abrir a porta 22 de cada container, remapeando para outras portas locais e tiver o ssh configurado dentro desses containers ai vc consegue fazer um ssh do seu terminal pro container.

só não sei se vc conseguir chegar no container por causa da rede bridge