Exato!

Para uma infraestrutura como a sua, deve funcionar uma configuração como:

https://oracle.heuder.com.br/ {
    reverse_proxy 10.10.10.13
}

Você pode adicionar quantos subdomínios quiser, só adicionar mais entradas como essa no arquivo de configuração.

A configuração acima não foi testada, mas deve funcionar. Use como exemplo.

Uma vantagem também de reverse proxies é encriptar o trafego HTTPS. Desse modo, seu servidor web ou algum servidor de uma API não precisa gastar tempo com certificados digitais, e esse trabalho fica para a proxy - que é muito mais eficiente nisso. Então, o trafego entre seus servidores será HTTP, que, dentro de uma rede fechada ( privada ), não tem problema, e só quando o trafego sai para internet ele é devidamente encriptado. Vale a pena pesquisar sobre isso também.