Escolher utilizar ou não o Next.js não deve ser uma decisão pautada apenas na sua familiaridade com as tecnologias. Para começar essa conversa ao meu ver só cabe à gestores e empresários. Você provavelmente é apenas um funcionário e por isso pensa dessa forma.
A argumentação que você trouxe à tona poderia se encaixar para qualquer outro framework. As ferramentas como Next.js, React, entre outras, são adotadas primariamente com a intenção de otimizar o tempo de desenvolvimento, permitir uma melhor componentização e possibilitar a escrita de um código mais eficiente.
Em relação ao Next.js, o principal ponto de atenção é a condição "imposta" pela Vercel para utilização de sua plataforma de hospedagem de tentar lhe amarrar aos recursos de sua hospedagem.
Entretanto, é importante ressaltar que já existem iniciativas que buscam replicar a infraestrutura do Next.js na AWS.
Ao optar por um determinado framework, a decisão não deve ser baseada no quão profundo é o seu conhecimento sobre o mesmo. Essas escolhas precisam ser embasadas em critérios como o custo, a eficácia e a lucratividade que a ferramenta pode trazer para o seu projeto.
O seu texto sugere que você enxerga a situação pela perspectiva de um empregado. Contudo, os rumos da tecnologia são comumente guiados por empresários e gestores. No meu ponto de vista, eu prefiro utilizar o Next.js, principalmente devido à qualidade que esta ferramenta confere ao produto final e à produtividade que ela proporciona. Sobre o aspecto financeiro, eu considero que a hospedagem na Vercel tende a ser mais econômica que na AWS dependendo do tamanho da equipe.
Adicionalmente, se houver a necessidade de expandir a equipe, há opções disponíveis que mistigar a infraestrutura da Vercel. Particularmente hoje para a minha empresa vale muito a pena entregar softwares usando a vercel. A hospedagem é excelente, as featuares também e tem me dado muito lucro. Para mim hoje só pelo suporte e qualidade do serviço já está compensando.