Se for considerar apenas performance, eu acredito que são todos bem parecidos, tanto a engine v8 quanto da mozilla, no fim o que vai realmente diferenciar browsers são as features que cada um oferece e a privacidade.
Minha experiência foi mudando conforme o tempo passou, era 100% acostumado a usar o Chrome, logo parei para pesquisar a quantidade de informação que o google coleta do seu navegador e me preocupou.
Ainda nos navegadores mainstream (Chrome, Firefox, Opera, etc.), mudei para o Firefox por questões de privacidade, mas a mozilla (menos que o google) ainda coleta muita informação.
Decidi sair dos navegadores mainstream, e fui para o ungoogled-chromium, base chrome sem os trackers do google. Problemas: Não instala algumas extensões nativamente, não faz o sync com outros aparelhos.
Testei também o LibreWolf mas também tive problemas de compatibilidade.
No fim, uso o Firefox para o dia-a-dia por questões de sincronização entre aparelhos, e para algumas coisas mais sensíveis (como acessar contas de banco, investimentos, e afins) uso o Librewolf pela privacidade.

Edit: Tem um site bem legal que checa a privacidade dos browsers em modo geral e outro que faz um test especificamente com o seu browser