Cara, eu sigo um pouco a linha do que o GabeGQA citou aqui nos comentários, eu também fiz ADS (inclusive na Fatec) e também tenho essa visão da importância da base de programção que é mais abordada no curso de ciência da computação, através principalmente das inúmeras matérias de matematica que o curso tem, porém isso é uma visão que eu fui ter somente hoje...
Trazendo para a minha experiência eu julgo que eu não teria a maturidade na época para enfrentar o curso de CC e ter um bom proveito, assim como eu teria caso o fizesse hoje. A experiência na área trabalhando como desenvolvedor me mostrou isso e me despertou o interesse de dar esse passinho para trás e agora complementar meus conhecimentos com uma base matemática mais sólida. Na época eu não veria muita relação deste monte de matemática com a prática de ter que programar sistemas, mas é como disse, a minha mentalidade e experiência naquele momento era completamente diferente.
Ainda na minha trajetória, eu não me arrependo do ADS (inclusive na época eu estava na mesma situação que você, com foco em outras faculdades, mas iniciei ADS mesmo pois foi a que eu havia passado), na verdade isso me colocou no mercado muito mais rápido, então acho que visando iniciar logo a carreira, pode ser um bom percurso a ser traçado, até mesmo porque nos primeiros passos no mercado, você será mais cobrado por ser eficiente e ter entregas do que ter um conhecimento super sólido na base de programação, porém, em paralelo a esse ingresso no mercado eu aconselho entrar nestes tópicos de estudo sim, pois são de extrema importância, mesmo que não seja através do curso de CC em si. O bom desta estratégia é que a medida que você ganha experiência de trabalho, você evolui para dar mais consistência a sua base e ser um programador mais completo e não só um "utilizador" de framworks para criar sistemas.
Agora ainda temos um ponto muito importante, eu fiz estes comentários todos utilizando o lado racional e batendo com minha trajetória, então é importante que entenda consigo mesmo se a formação em CC é realmente um sonho seu e se for, manda bala, nem todas as decisões precisam ser 100% racionais. Sendo que neste caso ainda dá um pouco mais de tranquilidade pois estamos falando para escolher entre duas boas opções, então não vejo risco de perda em nenhum dos dois caminhos.