Eu ia sugerir exatamente xubuntu ou lubuntu. Lembrando que a interface gráfica delas é bem simples.
Respondendo a "Existem muitas distros Linux que são rápidas e..." dentro da publicação Recomende aqui Distros Linux rápidas para PC fracos ( ou alguma que você goste muito =) )
1