De mémoire, il me semble que les paquets Evolution installent aussi Spamassassin. Est-ce que ce n'est pas cela qui ralentit la réception des mails ?
La solution que j'ai adoptée est de rapatrier mes mails en arrière-plan via fetchmail, de les filtrer via Procmail, d'avoir Spamassassin qui tourne en démon, puis de les lire sous Evolution.