De toutes façons, le problème vient du routeur, puisqu'avec celui de ton FAI, tu sors, n'est-ce pas ?
Donc, puisque tu ping www.google.fr, ça signifie que les DNS sont corrects, que la couche physique fonctionne. C'est donc au niveau de la couche applicative que ça ne fonctionne pas, tu es d'accord avec mon raisonnement ou pas ?
Dans la mesure ou la réaction de Firefox et d'ie est la même, je pencherais pour un problème juste en dessous, au niveau de l'OS. Qu'en penses-tu ? As-tu bien vérifié les paramètres de connexion au réseau local et à internet dans Windows ? (je suppose que oui, mais faut tout vérifier )