La stabilité de ta connexion ne devrait pas dépendre de l'utilisation ou non de ton routeur. Peut être d'une maintenance de ton fournisseur ou de France telecom.
On peut vérifier les paramètres de ta connexion.
Clic droit sur l'icone réseau de la zone de notification + Etat + Propriétés, tu glisse sur Protocole Internet (TCP/IP) Propriétés, tu dois avoir cliqué els 2 cases " ... automatiquement".
Par ailleurs je suppose que le pilote de ta carte réseau est à jour.