Débit instable - grosse grosse chute de débit

Bonjour,

J'ai une connexion internet en ADSL, j'ai fait le test avec speedtest.net j'ai un débit descendant d'environ 13Mb/s soit 1.6Mo/s.
Je subit cependant depuis une petite semaines de grosses pertes de débit, en effet mon débit descend à quelque chose de l'ordre de 40ko/s :/ ça c'est surtout fait ressentir sur les vidéos sur youtube ou autre.
Récemment je suis allé jusqu'à mesurer jusqu'à 2ko/s pendant une bonne heure, soit 800x moins que ma connexion normale...

Le plus étrange est que lors de ces chutes de débit, si je fais un test de co avec speedtest il ne détecte pas d'altération de débit, je suis toujours à 13Mb/s. De plus mon ping reste très correct je peux aisément jouer aux jeux en ligne (PayDay 2 dans mon cas)...

Es-ce que quelqu'un aurait une idée d'où pourrait venir cette subite chute de connexion ? J'en ai marre de payer cher une connexion aussi naze, j'ai un peu l'impression de me faire entuber...

Je soupçonne l'installation de la fibre dans mon immeuble d'y être pour quelque chose, surtout que j'ai l'impression que les chutes de débit se déclare au moment des "heures de pointes sur Internet" (le soir à partir de 17h-18h et les w.e)

MErci de vos aides !

(J'ai déjà posé la question ici mais n'ayant pas de réponses, je la repose ici en espérant que quelqu'un me réponde...)
https://forums.commentcamarche.net/forum/affich-31132944-debit-instable-grosse-chute-de-debit