Modem + wifi + routeur j'y comprend rien

Bonjour,
Alors je voux explique mon problème :
J'ai un ordinateur fixe situé dans une pièce, il se connecte à internet grace a un routeur usb, il emet les ondes wifi grace a une clé usb wifi ce qui permet a mes autres appareils de se connecter a internet (mon ordinateur situé dans une autre pièce entre autre)
Et donc le probleme c'est que lorsque je télécharge un fichier la connection saute sur le pc du bas relié par modem usb et je dois debrancher ce modem et le rebrancher ou sinon des fois j'ai des coupures de wifi je ne sais pourquoi.
Alors ce que je voudrais c'est povoir me connecter a internet tanquillement sans poblemes avec tous mes ordis et tout mon matériel
Je penais acheter un routeru mais appraent ca ne marche pas avec un modem usb donc pour l'instant je n'ai trouver que deux choix :
-le premier etant l'achat d'un modem routeur
- l'autre l'achat d'un modem ethernet + mac lé wifi
(j'ai aussi penser prendre une livebox mais mes parents ne sont pas d'accord ... ^^)
Voila je voudrais savoir qe faire sachant que j'ai un assez petit budget et que je ne m'y connais vraiment pas en réseau

je vous remercie d'avance