Connexion réseau d'un pc avec pc/mac

Bonjour,
Je dispose d'un abonnement internet chez magic online, et du vieux modem qui va avec.
Il y a quelques mois, nous avions deux pc branchés dessus, l'un avec un cable ethernet, et l'autre je n'arrive plus a me souvenir comment, car il a été enlevé et je ne retrouve plus la notice du modem.
J'ai maintenant deux nouveaux ordinateurs, un pc portable et un mac book... il faudrait que je puisse les brancher séparément ou simmultanément tout en gardant ma connexion sur le pc fixe...
Or pour l'instant je n'arrive à avoir internet sur les ordis portable qu'en débranchant l'ordinateur fixe et en les mettant a la place. pOur résumer, je n'arrive à avoir internet que sur un seul ordi a la fois...
avez vous une solution pour moi, qui n'ai pas de wifi, pour que je puisse avoir au moins un de mes ordis portables branchés a internet ?
merci beaucoup,
marine