Mise en place d'un réseau

Bonjour,

Je voudrais mettre en place un réseau chez moi pour jouer à Counter Strike en Lan. J'ai donc sorti de mon placard un routeur. Je ne m'y connais absolument pas aux niveaux de réseau.
Je vous explique ce que j'ai fait, et peut être, pourrez vous m'aider. Donc, j'ai branché sur mon routeur le câble internet qui relie le mur au routeur. Ensuite, je branche, avec un autre câble, un ordi au routeur. Puis, je branche un 2em ordi mais a partir d'une autre prise internet dans une autre pièce de ma maison.
Lorsque que je crée une partie, l'ordi branché au routeur ne peut pas rejoindre l'ordi branché a une prise normale et vice versa. D'où vient le problème ? Faut-il effectuer des réglages sur au niveau du routeur ?

Je vous remercie pour vos futures réponses !