Réseau local Box SFR + TV + 2 PC

Bonjour,

J'aimerai savoir s'il est possible, via des prises RJ45 murales dans tout l'appartement, de créer un réseau local ?

Je possède une SFR Neufbox4 et j'aimerai relier deux PC fixes, un PC portable, une PS3 et le décodeur SFR TV à internet sans passer par le wi-fi (à la limite, ok wi-fi pour la PS3 et le PC portable).
Cependant, vivant dans un appartement relativement petit, je ne peux que mettre les deux PC fixes dans la même pièce (reliés à la box pour l'instant) et la PS3 et le décodeur dans la salon.

Or, l'appartement est équipé en prises murales RJ-45 (1 dans le salon, 1 dans la cuisine, 1 dans la chambre) + une prise gigogne TEST dans l'armoire électrique.
Je me demandais donc s'il était donc possible via ces prises de connecter mon décodeur et tout le reste à la box, de préférence sans trop débourser (les adaptateurs CPL coûtent cher), et sans faire de trou dans les murs (;

Merci d'avance de vos réponses, si vous voulez plus de précisions, ou si je ne suis pas clair, dites le moi (: