Relier 2 pc en rézo avec un routeur: cables?

Bonjour je sais que c'est pas un forum spécialisé pour ça mais bon tanht pis je me lance ...
J'ai 2 pc que j'aimerais relier en réseau et à Internet de facon a ce que si j'éteigne un des pc l'autre puisse continuer à etre relié au net. J'ai donc penser à utiliser un routeur.
Je pensais donc relier mon routeur à mon modem Freebox par le cable livré avec mais quant est til des pc que je dois relier au routeur:
puis-je utiliser un cable RJ45 croisé (sachant que j'en ai déjà un comme ca ca meviterait d'en racheter un de type RJ45 tout simple)pour relier mon pc au routeur ou ca marche peut etre avec les deux types de cables. Y'a t'il un impératif de ce coté la ?
J'aimerais donc avoir plus de renseignements à propos du type de cable à utiliser.

Merci :)