Brancher un pc avec RJ11 sur box avec RJ45 ?

Bonjour, je possède un vieux portable (de 2006) et j'ai besoin de me connecter sur Internet via le câble vu que j'ai un problème avec ma connexion wifi (je n'entrerai pas dans ces détails qui font l'objet d'une autre question).
Seulement voilà : je possède une Freebox avec les fameuses prises ethernet RJ45 mais le hic c'est que mon portable a une sortie RJ11.
Il s'agit d'une prise identique à la RJ45 mais plus petite. Cela signifie-t-il que mon portable est prévu pour modem et n'est pas compatible avec la technologie adsl ? (en 2006 y avait pas l'adsl ?)

Si j'achète un cordon adaptateur RJ45>RJ11, est-ce que ça va marcher ?
Merci de vos réponses.