Box et prise RJ45 appartement

Bonjour à tous.
J'ai emménagé récemment dans un appartement et il y a des prises RJ45 partout.
J'aimerais donc faire passer mon réseau internet via ces prises.
Je pensais qu'il suffisait de brancher la box a une des prises et que j'aurais internet dans une autre pièce en sortie mais ça ne fonctionne pas.
Quelqu'un saurais ce que je dois faire au niveau de ma box pour que ça fonctionnera ?

Merci d'avance.