Je te conseille plus le matos Netgear (DG834G) qui a un modem et un firewall intégré.
Sinon, ça risque de ne pas marcher car ces routeurs sont à priori dédiés à l'accès Internet et ne pourront pas se causer l'un à l'autre, il te faut donc pas deux routeurs, mais un seul, relié à l'ADSL, au PC du RCD par Ethernet et par WiFi aux 2 PC de la cave : ajouter 1 carte WiFI de la même marque que le routeur (en .g c'est nécessaire tant que les produits respectant à 100% la norme ne sont pas dispo) dans chacun des PC de ta cave. Si tu peux, prends des cartes avec antenne "à ralonge" de manière à pouvoir mettre tes antennes le plus pres possible de ton routeur.
Autre solution, mettre un point d'accès en mode pont à la cave, partagé par les deux PC (en Ethernet via un switch), et le routeur en mode pont vers ce point d'accès.
Au passage, rien ne te dit que les ondes WiFi passeront de la cave au RDC, c'est un peu un coup de poker...