Bon, des fois on n'est servi que par soi même.
Voici les chipsets sur lesquels je suis tombé et les retours que j'ai pu recenser :
VIA VL800/801 : a éviter, des soucis divers et variés (mauvais support Linux, pas mal de bugs), incompatibilités avec certains périphériques.
NEC/Renesas μPD720202 : En quelque sorte une référence car super répandu. Bon chipset, mais difficile de trouver les derniers drivers.
Fresco Logic FL1100SX (2-port) and FL1100EX (4-port) => Mon choix final. Bon chipset, fiable, pas d'incompatibilités remontées même avec certains périphériques capricieux (Oculus Rift par exemple). On trouve par exemple ce chipset dans les cartes Inateck avec un PCB rouge.