Il est tout à fait normal que tu ne puisses pas déconnecter ton ordinateur, car ce n'est pas lui qui est connecté à Internet mais c'est le modem routeur. Ce dernier sert de serveur et ton ordinateur est un "client" de ce serveur. Même quand tu éteins ton ordinateur, tu restes connecté. La connection est permanente, sauf si tu débranches le modem routeur.
C'est toute la différence avec un modem qui connecte simplement ton ordinateur sur le réseau Internet.
Ensuite, si tu rajoutes d'autres ordinateurs par câble ou par WiFi, tu ne fais que rajouter des "membres" à ton réseau ethernet qui est lui-même relié à l'internet par l'intermédiaire de la passerelle réalisée par le modem routeur.