Ja und nein.
Also, du solltest keinen Kabel auftrennen und zwei zusammenbasteln. Das funktioniert nicht.
Du kannst an stelle dessen einen Switch oder Hub einsetzen.
Es kann sich immer nur ein Gerät bei deinem ISP einwählen.
Wenn man einen Router hat, dann übernimmt dieser diese Rolle und gibt dann die Verbindung an die angeschlossenen PCs weiter.
Du kannst natürlich auch einen PC die Rolle des Routers übernehmen lassen.
Dann wält dieser sich ein und reciht die Internetverbindung dann an weitere PCs weiter. So könnten auch mehrere PCs gleichzeitig online sein ohne einen separaten Router (der Router ist in diesem Fall ja der PC der sich einwählt). Nachteil dieser Methode ist aber natürlich, das wenn der PC der die Verbindung zum Internet herstellt, ausgeschaltet ist, auch die anderen Rechner nicht mehr ins Internet kommen.
Wie du in dem oben genannten Beispiel ohne einen separten Router die PCs untereinander vernetzt ist relativ egal.
Sind es mehrere, dann empfielt sich natürlich ein Hub für eine bessere Lastverteilung im Netzwerk ein Switch, wo bei das bei einem 100Mbit Ethernet mit einer Hand voll PCs, fast egal ist.
Wenn du nur zwei PCs hast, dann könntest du den zweiten PC theoretisch auch direkt an dem ersten anschließen. Dann bräuchtest du weder Router, noch Switch oder Hub sondern lediglich eine zweite Netzwerkkarte.