Ich habe einen älteren Allnet-Router, den verwende ich nach wie vor, als "Vorschaltgerät", für alle Computer - außer WLAN.
Die Fritzbox bekommt die Datenpakete von außen (WAN) und verteilt sie, auf die angeschlossenen Geräte.
Möglich wäre, dass Du in der Konfiguration einstellen kannst, dass die an der Fritzbox angeschlossenen Computer aufeinander zugreifen dürfen, aber das ist irgendwie was anderes, ich habe das schon mal versucht. So richtig eine Fritzbox nur als Router nutzen?

MfG