Wenn die Fritzbox nen Switchdrinne hat, wovon ich schwer ausgehe sollte das kein problem sein, auch mit dem wLan nicht.
Das einzigste wodrauf du achten musst, das du den DHCP-Server der Fritzbox geaktivierst, sonst wunderst du dich nachher das du nicht ins inet bekommst, weil du ne falsche IP addresse von der fritzbox zugewiesen bekommen hast.
Ich benutzte auch allte router als Switches wenn ich nix anderes zur hand habe, und das funktioniert immer 1a.