Nenene, switch vůbec nemusíš potřebovat.
Zapoj routery mezi sebou bez použití WAN portu (tedy přes LAN porty). Tím použiješ na jednom routeru jen switchovou část.
Jeden z routerů pak WANem zřejmě připojuješ k modemu, ne?
Zkontroluj, že DHCP server je zapnutý jen na jednom routeru, poool přidělovaných adres je dostatečně velký, že nedochází ke kolizím v IP adresách obou routerů.
PS:
K přesnější radě by se hodily IP adresy routerů, modemu, jejich typy a výpis příkazu ipconfig /all z PC.