Besorg dir doch eines der zahlreichen Plugins wie AlwaysOnline, um automatische Reconnects machen zu lassen. Behebt zwar nicht die Ursache, aber den Router kannste dir dann ja in Ruhe ansehen...
Sobald das Problem erneut auftritt, sieh in die Verbindungs-Logs des Routers. Wenn er zu dem Zeitpunkt eine Verbindung neu aufgebaut hat, funktioniert das Keep-Alive nicht richtig oder der Router ignoriert es. Dürfte aber auch nur relevant sein, wenn der Router nicht auf dauerhafte Einwahl konfiguriert ist.