Das wird von Router zu Router unterschiedlich sein, aber machbar ist es sicher im Router-Interface wo man sich vorher einloggen muss. Wenn Du die Sperre selbst eingerichtet hast, dann kennst Du ja sicher auch die Zugangsdaten.

Jedes Router-Interface ist auch anders aufgebaut. Du schaust am besten mal in die Bedienungsanleitung des Routers, falls diese noch vorhanden ist oder gibst den Namen des Routers bei Google ein und suchst darüber nach der Bedienungsanleitung oder direkt nach der Option "Kindersicherung".

Deaktivieren wird man die Zeitbegrenzung in dem Bereich, wo man sie auch festgelegt hat.