Ich verstehe die Frage nicht ganz. Was meinst du mit "PC fernsteuern"? Auf jeden Fall brauchst du dazu ein Netzwerk und das hast du ja mit dem Router schon, denn dieser hat 4 LAN-Ports. Mehr musst du dort auch nicht konfigurieren! Du bewegst dich ja innerhalb des LAN, daher gibt es keine Firewall Regeln oder ähnliches zu beachten. Einfach Kabel anschliessen, fertig. Dann kannst du auf jedem PC nachschauen, welche IP-Adresse er zugewiesen bekam, z.B. im DOS-Fenster den Befehl "ipconfig" oder "ipconfig /all" eingeben. Für den Rest kommt es wie gesagt darauf an, was du unter fernsteuern meinst (ev. nur Windows Remote Desktop oder VNC oder...?).

musst nachschaun welche ip dein router hat aber die könnte es sein.. dann musst oben im explorer "http://192.168.~.~" (~ stehen für die ip die ich nicht von deinem router weiß :) )

wenn da nichts kommt gehst systemsteuerung netzwerk status von deiner verbundung zum router deteils und dann stehen da ganz viele ips mit 192.198.~.~ kannst alle mal versuchen :)