Nein. Nicht nur der Stecker ist anders, sondern auch die Signalisierung. Der Router erwartet, über seine RJ45-Ports mit Ethernet zu sprechen, die Telefonleitung bietet jedoch normalerweise ADSL, das verschiedene elektrische Signale verwendet und auch unterschiedliche Datenformate enthält.
(Ganz zu schweigen davon, dass die übliche Art von Ethernet mindestens zwei verdrillte Paare erfordert - vier für GbE - und die meisten Telefonleitungen, die ich je gesehen habe, haben nur ein Kabelpaar ...)
Sie müssen also das ADSL-Signal irgendwie in ein Ethernet-Signal umwandeln, und da @sawdust bereits in den Kommentaren erwähnt wurde, spricht man von einem "DSL-Modem".