Geht mit der Stock Firmware nicht, aber mit der neuen Labor Firmware.

https://avm.de/fritz-labor/frisch-aus-der-entwicklung/neues-und-verbesserungen/einfacher-telefonieren-mit-fritzbox-6850-direkt-ueber-die-mobilrufnummer-ihrer-sim-karte-anrufen/

Links auf “Übersicht” klicken

Dann das entsprechende Gerät auswählen (bei mir 6850 LTE) und

Wenn Ihre FRITZ!Box mit dem aktuellen FRITZ!OS ausgestattet ist, können Sie mit der Installation der Laborversion beginnen.

1. Lesen und bestätigen Sie den angezeigten Hinweis.
2. Klicken Sie auf "Download" und speichern Sie die Datei auf Ihrem Computer.
3. Entpacken Sie die Labor-Datei (*.zip).
4. Führen Sie das Update über die Benutzeroberfläche der FRITZ!Box durch und wählen Sie in der Fußzeile "Ansicht: Erweitert" aus.
5. Wählen Sie im Menü "System / Update".
6. Wählen Sie die Registerkarte "FRITZ!OS-Datei". Sichern Sie die Einstellungen Ihrer FRITZ!Box.
7. Geben Sie dann den Namen der Laborversion samt Pfad in das Eingabefeld ein (z. B. C:\Dokumente und Einstellungen\Benutzername\Desktop\FRITZ!Box-Labor-xxxx.image).
8. Klicken Sie auf "Update starten".
9. Folgen Sie den Anweisungen auf dem Bildschirm.

Dann

• Nach der Anmeldung auf der Benutzeroberfläche Ihrer FRITZ!Box klicken Sie im Menüpunkt "Telefonie / Eigene Rufnummern" auf "Neue Rufnummer" und wählen Sie "Mobilrufnummer" aus.
• Geben Sie nun noch Ihre Mobilrufnummer (ohne Landesvorwahl) in das entsprechende Feld ein und klicken Sie abschließend auf "Übernehmen".

... und schon kann es mit dem Telefonieren losgehen.