Create certificate with XCA signed by your own CA.

Export Certificate in PEM format with key.

Navigate (German interface)

• Internet
  • Freigaben
    • Tab “Fritz!Box-Dienste”
    • Scroll down to “Benutzereigenes Zertifikat”
    • Browse … (select file)
    • Click “Importieren”
    • Wait for message “SSL Zertifikat wurde erfolgreich importiert”
• System
  • Sicherung
    • Tab: Neustart
      • Click “Neu starten”

References:

• https://en.avm.de/service/fritzbox/fritzbox-5490/knowledge-base/publication/show/1525_Importing-your-own-certificate-to-the-FRITZ-Box/
• Aktualisiert nach Erfahrung mit FRITZ!OS:7.57