HSTS informiert Besucher doch nur, dass sie der Seite innerhalb eines bestimmten TTL-Zeitraums nur trauen sollten, wenn diese HTTPS anbietet.
Warum also nicht einfach eines neues Zertifikat verwenden?
Hier gibt es auch eine Anleitung um HSTS-Informationen aus dem eigenen Browser zu löschen:
https://andystechlife.wordpress.com/2016/09/18/how-to-clear-hsts-settings-in-chrome-and-firefox/