Vielen Dank für eure Hinweise.
Habe jetzt die Shelly's nochmal zurückgesetzt und dann alle Einstellungen direkt über die IP der Geräte vorgenommen.
Zum einen die Infos zum Einschalten als auch das Ausschalten der LED's.
Zusätzlich habe ich die Shelly's in ein Wlan mit einem Namen ohne Sonderzeichen aufgenommen.
Nun bleiben die LED's aus und bisher (heute) noch kein ungewolltes Ausschalten.
Mal sehen wie es weiter geht in den nächsten Tagen.
Bisher sieht es ganz gut aus.