# NVS kaputt? und Probleme mit Umlauten bei backup.txt?

**URL:** <https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202>\
**Category:** Software\
**Tags:** dev\
**Created:** [17. September 2023 um 17:51 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202 "2023-09-17T17:51:21Z")\
**Posts on this page:** 17\
**Page:** 1

<div class="post-metadata">

**Author:** ![JHB](https://forum.espuino.de/letter_avatar_proxy/v4/letter/j/67e7ee/32.png) [@JHB](https://forum.espuino.de/u/JHB)\
**Post date:** [17. September 2023 um 17:51 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/1 "2023-09-17T17:51:21Z")

</div>

Hallo,

1. Problem  
bei der Musikbox von meinem Sohn scheint der NVS kaputt zu sein.

**HW:**  
ESP32 Lolin Pro  
auf HW von @biologist  
**SW:**  
dev-Branch

Schon angelernte Karte werden nicht mehr akzeptiert:

```auto
[48712] RFID-Karte erkannt: a3-c0-d4-32 
[48713] Card type: ISO-14443
[48716] RFID-Karte empfangen: 163192212050
[48725] Datei oder Verzeichnis existiert nicht: %s

[48735] Fehler aufgetreten!

[57250] RFID-Karte erkannt: a3-c0-d4-32 
[57251] Card type: ISO-14443
[57254] RFID-Karte empfangen: 163192212050
[57263] Datei oder Verzeichnis existiert nicht: %s

[57274] Fehler aufgetreten!

```

Dachte ich kein Problem, hast ja die backup.txt, also die eingelesen (vorher alle Zuordnungen gelöscht) aber nix da gleiches Verhalten.

Daher auf den neusten DEV Branch gewechselt da kann man die Zuordnungen ja sehen, aber auch da kaputt (siehe Anhang rfid.json, letzter Eintrag)  
[rfid.json.txt](https://forum.espuino.de/uploads/short-url/9AUzxXflHMcTVpKIlFueUEwgP9S.txt) (841 Bytes)

Obwohl deutlich mehr Einträge beim Backup eingelsen werden. (siehe hier die Log)  
[Log\_Backup\_einlesen\_FahlerBeiKarte.txt](https://forum.espuino.de/uploads/short-url/kJ0i3IQjieR1hGkCcCY4ywww5pX.txt) (7,6 KB)

Ich habe jetzt eine backup.txt mit nur 6 Einträge erstellt, jetzt kann er immerhin hören…

1. Problem  
Beim Zurückspielen ist mir aufgefallen das Umlaute aus der backup.txt nicht wieder richtig eingelesen werden.

Ist da was bekannt?  
hier die .txt, Ergebnis beim Einlesen siehe oben der Log  
[backup\_jonas.txt](https://forum.espuino.de/uploads/short-url/iLyQyeMbinLuBRqA7qGegFRCRYi.txt) (2,2 KB)

---

<div class="post-metadata">

**Author:** ![biologist](https://forum.espuino.de/user_avatar/forum.espuino.de/biologist/32/66_2.png) [@biologist](https://forum.espuino.de/u/biologist)\
**Post date:** [17. September 2023 um 20:50 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/2 "2023-09-17T20:50:53Z")

</div>

Hast du mal versucht ein Flash erase zu machen?

---

<div class="post-metadata">

**Author:** ![JHB](https://forum.espuino.de/letter_avatar_proxy/v4/letter/j/67e7ee/32.png) [@JHB](https://forum.espuino.de/u/JHB)\
**Post date:** [18. September 2023 um 05:59 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/3 "2023-09-18T05:59:54Z")

</div>

hatte ich oben vergessen, ja hab ich gemacht, gleiches Verhalten

---

<div class="post-metadata">

**Author:** ![biologist](https://forum.espuino.de/user_avatar/forum.espuino.de/biologist/32/66_2.png) [@biologist](https://forum.espuino.de/u/biologist)\
**Post date:** [18. September 2023 um 06:41 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/4 "2023-09-18T06:41:09Z")

</div>

Zum Thema Umlaute: Ich kann den Fehler bestätigen. Allerdings betrifft das nur die Dateinamen selbst. Umlaute in Pfaden scheinen keine Probleme zu machen.

Zum Thema NVS: Sehe ich ehrlich gesagt zum ersten Mal sowas. Also zB der ESPuino meiner Tochter dürfte schon \>2j alt sein und ist täglich in Gebrauch. Hast du da viel (salopp gesagt) „rumgespielt“? 🙂

---

<div class="post-metadata">

**Author:** ![JHB](https://forum.espuino.de/letter_avatar_proxy/v4/letter/j/67e7ee/32.png) [@JHB](https://forum.espuino.de/u/JHB)\
**Post date:** [18. September 2023 um 08:35 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/5 "2023-09-18T08:35:04Z")

</div>

> [@biologist](#):
>
> Umlaute in Pfaden scheinen keine Probleme zu machen.

doch bei mir auch im Pfad Probleme, ich verweise ja nur auf Ordner nie auf Dateien…

Ich glaube ich benötige dann mal ein weiteres Dev Board von dir 😃  
Das Gerät hier hat ja (noch) ein extern gekauftes Dev Board drauf…

---

<div class="post-metadata">

**Author:** ![biologist](https://forum.espuino.de/user_avatar/forum.espuino.de/biologist/32/66_2.png) [@biologist](https://forum.espuino.de/u/biologist)\
**Post date:** [18. September 2023 um 09:24 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/6 "2023-09-18T09:24:26Z")

</div>

Hehe, gerne.  
Ich habe allerdings aktuell (und seit einer Weile) nur noch FePo da.

---

<div class="post-metadata">

**Author:** ![JHB](https://forum.espuino.de/letter_avatar_proxy/v4/letter/j/67e7ee/32.png) [@JHB](https://forum.espuino.de/u/JHB)\
**Post date:** [18. September 2023 um 11:29 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/7 "2023-09-18T11:29:50Z")

</div>

Verdammt 🙃

Nur deswegen den Akku tauschen…

---

<div class="post-metadata">

**Author:** ![biologist](https://forum.espuino.de/user_avatar/forum.espuino.de/biologist/32/66_2.png) [@biologist](https://forum.espuino.de/u/biologist)\
**Post date:** [18. September 2023 um 18:02 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/8 "2023-09-18T18:02:49Z")

</div>

> [@JHB](#):
>
> doch bei mir auch im Pfad Probleme, ich verweise ja nur auf Ordner nie auf Dateien…

Ok, also ich hab’s mit nem Einzeltitel versucht, bei dem der Pfad Umlaute hatte und der Titel aber nicht. Das ging. Aber sobald der Titel selbst Umlaute hatte war’s rum.

---

<div class="post-metadata">

**Author:** ![JHB](https://forum.espuino.de/letter_avatar_proxy/v4/letter/j/67e7ee/32.png) [@JHB](https://forum.espuino.de/u/JHB)\
**Post date:** [20. September 2023 um 19:31 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/9 "2023-09-20T19:31:25Z")

</div>

okay neuer ESP32 Dev Board, gleiches Verhalten… ich vermute gerade einen dicken Bug…

---

<div class="post-metadata">

**Author:** ![JHB](https://forum.espuino.de/letter_avatar_proxy/v4/letter/j/67e7ee/32.png) [@JHB](https://forum.espuino.de/u/JHB)\
**Post date:** [21. September 2023 um 08:05 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/10 "2023-09-21T08:05:38Z")

</div>

Also NVS ist nicht kaputt…

ein simples

```auto
//DEBUG
	String s=gPrefsRfid.getString("019228129022"); //tauscht nicht in der rfid,json auf
	Log_Printf(LOGLEVEL_DEBUG,s.c_str());

```

am Ende der setup() sorgt für den richtigen Output, daher die Daten sind da!

Auch lassen sich die Karten abspielen!

Ich vermute oben einen Fehler aufgrund der Umlaute im Namen vom Verzeichniss und einen Fehler in der Auflistung der RFIDs  
@tueddy Kannst du da mal schauen was da los ist?

EDIT:  
hab eben meine backup.txt von Umlauten befreit und dann die Ordner auf der SD Karte auch umbenannt, und schon läuft alles wieder wie vorher…

Das ist also an mehr als einer Stelle noch was schief mit den Umlauten

Der Fehler mit unvollständigen rfid.json ist geblieben @tueddy

---

<div class="post-metadata">

**Author:** ![sfields](https://forum.espuino.de/letter_avatar_proxy/v4/letter/s/f08c70/32.png) [@sfields](https://forum.espuino.de/u/sfields)\
**Post date:** [21. September 2023 um 10:50 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/11 "2023-09-21T10:50:18Z")

</div>

Hast du die rfids auf einer älteren dev oder gar master angelernt und dann auf der aktuellen dev darauf zugegriffen? Da kann ich bestätigen, dass es Probleme mit Umlauten gibt. Muss man neu anlernen, dann geht es wieder. Da gab es wohl irgendwann mal eine Änderung, wie mit Umlauten umgegangen wird.

---

<div class="post-metadata">

**Author:** ![JHB](https://forum.espuino.de/letter_avatar_proxy/v4/letter/j/67e7ee/32.png) [@JHB](https://forum.espuino.de/u/JHB)\
**Post date:** [21. September 2023 um 10:57 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/12 "2023-09-21T10:57:22Z")

</div>

jup hab ich, danke für die Info.

---

<div class="post-metadata">

**Author:** ![tueddy](https://forum.espuino.de/user_avatar/forum.espuino.de/tueddy/32/22_2.png) [@tueddy](https://forum.espuino.de/u/tueddy)\
**Post date:** [24. September 2023 um 19:33 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/13 "2023-09-24T19:33:49Z")

</div>

Hallo zusammen,

zunächst Danke an @JHB für die ausführiche Fehleranalyse! Kaputtes NVS ist ja auszuschließen, zur Software:

> [48725] Datei oder Verzeichnis existiert nicht: %s

Log-Meldung ist schon blöd wenn man das Verzeichnis nicht sehen kann, hab’s angepasst

> Ich vermute oben einen Fehler aufgrund der Umlaute im Namen vom Verzeichniss und einen Fehler in der Auflistung der RFIDs

Jepp, beides!

> Daher auf den neusten DEV Branch gewechselt da kann man die Zuordnungen ja sehen, aber auch da kaputt (siehe Anhang rfid.json, letzter Eintrag)  
> [rfid.json.txt](https://forum.espuino.de/uploads/short-url/9AUzxXflHMcTVpKIlFueUEwgP9S.txt) (841 Bytes)

Letzter Eintrag ist vollständig im NVS, wurde aber leider nicht komplett über den neuen Endpunkt /rfid ausgeliefert, der JSON Puffer war zu klein. Der ist jetzt zwar größer und hat Platz für ca. 100 Einträge, trotzdem könnte es sein das nicht alle Einträge anzeigt werden. Das wurde [hier](https://forum.espuino.de/t/rfc-migration-zu-neuer-weboberflaeche/2013/48) bereits angemerkt.

Ich hatte die Datei „rfid.json.txt“ mal über den NVS Import hochgeladen und bekam prompt einen Buffer-Overflow Absturz. Das ist jetzt [hier](https://github.com/biologist79/ESPuino/blob/b030425ffafb811c34c5c5e4e55ee99d0c04f538/src/Web.cpp#L1804) abgefangen.

Umlautproblem: Im Dateisystem des Master wird noch OEM 852 (MS-DOS) verwendet! Dateisystem des DEV-Branch verwendet UTF-8. Daher wird sich ein Backup des Master nicht ohne Umlautfehler einlesen lassen. Das wäre evt. auch wichtig für eine Migration. Was tun? Entweder manuelles Ändern z.B. mit Notepad++ oder eine automatische Erkennung des Zeichensatzes? Wir könnten beim Erstellen auch ein [BOM-Marke](https://de.wikipedia.org/wiki/Byte_Order_Mark)r schreiben? Gern Vorschläge!

---

<div class="post-metadata">

**Author:** ![JHB](https://forum.espuino.de/letter_avatar_proxy/v4/letter/j/67e7ee/32.png) [@JHB](https://forum.espuino.de/u/JHB)\
**Post date:** [25. September 2023 um 04:07 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/14 "2023-09-25T04:07:21Z")

</div>

> [@tueddy](#):
>
> der JSON Puffer war zu klein. Der ist jetzt zwar größer und hat Platz für ca. 100 Einträge

das war/ist meine ich der aktuelle Stand, wo kann ich die Buffer Größe nachgucken?

(Ich habe ~30 Einträge im NVS)

---

<div class="post-metadata">

**Author:** ![tueddy](https://forum.espuino.de/user_avatar/forum.espuino.de/tueddy/32/22_2.png) [@tueddy](https://forum.espuino.de/u/tueddy)\
**Post date:** [25. September 2023 um 07:07 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/15 "2023-09-25T07:07:01Z")

</div>

Der JSON-Puffer wird [hier](https://github.com/biologist79/ESPuino/blob/b030425ffafb811c34c5c5e4e55ee99d0c04f538/src/Web.cpp#L1657) festgelegt, er war zunächst mit 1024 Bytes sehr klein, jetzt 8KB.  
Aktueller Softwarestand ist `20230924-1`

---

<div class="post-metadata">

**Author:** ![JHB](https://forum.espuino.de/letter_avatar_proxy/v4/letter/j/67e7ee/32.png) [@JHB](https://forum.espuino.de/u/JHB)\
**Post date:** [25. September 2023 um 17:09 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/16 "2023-09-25T17:09:01Z")

</div>

> [@tueddy](#):
>
> trotzdem könnte es sein das nicht alle Einträge anzeigt werden.

Vorm Hinzufügen ob noch genug Platz im Buffer, damit das json auf jeden Fall „korrekt“ ist? mit letzem Eintrag „hier sollte noch mehr stehen…“?

BOM Marker hört sich gut an

---

<div class="post-metadata">

**Author:** ![tueddy](https://forum.espuino.de/user_avatar/forum.espuino.de/tueddy/32/22_2.png) [@tueddy](https://forum.espuino.de/u/tueddy)\
**Post date:** [26. September 2023 um 07:20 UTC](https://forum.espuino.de/t/nvs-kaputt-und-probleme-mit-umlauten-bei-backup-txt/2202/17 "2023-09-26T07:20:25Z")

</div>

> <https://github.com/biologist79/ESPuino/commit/97e536424a8f16571c88567c7878507322fd5e4c>

Umlaute sollten jetzt passen, UTF-8 BOM wird geschrieben, das erleichtert auch die manuelle Bearbeitung z.B. mit Notepad++. Import eines Backups aus dem Master mit Umlauten klappt auch.
