Werte vom Datenpunkt in CSV-Datei schreiben *gelöst*

[surfer09]

Hallo zusammen,

ich würde gerne regelmäßig die Werte von einem Datenpunkt in eine CSV Datei schreiben lassen. Die neuen Daten sollen in der CSV ergänzt werden.
Der Datenunkt wird immer um 23:30 Uhr befüllt und um 23:59 Uhr wieder auf 0 gesetzt. Die Null-Werte sollen nicht übernommen werden. Vielleicht gibt es eine Blockly Lösung hierfür?
Ich habe mich schon an Node-Red versucht, aber da bin ich leider gar kein Experte von.
Danke im Voraus!

Gruß surfer

[mickym]

@surfer09 ich habe diese Aufgabe in Node-Red mit fertigen Flows hier schon mal entwickelt, die müsstest Du doch nur importieren. Suche mal den thread.

[surfer09]

@mickym Hallo Micky! Ich hatte vorhin schon einen Beitrag von dir gefunden, aber das funktionierte irgendwie nicht. Vielleicht hatte ich auch den falschen erwischt...

Dieser hier war das...

https://forum.iobroker.net/topic/49120/datenpunkt-in-log-oder-csv-file-schreiben?_=1654435736394

[mickym]

@surfer09 Genau und in diesem Post habe ich doch den Flow gepostet: https://forum.iobroker.net/topic/49120/datenpunkt-in-log-oder-csv-file-schreiben/34?_=1654435736394

und wenn was nicht funktioniert, dann muss man das halt Punkt für Punkt durchgehen. In dem Thread hat es ja funktioniert. -

Das einzige was man ggf. noch davor bauen muss, ist nach dem Datenpunkt auslesen eine switch Node als Filter für Dein Zeitfenster.

[surfer09]

@mickym Puhhh... bei mir gehts schon damit los, wie ich den entsprechenden Datenpunkt in Node bekomme..
Ich habe jetzt mal diesen hier genommen (würde vom Namen "inject" mal davon ausgehen, das man hier die zu verarbeitenden Daten reinkippt )
Aber wo wähle ich denn jetzt den Datenpunkt aus, um den es geht?

[mickym]

@surfer09 Nein - mit der Inject Node kannst Du selbst Daten in einen Flow einspeisen, um das Ganze zu testen. Die Daten selbst bekommst Du über die iobroker IN Node. Da kannst Du den Datenpunkt direkt im Topic direkt auswählen.

Ich habe gerade den Flow nochmals importiert, was wichtig ist, dass Du ggf. noch die Dateisystem Nodes installierst. Ich habe das in dem Flow deshalb benutzt, um ggf. die erste Zeile mit den Überschriften zu erstellen, wenn di Datei noch nicht existiert.

[surfer09]

@mickym Ahhh, das hat schon einmal funktioniert. Kann ich beim "Datei schreiben" Block einfach einen Pfad von meinem NAS hinterlegen?

[mickym]

@surfer09 Theoretisch ja - aber das habe ich den Thread ja auch schon oft diskutiert. Das Problem was sich oft rausgestellt hat, dass es über UNC Namen oft nicht geht, es an Berechtigungen fehlt oder der Flow halt Fehler wirft, wenn die Netzverbindung weg ist. Ich bin inzwischen eher ein Anhänger die CSV Datei lokal zu erstellen und ggf. dann im Netz rumzukopieren. Aber Du kannst ja versuchen ob Du was schreiben kannst.
Du musst Dir immer vorstellen, dass NodeRed im iobroker mit dem User iobroker arbeitet, der dann auf dem Zielsystem die Rechte hat. Ggf. kannst auch mal versuchen, Dein NAS Speicherort lokal zu mounten, so dass NodeRed es gar nicht mitbekommt, dass Du auf einem entfernten System schreibst.

Nimm halt einfach einen selbsterstellten Datenpunkt und versuche mit dem was Du in Deinem Flow gemacht hast, ob Du was schreiben kannst.

Allerdings bleibt die Datei immer offen, wenn Du den Pfad direkt in die WriteFile Node schreibst. Besser ist es den Dateinamen in einer Change Node mitzugeben und aus der FileNode zu löschen.

[mickym]

@surfer09 sagte in Werte vom Datenpunkt in CSV-Datei schreiben:

@mickym Ahhh, das hat schon einmal funktioniert. Kann ich beim "Datei schreiben" Block einfach einen Pfad von meinem NAS hinterlegen?

Im Prinzip entspricht die iobroker IN Node diesem Blockly Teil

[surfer09]

@mickym Okay, das habe ich verstanden. "Change" habe ich jetzt auch gesetzt

Allerdings läuft mein IO-Broker auf Windows. Kommt er dann mit dem /home/iobroker klar?
Aktuell schreibt sich noch gar nichts in die Datei.. Der IN-IOBroker Block zeigt aber schonmal den geschriebenen Wert an.

[mickym]

Wie gesagt bevor Du den Flow aus dem anderen Thread importierst, solltest Du in deinem NodeRed noch die Dateisystem Nodes installieren. Damit kann man auch Dateien löschen etc..

Wie gesagt - nutze einfach mal den Flow aus dem anderen Thread - ich erkläre Dir das gleich.

Als erstes gehst Du bitte in Deine NodeRed Adaptereinstellungen und hakst dort an, dass Du den Paletten-Manager nutzen willst.

[surfer09]

@mickym ok, ist erledigt.

[mickym]

@surfer09 sagte in Werte vom Datenpunkt in CSV-Datei schreiben:

@mickym ok, ist erledigt.

Dann öffnest Du den Palettenmanager im Hauptmenü

und gibst bei der Suche für die Installation folgendes ein:

node-red-contrib-fs-ops

Wenn das alles geklappt hat, dann siehst Du im ersten Tab, dass die Nodes installiert wurden:

die stehen Dir ab sofort auch zur Verfügung

[frana120500]

falls du an einer Lösung mit Blockly interessiert bist, meld dich. Ich schreibe per Blockly die Werte meiner PV Anlage am Ende des Monats in eine CSV

[surfer09]

@frana120500 Hallo Frana! Stelle deine Lösung doch vielleicht auch vor. Wäre ja gar nicht schlecht, wenn man 2 Lösungswege hat.

[surfer09]

@mickym sagte in Werte vom Datenpunkt in CSV-Datei schreiben:

d gibst bei der Suche für die Installation folgendes ein:

Ja, auch erledigt Hat alles funktioniert soweit.

[mickym]

@surfer09 Gut dann nimmst Du den Flow aus dem anderen Thread - ich kopier den nochmal hier rein - und kopierst ihn in die Zwischenablage und importierst ihn dann in Node Red.

Spoiler

[
  {
      "id": "cd391a0c.856018",
      "type": "file",
      "z": "40d29c16.113a14",
      "name": "",
      "filename": "",
      "appendNewline": false,
      "createDir": false,
      "overwriteFile": "false",
      "encoding": "cp1252",
      "x": 2090,
      "y": 1320,
      "wires": [
          []
      ]
  },
  {
      "id": "792b60ad.f1578",
      "type": "csv",
      "z": "40d29c16.113a14",
      "name": "",
      "sep": "\\t",
      "hdrin": "",
      "hdrout": "once",
      "multi": "one",
      "ret": "\\r\\n",
      "temp": "",
      "skip": "0",
      "strings": true,
      "include_empty_strings": "",
      "include_null_values": "",
      "x": 1530,
      "y": 1320,
      "wires": [
          [
              "df1d94b.c458e68"
          ]
      ]
  },
  {
      "id": "8f1ae972.d5f228",
      "type": "change",
      "z": "40d29c16.113a14",
      "name": "",
      "rules": [
          {
              "t": "set",
              "p": "reset",
              "pt": "msg",
              "to": "true",
              "tot": "bool"
          }
      ],
      "action": "",
      "property": "",
      "from": "",
      "to": "",
      "reg": false,
      "x": 1360,
      "y": 1260,
      "wires": [
          [
              "792b60ad.f1578"
          ]
      ]
  },
  {
      "id": "fbd8dc3f.4df7c",
      "type": "change",
      "z": "40d29c16.113a14",
      "name": "",
      "rules": [
          {
              "t": "set",
              "p": "columns",
              "pt": "msg",
              "to": "Datum & Uhrzeit,Stundenverbrauch,Tagesverbrauch,Wochenverbrauch,Monatsverbrauch,Jahresverbrauch,Gesamtverbrauch",
              "tot": "str"
          },
          {
              "t": "set",
              "p": "payload[\"Datum & Uhrzeit\"]",
              "pt": "msg",
              "to": "",
              "tot": "date"
          },
          {
              "t": "set",
              "p": "payload[\"Datum & Uhrzeit\"]",
              "pt": "msg",
              "to": "$moment().locale(\"de\").tz('Europe/Berlin').format('DD.MM.YYYY HH:mm:ss')",
              "tot": "jsonata"
          }
      ],
      "action": "",
      "property": "",
      "from": "",
      "to": "",
      "reg": false,
      "x": 970,
      "y": 1300,
      "wires": [
          [
              "31ffef83.0a28a"
          ]
      ]
  },
  {
      "id": "31ffef83.0a28a",
      "type": "switch",
      "z": "40d29c16.113a14",
      "name": "NewFile?",
      "property": "fNewFile",
      "propertyType": "flow",
      "rules": [
          {
              "t": "true"
          },
          {
              "t": "false"
          }
      ],
      "checkall": "true",
      "repair": false,
      "outputs": 2,
      "x": 1160,
      "y": 1300,
      "wires": [
          [
              "8f1ae972.d5f228"
          ],
          [
              "792b60ad.f1578"
          ]
      ]
  },
  {
      "id": "ff441e41.86da6",
      "type": "change",
      "z": "40d29c16.113a14",
      "name": "Stundenverbrauch",
      "rules": [
          {
              "t": "set",
              "p": "topic",
              "pt": "msg",
              "to": "Stundenverbrauch",
              "tot": "str"
          }
      ],
      "action": "",
      "property": "",
      "from": "",
      "to": "",
      "reg": false,
      "x": 290,
      "y": 1160,
      "wires": [
          [
              "579569f5.ebb9c8"
          ]
      ]
  },
  {
      "id": "1a89abe3.1d8234",
      "type": "change",
      "z": "40d29c16.113a14",
      "name": "Tagesverbrauch",
      "rules": [
          {
              "t": "set",
              "p": "topic",
              "pt": "msg",
              "to": "Tagesverbrauch",
              "tot": "str"
          }
      ],
      "action": "",
      "property": "",
      "from": "",
      "to": "",
      "reg": false,
      "x": 300,
      "y": 1220,
      "wires": [
          [
              "579569f5.ebb9c8"
          ]
      ]
  },
  {
      "id": "186dfd70.fd7603",
      "type": "change",
      "z": "40d29c16.113a14",
      "name": "Wochenverbrauch",
      "rules": [
          {
              "t": "set",
              "p": "topic",
              "pt": "msg",
              "to": "Wochenverbrauch",
              "tot": "str"
          }
      ],
      "action": "",
      "property": "",
      "from": "",
      "to": "",
      "reg": false,
      "x": 290,
      "y": 1280,
      "wires": [
          [
              "579569f5.ebb9c8"
          ]
      ]
  },
  {
      "id": "1cb4263d.842f8a",
      "type": "change",
      "z": "40d29c16.113a14",
      "name": "Monatsverbrauch",
      "rules": [
          {
              "t": "set",
              "p": "topic",
              "pt": "msg",
              "to": "Monatsverbrauch",
              "tot": "str"
          }
      ],
      "action": "",
      "property": "",
      "from": "",
      "to": "",
      "reg": false,
      "x": 290,
      "y": 1340,
      "wires": [
          [
              "579569f5.ebb9c8"
          ]
      ]
  },
  {
      "id": "f4d997e0.0bc3e8",
      "type": "change",
      "z": "40d29c16.113a14",
      "name": "Jahresverbrauch",
      "rules": [
          {
              "t": "set",
              "p": "topic",
              "pt": "msg",
              "to": "Jahresverbrauch",
              "tot": "str"
          }
      ],
      "action": "",
      "property": "",
      "from": "",
      "to": "",
      "reg": false,
      "x": 290,
      "y": 1400,
      "wires": [
          [
              "579569f5.ebb9c8"
          ]
      ]
  },
  {
      "id": "1dad7dec.63c2f2",
      "type": "change",
      "z": "40d29c16.113a14",
      "name": "Gesamtverbrauch",
      "rules": [
          {
              "t": "set",
              "p": "topic",
              "pt": "msg",
              "to": "Gesamtverbrauch",
              "tot": "str"
          }
      ],
      "action": "",
      "property": "",
      "from": "",
      "to": "",
      "reg": false,
      "x": 290,
      "y": 1460,
      "wires": [
          [
              "579569f5.ebb9c8"
          ]
      ]
  },
  {
      "id": "df1d94b.c458e68",
      "type": "change",
      "z": "40d29c16.113a14",
      "name": "fNewFile = false",
      "rules": [
          {
              "t": "set",
              "p": "fNewFile",
              "pt": "flow",
              "to": "false",
              "tot": "bool"
          }
      ],
      "action": "",
      "property": "",
      "from": "",
      "to": "",
      "reg": false,
      "x": 1700,
      "y": 1320,
      "wires": [
          [
              "7f14f556.0e8bcc"
          ]
      ]
  },
  {
      "id": "7f14f556.0e8bcc",
      "type": "change",
      "z": "40d29c16.113a14",
      "name": "",
      "rules": [
          {
              "t": "set",
              "p": "filename",
              "pt": "msg",
              "to": "/home/iobroker/Werte.csv",
              "tot": "str"
          }
      ],
      "action": "",
      "property": "",
      "from": "",
      "to": "",
      "reg": false,
      "x": 1910,
      "y": 1320,
      "wires": [
          [
              "cd391a0c.856018"
          ]
      ]
  },
  {
      "id": "579569f5.ebb9c8",
      "type": "change",
      "z": "40d29c16.113a14",
      "name": "Zahlen  Komma",
      "rules": [
          {
              "t": "set",
              "p": "payload",
              "pt": "msg",
              "to": "$formatNumber(payload, \"#,####\", {'decimal-separator':',', 'grouping-separator':'.'} )\t",
              "tot": "jsonata"
          }
      ],
      "action": "",
      "property": "",
      "from": "",
      "to": "",
      "reg": false,
      "x": 600,
      "y": 1300,
      "wires": [
          [
              "8f46052e.5418c8",
              "3c6c5d15.ba7f42"
          ]
      ]
  },
  {
      "id": "8f46052e.5418c8",
      "type": "join",
      "z": "40d29c16.113a14",
      "name": "",
      "mode": "custom",
      "build": "object",
      "property": "payload",
      "propertyType": "msg",
      "key": "topic",
      "joiner": "\\n",
      "joinerType": "str",
      "accumulate": false,
      "timeout": "",
      "count": "6",
      "reduceRight": false,
      "reduceExp": "",
      "reduceInit": "",
      "reduceInitType": "",
      "reduceFixup": "",
      "x": 790,
      "y": 1300,
      "wires": [
          [
              "fbd8dc3f.4df7c"
          ]
      ]
  },
  {
      "id": "3c6c5d15.ba7f42",
      "type": "fs-ops-access",
      "z": "40d29c16.113a14",
      "name": "",
      "path": "/home/iobroker",
      "pathType": "str",
      "filename": "Werte.csv",
      "filenameType": "str",
      "read": true,
      "write": true,
      "throwerror": false,
      "x": 830,
      "y": 1440,
      "wires": [
          [
              "8d3670b.8ae109"
          ],
          [
              "ea9cb3bc.5c8b4"
          ]
      ]
  },
  {
      "id": "8d3670b.8ae109",
      "type": "change",
      "z": "40d29c16.113a14",
      "name": "fNewFile = false",
      "rules": [
          {
              "t": "set",
              "p": "fNewFile",
              "pt": "flow",
              "to": "false",
              "tot": "bool"
          },
          {
              "t": "set",
              "p": "payload",
              "pt": "msg",
              "to": "File found - fNewFile=false",
              "tot": "str"
          }
      ],
      "action": "",
      "property": "",
      "from": "",
      "to": "",
      "reg": false,
      "x": 1020,
      "y": 1400,
      "wires": [
          [
              "992590f7.3b452"
          ]
      ]
  },
  {
      "id": "ea9cb3bc.5c8b4",
      "type": "change",
      "z": "40d29c16.113a14",
      "name": "fNewFile = true",
      "rules": [
          {
              "t": "set",
              "p": "fNewFile",
              "pt": "flow",
              "to": "true",
              "tot": "bool"
          },
          {
              "t": "set",
              "p": "payload",
              "pt": "msg",
              "to": "File not found - fNewFile=true",
              "tot": "str"
          }
      ],
      "action": "",
      "property": "",
      "from": "",
      "to": "",
      "reg": false,
      "x": 1020,
      "y": 1480,
      "wires": [
          [
              "992590f7.3b452"
          ]
      ]
  },
  {
      "id": "992590f7.3b452",
      "type": "debug",
      "z": "40d29c16.113a14",
      "name": "",
      "active": true,
      "tosidebar": false,
      "console": false,
      "tostatus": true,
      "complete": "payload", 
      "targetType": "msg",
      "statusVal": "payload",
      "statusType": "msg",
      "x": 1210,
      "y": 1440,
      "wires": []
  }
]

Sobald Du den Code hier aus dem Thread in die Zwischenablage kopiert hast, gehst Du im Node Red im Hauptmenü auf Import:

und fügst den Code in das rosa Fenster und klickst auf Import

[surfer09]

@mickym sagte in Werte vom Datenpunkt in CSV-Datei schreiben:

Hat auch funktioniert. Jetzt habe ich hier einige Blöcke mehr im Fenster

[mickym]

@surfer09 Sehr gut - nun schaut es erst mal so aus, wie in dem anderen Thread.

So nun müssen wir den Flow an deine Bedürfnisse anpassen.

Wieviele Datenpunkte möchtest Du denn schreiben und welche Spalten, wie sollten die Überschriften lauten etc. ????

[frana120500]

Hier meine Blockly Lösung. Ich habe mir einen Mountpunkt angelegt, da ich die Daten noch weiterverarbeite.

In meinem Fall werden die neuen Daten unten angehangen. Habe jetzt hier mit dem ID von Selektor gearbeitet, aber das lässt sich ja anpassen.

Hier das Blockly:

Der Inhalt der Funktion:

und hier das ganze als Blockly Export:

csv_export.rtf