Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Oder habe ich jetzt einen Denkfehler ?!

Okay, ich möchte das jetzt nicht weiter hinterfragen, so tief bin ich in die "Vorgeschichte" nicht eingestiegen.

Hast du schon Werte für den Dezember? Dann könntest du diese Abfrage mal in den InfluxDB Data Explorer werfen und das Ergebnis zeigen, ob es grundsätzlich schon passt:

                import "date" 
                import "timezone" 
                option location = timezone.location(name: "Europe/Berlin") 
            
                from(bucket: "iobroker")
                |> range(start:date.truncate(t:-1mo, unit:1mo)) 
                |> filter(fn: (r) => r._measurement == "sourceanalytix.0.javascript__0__PV__Wechselrichter__SE-10KRWS-PVLeistungAktuell.currentYear.consumed.01_currentDay" or r._measurement == "sourceanalytix.0.javascript__0__PV__Wechselrichter__SE-12K-PVLeistungAktuell.currentYear.consumed.01_currentDay")
                |> filter(fn: (r) => r._field == "value")
                |> aggregateWindow(every: 1d,fn:max,timeSrc: "_start",createEmpty:false)
                |> pivot(rowKey:["_time"], columnKey: ["_measurement"], valueColumn: "_value")
                |> rename(columns: {"sourceanalytix.0.javascript__0__PV__Wechselrichter__SE-10KRWS-PVLeistungAktuell.currentYear.consumed.01_currentDay": "WR1", "sourceanalytix.0.javascript__0__PV__Wechselrichter__SE-12K-PVLeistungAktuell.currentYear.consumed.01_currentDay": "WR2"})
                |> keep(columns: ["_time", "WR1", "WR2"])

bitwicht

@Marc Berg

leider noch nicht.
Ich werde mal 2,3 Tage aufzeichnen und dann dein Script laufen.

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Ich werde mal 2,3 Tage aufzeichnen und dann dein Script laufen.

Das hier ist ein Beispiel JS Skript, welches die Daten des Vormonats tageweise mit dem von dir benannten Format in eine Datei schreibt:

const {InfluxDB} = require('@influxdata/influxdb-client')
const fs = require('fs')

// vvvvvvvvvvvvvvv ANPASSEN!!! vvvvvvvvvvvvvvv
const Token ='rwvwRRrnxA8x1XYWMnWNTxxxxxxxxxxNE3Esoal0PHmI7Ci8Bk_EwWZg=='
const Url ='http://nuc.fritz.box:8086'
const Org = 'home'
const Bucket = 'iobroker'
const measurement1 = "sourceanalytix.0.javascript__0__PV__Wechselrichter__SE-10KRWS-PVLeistungAktuell.currentYear.consumed.01_currentDay"
const measurement2 = "sourceanalytix.0.javascript__0__PV__Wechselrichter__SE-12K-PVLeistungAktuell.currentYear.consumed.01_currentDay"
const Outputfile = '/opt/iobroker/exports/daily_previous_month.txt'

const query = ` import "date" 
                import "timezone" 
                option location = timezone.location(name: "Europe/Berlin") 
            
                from(bucket: "${Bucket}")
                |> range(start:date.truncate(t:-1mo, unit:1mo), stop: date.truncate(t:-1s, unit:1mo)) 
                |> filter(fn: (r) => r._measurement == "${measurement1}" or r._measurement == "${measurement2}")
                |> filter(fn: (r) => r._field == "value")
                |> aggregateWindow(every: 1d,fn:max,timeSrc: "_start",createEmpty:false)
                |> pivot(rowKey:["_time"], columnKey: ["_measurement"], valueColumn: "_value")
                |> rename(columns: {"${measurement1}": "WR1", "${measurement2}": "WR2"})
                |> keep(columns: ["_time", "WR1", "WR2"])    
                `
// ^^^^^^^^^^^^^^^ ANPASSEN!!! ^^^^^^^^^^^^^^^

const client = new InfluxDB({
  url: Url,
  token: Token
})

const queryApi = client.getQueryApi(Org)

const stream = fs.createWriteStream(Outputfile) // , {flags: 'a'} zum Anhängen an die Datei

const writeToFile = (fluxRow) => {
  let fluxdate = new Date(fluxRow._time)
  let formattedDate = fluxdate.toLocaleDateString('de-DE', { day: '2-digit', month: '2-digit', year: '2-digit' })
  stream.write(`da[dx++]="${formattedDate}|${fluxRow.WR1};0|${fluxRow.WR2};0"\n`)
}

queryApi.queryRows(query, {
  next: (row, tableMeta) => writeToFile(tableMeta.toObject(row)),
  error: error => {
    console.error(error);
    console.error('\nFinished ERROR');
  },
  complete: () => {
    stream.end();
    console.info('\nFinished SUCCESS');
  },
});

Wenn du diesen Teil rauslöschst

, stop: date.truncate(t:-1s, unit:1mo)

dann wird der Vormonat und der aktuelle bis jetzt erfasst (zum Testen).

Dieses Skript lässt sich dann für alle weiteren Zeiträume leicht anpassen.

bitwicht

@Marc-Berg

Die Werte aus dem sourceanalytix Adapter passe leider überhaupt nicht. Ich weiß nur noch nicht an was es liegt.
Ich habe noch einen zweiten Datenpunkt. Die API Abfrage vom Solagedge Portal (WR Hersteller). Leider liefert der nur einen Gesamtwert beider Herstellen aber das passt halt. Bitte beachten: Die Werte der SE-API passen nicht 100% zur SE-APP (warum auch immer).

Datenpunkt: 0_userdata.0.Systemdaten.Solaranlage.Anlagen.1565936.Erzeugung.Heute
In der Influx: PV-SEWeb-Ertrag-Tag

Ich habe dein Script angepasst (hoffe ich habe keinen Fehler).

   import "date" 
                import "timezone" 
                option location = timezone.location(name: "Europe/Berlin") 
            
                from(bucket: "iobroker")
                |> range(start:date.truncate(t:-1mo, unit:1mo)) 
                |> filter(fn: (r) => r._measurement == "PV-SEWeb-Ertrag-Tag")
                |> filter(fn: (r) => r._field == "value")
                |> aggregateWindow(every: 1d,fn:max,timeSrc: "_start",createEmpty:false)
                |> pivot(rowKey:["_time"], columnKey: ["_measurement"], valueColumn: "_value")
                |> rename(columns: {"PV-SEWeb-Ertrag-Tag": "SE-Web-Portal"})
                |> keep(columns: ["_time", "SE-Web-Portal"])

Influx:
0 2024-01-03T23:00:00.000Z 15.62
0 2024-01-04T23:00:00.000Z 9.52
0 2024-01-05T23:00:00.000Z 3.13
0 2024-01-06T23:00:00.000Z 0

Aus der APP (SE-App):
7.1.24 = 0
6.1.24 = 2,88
5.1.24 = 9,51
4.1.24 = 16

Ich bekomme die Tageswerte aber diese sind alle 1 Tag versetzt ?

lg
Bit.

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Ich bekomme die Tageswerte aber diese sind alle 1 Tag versetzt ?

Ne, das passt. Aus "03.01.2024 23:00 UTC" wird ja "04.01.24 00:00" (Lokalzeit) und so würde es das JS-Skript auch in die Datei schreiben.

bitwicht

@Marc-Berg

Schön. Dann ist mir noch etwas aufgefallen das ich noch nicht verstehe:

Influx Werte:
0 2024-01-03T23:00:00.000Z 15.62
0 2024-01-04T23:00:00.000Z 9.52
0 2024-01-05T23:00:00.000Z 3.13

IO-Bocker-Verlauf
(letzter geschriebener Wert des Tages)
6.1.2024 = 3,05
5.1.2024 = 9,37
4.1.2024 = 15,62

Die Werte in der Influx müssten doch exakt gleich sein wie die Werte im iobroker Verlauf ??

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Die Werte in der Influx müssten doch exakt gleich sein wie die Werte im iobroker Verlauf ??

Zeig mal die benutzerdefinierten Einstellungen.

Marc Berg

@bitwicht

Nein warte mal! Meine Query war dafür ausgelegt, der die Daten aus dem Sourceanalytics Adapter kommen und damit der letzte/höchste Wert der Ertrag des ganzen Tages ist. Was ich jetzt da sehe, ist was anderes.

bitwicht

@Marc-Berg

Das passt aber.
Der Wert geht immer höher und beginnt am nächsten Tag wieder bei Null.

hier:

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Der Wert geht immer höher und beginnt am nächsten Tag wieder bei Null.

und hier sinkt er im Laufe der Zeit! Könnte es sein, dass da Negativwerte reinkommen?

bitwicht

@Marc Berg

interessant. Das ist mir noch gar nicht aufgefallen.
Sollen wir dennoch weiter machen ob ich es schaffe die Datei zu erstellen?

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Sollen wir dennoch weiter machen ob ich es schaffe die Datei zu erstellen?

na was soll denn nun in der Datei stehen? Der letzte oder höchste Wert des Tages?

bitwicht

@Marc-Berg

ich würde das erst noch mal beobachten bevor du jetzt Arbeit hast du alles umbaust.
Es kann ja faktisch nicht sein, dass die Anlage negativ produziert.

Ich versuche mal dein JS Script zu laufen zu bringen.
Verstehe ich das richtig:
Oben verbinde ich mich mit der Influx und mache die Abfrage.
Unten wird dann die Datei erzeugt ?

Warum muss ich denn Oben und in der Mitte die URL und den Token eingeben?

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Warum muss ich denn Oben und in der Mitte die URL und den Token eingeben?

Nein, nur oben. Das wird dort in einer Konstante gespeichert und dann unten verwendet.

bitwicht

@Marc-Berg
das Script füge ich dann einfach in den JS Adapter ein?
Führt es sich dann alle X Minuten aus und erzeugt die Dabei neu ?
Es reicht ein "read" Token ?

bitwicht

ich habe dein JS Script angepasst:

const {InfluxDB} = require('@influxdata/influxdb-client')
const fs = require('fs')
 
// vvvvvvvvvvvvvvv ANPASSEN!!! vvvvvvvvvvvvvvv
const Token ='xxxxxxxxxx'
const Url ='http://192.168.0.11:8086'
const Org = 'home'
const Bucket = 'iobroker'
const measurement1 = "PV-SEWeb-Ertrag-Tag"
const Outputfile = '/opt/iobroker/exports/daily_previous_month.txt'
 
const query = ` import "date" 
                import "timezone" 
                option location = timezone.location(name: "Europe/Berlin") 
            
                from(bucket: "${Bucket}")
                |> range(start:date.truncate(t:-1mo, unit:1mo), stop: date.truncate(t:-1s, unit:1mo)) 
                |> filter(fn: (r) => r._measurement == "${measurement1}")
                |> filter(fn: (r) => r._field == "value")
                |> aggregateWindow(every: 1d,fn:max,timeSrc: "_start",createEmpty:false)
                |> pivot(rowKey:["_time"], columnKey: ["_measurement"], valueColumn: "_value")
                |> rename(columns: {"${measurement1}": "PV-SEWeb-Ertrag-Tag")
                |> keep(columns: ["_time", "PV-SEWeb-Ertrag-Tag"])    
                `
// ^^^^^^^^^^^^^^^ ANPASSEN!!! ^^^^^^^^^^^^^^^
 
const client = new InfluxDB({
  url: Url,
  token: Token
})
 
const queryApi = client.getQueryApi(Org)
 
const stream = fs.createWriteStream(Outputfile) // , {flags: 'a'} zum Anhängen an die Datei
 
const writeToFile = (fluxRow) => {
  let fluxdate = new Date(fluxRow._time)
  let formattedDate = fluxdate.toLocaleDateString('de-DE', { day: '2-digit', month: '2-digit', year: '2-digit' })
  stream.write(`da[dx++]="${formattedDate}|${fluxRow.PV-SEWeb-Ertrag-Tag};0|"\n`)
}
 
queryApi.queryRows(query, {
  next: (row, tableMeta) => writeToFile(tableMeta.toObject(row)),
  error: error => {
    console.error(error);
    console.error('\nFinished ERROR');
  },
  complete: () => {
    stream.end();
    console.info('\nFinished SUCCESS');
  },
});

Bekomme folgenden Fehler:

17:14:52.536	info	javascript.0 (58979) Start javascript script.js.PV-SE-Web-Export-Datei-fuer-Solarlog
17:14:52.622	info	javascript.0 (58979) script.js.PV-SE-Web-Export-Datei-fuer-Solarlog: registered 0 subscriptions, 0 schedules, 0 messages, 0 logs and 0 file subscriptions
17:14:52.688	error	javascript.0 (58979) script.js.PV-SE-Web-Export-Datei-fuer-Solarlog: {'statusCode':400,'statusMessage':'Bad Request','body':'{\'code\':\'invalid\',\'message\':\'compilation failed: error @11:36-11:82: expected RBRACE, got RPAREN\'}','contentType':'application/json; charset=utf-8','json':{'code':'invalid','message':'compilation failed: error @11:36-11:82: expected RBRACE, got RPAREN'},'message':'compilation failed: error @11:36-11:82: expected RBRACE, got RPAREN','code':'invalid','name':'HttpError','_retryAfter':0}
17:14:52.688	error	javascript.0 (58979) script.js.PV-SE-Web-Export-Datei-fuer-Solarlog: Finished ERROR

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

Bekomme folgenden Fehler:

ja, da hast du eine Klammer zu viel gelöscht:

|> rename(columns: {"${measurement1}": "PV-SEWeb-Ertrag-Tag"})

bitwicht

@Marc-Berg

jetzt bekomme ich folgenden Fehler:

19:29:04.701	info	javascript.0 (59677) Start javascript script.js.PV-SE-Web-Export-Datei-fuer-Solarlog
19:29:04.735	info	javascript.0 (59677) script.js.PV-SE-Web-Export-Datei-fuer-Solarlog: registered 0 subscriptions, 0 schedules, 0 messages, 0 logs and 0 file subscriptions
19:29:05.110	error	javascript.0 (59677) script.js.PV-SE-Web-Export-Datei-fuer-Solarlog: TypeError: console.info is not a function
19:29:05.111	error	javascript.0 (59677) at Object.complete (script.js.PV-SE-Web-Export-Datei-fuer-Solarlog:50:13)
19:29:05.276	error	host.raspberrypi Caught by controller[1]: at Object.complete (script.js.PV-SE-Web-Export-Datei-fuer-Solarlog:51:13)

Du schreibst die Datei in: /opt/iobroker/exports/
Das Verzeichnis exports gibt es noch nicht. Legt er es automatisch an?

Marc Berg

@bitwicht sagte in Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern:

jetzt bekomme ich folgenden Fehler:

Ah, das liegt glaube ich an meiner aktuelleren Version des Javascript Adapters.

Mach mal aus

console.info ---> console.log

Du schreibst die Datei in: /opt/iobroker/exports/
Das Verzeichnis exports gibt es noch nicht. Legt er es automatisch an?

Nein, das musst du manuell anlegen, oder du schreibst irgendwo anders hin.

EDIT: natürlich an einer Stelle, wo der User iobroker Schreibrechte hat.

bitwicht

OK, die Datei hat er angelegt aber ist leer.

Wie oft aktualisiert er denn die Datei, wo sehe ich das?

19:53:34.529	info	javascript.0 (59734) Start javascript script.js.PV-SE-Web-Export-Datei-fuer-Solarlog
19:53:34.578	info	javascript.0 (59734) script.js.PV-SE-Web-Export-Datei-fuer-Solarlog: registered 0 subscriptions, 0 schedules, 0 messages, 0 logs and 0 file subscriptions
19:53:34.609	info	javascript.0 (59734) script.js.PV-SE-Web-Export-Datei-fuer-Solarlog: Finished SUCCESS

NEWS

Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern

Support us

560
Online

31.6k
Users

79.4k
Topics

1.3m
Posts

NEWS

Ertrag (Tag, Monat, Jahr) berechnen und in Datei speichern

Support us

560Online

31.6kUsers

79.4kTopics

1.3mPosts

560
Online

31.6k
Users

79.4k
Topics

1.3m
Posts