Proxmox / Influxdb V1 zu V2... wie?

[MassiveAttack]

@ilovegym sagte in Proxmox / Influxdb V1 zu V2... wie?:

@massiveattack

Hast du n Tip, wie man am einfachsten die Grafana Views von Influx1 auf V2 umstellt?
Finde das etwas umständlich mit Flux.. naja bin auch influxql gewohnt..

influx v1 auth create --read-bucket <ID des Buckets> --username grafana

influx v1 dbrp create --db <DB Name> --rp autogen --bucket-id <ID des Buckets>  --default

Das führst du in der DB aus, damit man in grafana influxql verwenden kann.
Dann kannst du deine views in grafana behalten

[MassiveAttack]

@marc-berg sagte in Proxmox / Influxdb V1 zu V2... wie?:

@massiveattack sagte in Proxmox / Influxdb V1 zu V2... wie?:

kaum macht man's richtig, geht's auch

• Influx 2 neu aufgesetzt
• setup mittels console (nicht webui)
• import von v1

Wie hast du den Import hinbekommen? Mit Manipulation der Exportdatei oder einer aktuellen influx_inspect?

Hab das exportfile manipuliert. Meine 1.8er kennt das flag -lponly nicht

[Neuschwansteini]

@massiveattack sagte in Proxmox / Influxdb V1 zu V2... wie?:

@ilovegym sagte in Proxmox / Influxdb V1 zu V2... wie?:

@massiveattack

influx v1 auth create --read-bucket <ID des Buckets> --username grafana

influx v1 dbrp create --db <DB Name> --rp autogen --bucket-id <ID des Buckets>  --default

Das führst du in der DB aus, damit man in grafana influxql verwenden kann.
Dann kannst du deine views in grafana behalten

Danke! hat super geklappt, musste allerdings noch die Parameter --token und --org dran hängen.

[MassiveAttack]

@ilovegym

Für alle, die die Datenmigration mit einer "zu" alten Influx v1 durchführen wollen, und das flag "-lponly" nicht verwenden können, hier meine Schritte:

##################

• influx_inspect export -database iobroker -out /var/lib/influxdb/backups/inv1.gz -datadir /var/lib/influxdb/data/ -waldir /var/lib/influxdb/wal/ -compress
• gunzip inv1.gz
• sed -e '/^[#]/d' -e '/^CREATE/d' inv1 > new
• gzip new
• influx write -b iobroker -f new.gz

##################

Damit konnte ich meine komplette DB migrieren

[Negalein]

weiter gehts mit dem Blackout!

ioB ist mit Influx 2 verbunden.
In Grafana ist Influx 2 als DB-Quelle verbunden.

Jetzt wollte ich gerade ein neues Panel erstellen und steh wieder an.

Bei Influx 1 konnte man im Dropdown die DP auswählen.

Jetzt mit Influx 2 (mit Flux) gibts das nicht mehr.
Wie bring ich da die DP rein?

[MassiveAttack]

@negalein

Am einfachsten ist es, wenn du dir die query in der InfluxDb2 zusammestellt, und dann den query string nach Grafana kopierst

[Negalein]

@massiveattack sagte in Proxmox / Influxdb V1 zu V2... wie?:

wenn du dir die query in der InfluxDb2 zusammestellt, und dann den query string nach Grafana kopierst

hätt schon nach Tutorials geschaut.
Aber entweder auf englisch oder für mich nur unverständliche Bahnhofsdurchsagen.

Ich finde zB das im offiz. Influx How-to:

Nur check ich nicht, wie das zB für folgendes Beispiel funktioniert.
DP: javascript.0.Wetterstation.Aussenfeuchtigkeit
Time Range: 24h

reicht hier (ist ein Bucket der ioB-Datenpunkt?)

from(bucket:"javascript.0.Wetterstation.Aussenfeuchtigkeit")
    |> range(start: -24h)

und muss das dann für jeden DP händisch erstellt werden?
Gibts bei Flux also nicht mehr die Möglichkeit mit dem Dropdown in Grafana?

[MassiveAttack]

@negalein

Soweit ich weiß, geht das mit flux aktuell nur so. Grafana unterstützt flux aktuell nur im beta modus, eventuell wird das noch verbessert, keine Ahnung.

Ein Bucket = DB

Warum stellst du die DB nicht auf InfluxQL um? ==>

influx v1 auth create --read-bucket <ID des Buckets> --username grafana
influx v1 dbrp create --db <DB Name> --rp autogen --bucket-id <ID des Buckets>  --default

Habe ich auch gemacht, dann kannst du in Grafana wie gewohnt aus Influx1 deine Abfragen machen.

[Marc Berg]

@negalein sagte in Proxmox / Influxdb V1 zu V2... wie?:

@massiveattack sagte in Proxmox / Influxdb V1 zu V2... wie?:

wenn du dir die query in der InfluxDb2 zusammestellt, und dann den query string nach Grafana kopierst

hätt schon nach Tutorials geschaut.
Aber entweder auf englisch oder für mich nur unverständliche Bahnhofsdurchsagen.

Das Video von @haus-automatisierung kennst Du?

https://www.youtube.com/watch?v=nhDKa72QoNQ&t=1325s

[Negalein]

@massiveattack sagte in Proxmox / Influxdb V1 zu V2... wie?:

Warum stellst du die DB nicht auf InfluxQL um? ==>

dachte, weil Flux das Aktuelle ist.

wenn ich in Grafana die Source auf InfluxQL umstelle, kommt:

Oder muss ich zuerst in Influx 2 diese Befehle ausführen?

influx v1 auth create --read-bucket <ID des Buckets> --username grafana

ID des Buckets = cf4650a7c31e8089

username grafana = ohne PW?

influx v1 dbrp create --db <DB Name> --rp autogen --bucket-id <ID des Buckets>  --default

DB Name = also eine neue DB anlegen (der Influx-Adapter hat bereits die DP iobrokerangelegt.

[Negalein]

@marc-berg sagte in Proxmox / Influxdb V1 zu V2... wie?:

Das Video von @haus-automatisierung kennst Du?

Danke

Also kopier ich dann zB diesen Code in Grafana

from(bucket: "iobroker")
  |> range(start: v.timeRangeStart, stop: v.timeRangeStop)
  |> filter(fn: (r) => r["_measurement"] == "javascript.0.Wetterstation.Aussenfeuchtigkeit")
  |> filter(fn: (r) => r["_field"] == "value")
  |> aggregateWindow(every: v.windowPeriod, fn: last, createEmpty: false)
  |> yield(name: "last")

Cool, funktioniert

[MassiveAttack]

@negalein

Du musst zuerst diese commands ausführen. Für den user "grafana" kommt dann eine PW Eingabe.
ID passt, DB ist iobroker (die willst du ja umstellen)

Dann kannst du auf InfluxQL umstellen, und deine bisherigen Queries behalten.

Nur zur Info, deine retention policy läuft nur für 1 Jahr (wenn das so von dir gewollt ist?!)

[Negalein]

@massiveattack sagte in Proxmox / Influxdb V1 zu V2... wie?:

Nur zur Info, deine retention policy läuft nur für 1 Jahr (wenn das so von dir gewollt ist?!)

ist mir auch gerade aufgefallen.
Kann sie nicht ändern.
Wenn ich auf "never" klicke und speichere, bleibt sie bei 1 Jahr.

[A Former User]

@negalein

Moin,

schau mal in den influx-adapter

VG
Bernd

[Negalein]

@dp20eic sagte in Proxmox / Influxdb V1 zu V2... wie?:

schau mal in den influx-adapter

ahhh, stimmt. Das wird ja dort eingestellt!

[Dieter_P]

hat sich erledigt; Migration auf v2 ist erfolgt

[Kueppert]

mh...hab mir jetzt auch erst mal 2 neue LXCs angelegt für Influx2 und Grafana (alt: Influx1 und Grafana in 1 LXC).
Wenn ich mehrere Buckets in DB2 habe - muss ich ja auch mehrere Influx-Adapter im ioBroker parallel laufen lassen um die unterschiedlichen Buckets zu befüllen, korrekt? Das frisst dann aber nen ganzen Haufen RAM...

[Marc Berg]

@kueppert sagte in Proxmox / Influxdb V1 zu V2... wie?:

Wenn ich mehrere Buckets in DB2 habe - muss ich ja auch mehrere Influx-Adapter im ioBroker parallel laufen lassen um die unterschiedlichen Buckets zu befüllen, korrekt?

Ja, das geht nicht anders.

[SBorg]

@kueppert sagte in Proxmox / Influxdb V1 zu V2... wie?:

Das frisst dann aber nen ganzen Haufen RAM...

Ist so bald ein Killerargument gegen den PI.
Ich habe es auf drei Instanzen reduziert. Nicht Themen abhängig, sondern Retention abhängig.

• 0: 1 Jahr
• 1: Never
• 2: temporäre Daten 1 Woche

[A Former User]

@sborg sagte in Proxmox / Influxdb V1 zu V2... wie?:

@kueppert sagte in Proxmox / Influxdb V1 zu V2... wie?:

Das frisst dann aber nen ganzen Haufen RAM...

Ist so bald ein Killerargument gegen den PI.
Ich habe es auf drei Instanzen reduziert. Nicht Themen abhängig, sondern Retention abhängig.

• 0: 1 Jahr
• 1: Never
• 2: temporäre Daten 1 Woche

Moin,

das ist eine Möglichkeit
Ich lasse nur eine Instanz im iobroker laufen, die schaufelt mir die Daten in ein bucket das nur 30 Tage die Daten hält, dann habe ich in influxDB Tasks angelegt, die mir die Daten je nach dem in die buckets mit der entsprechenden Retention schreibt und so es den von nöten ist auch ein downgrade der Daten macht.

Somit bleibt iobroker schlank, aktuell fressen die Tasks nicht viel Speicher oder CPU auf meinem influxDb LXC Container.

VG
Bernd