InfluxdB Größe? Aufspüren und Ausmisten?
-
@dp20eic sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
P.S.: Was mir nicht klar ist, wo das arch, build_date, bucket, ... in deiner Auflistung herkommt, gibt es bei mir nicht
yep, wollte ich auch gerade schreiben. Das kommt wahrscheinlich von einem Scraper, der metrics-Daten wegschreibt oder mal weggeschrieben hat. Das würde auch die Größe erklären.
-
@dieter_p sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
Hab ich da im Filter ein Tippfehler?
Moin,
Tippfehler, sollten ja keine da sein, denn Du kopierst ja nur eine Abfrage, die bei mir oder anderen funktioniert.
VG
Bernd -
@marc-berg @dp20eic
bin da nicht oft unterwegs, aber unter "_measurements" sollten doch die konfigurierten DPs/Messtellen zu finden sein. Bei mir sehe ich da viel aber keine der IOBroker Objekte die fürs InfluxdB loggen konfiguriert sind.
-
@dieter_p sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
@marc-berg @dp20eic
bin da nicht oft unterwegs, aber unter "_measurements" sollten doch die konfigurierten DPs/Messtellen zu finden sein. Bei mir sehe ich da viel aber keine der IOBroker Objekte die fürs InfluxdB loggen konfiguriert sind.
Moin,
jup, das sieht alles nach Metriken aus
VG
BerndP.S.: Gib mal im Suchfeld einen Namen von Deinen Datenpunkten ein, kommt da irgend was?
-
@dieter_p sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
Bei mir sehe ich da viel aber keine der IOBroker Objekte die fürs InfluxdB loggen konfiguriert sind.
dann bist hier auf der falschen DB oder in der falschen Organisation
-
@marc-berg sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
@dieter_p sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
Bei mir sehe ich da viel aber keine der IOBroker Objekte die fürs InfluxdB loggen konfiguriert sind.
dann bist hier auf der falschen DB oder in der falschen Organisation
Moin,
ist auch schon wieder so lange her, aber bei der Ersteinrichtung, wird mal etwas von Metriken gefragt und vielleicht hat der TE da auch das
ioBroker Bucketangegeben.
Ich kann mir nicht vorstellen, dass der Otto Normaluser sich mehrere Organisationen anlegt
VG
Bernd -
@dp20eic sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
Ich kann mir nicht vorstellen, dass der Otto Normaluser sich mehrere Organisationen anlegt
ja, alles etwas undurchsichtig.
@Dieter_P : zeigt doch mal bitte die Konfig deines Influx-Adapters
-
@dp20eic @Marc-Berg
Sorry, da ich zwei Systeme (ioBroker) parallel im Zugriff hab, ist mir nicht immer sofort klar was, wie wo. Auf dem "kleinen" System hier sind derzeit gar keine Messtellen zum loggen für influxdB konfiguriert. Das läuft auf dem history Adapter und wollte ich bei Gelegenheit anpassen.
Habe nun eine Messtelle zum loggen konfiguriert und finde diese auch unter Measurements. Aber aus dieser Erkenntnis umso größer meine Frage, warum die influxdB "ohne Inhalt" so groß wird.
Metriken sagt mir wenig.
Da ich ja aktuell nichts logge in die dB, liegt mir der Gedanke nah influxdB noch einmal zu löschen und neu zu installieren, obwohl die Ursache schon interresant wäre um den vielleicht gleichen Fehler nicht nochmal zu machen.
-
@dieter_p sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
Da ich ja aktuell nichts logge in die dB
Uff ... Das erklärt einiges.
Schau mal, ob ein Scraper aktiviert ist
-
@marc-berg said in InfluxdB Größe? Aufspüren und Ausmisten?:
@dieter_p sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
Da ich ja aktuell nichts logge in die dB
Uff ... Das erklärt einiges.
Schau mal, ob ein Scraper aktiviert ist
-
@dieter_p sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
TADAAA! Lösch' das und danach auch das Bucket.
-
@marc-berg said in InfluxdB Größe? Aufspüren und Ausmisten?:
@dieter_p sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
@marc-berg said in InfluxdB Größe? Aufspüren und Ausmisten?:
@dieter_p sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
Da ich ja aktuell nichts logge in die dB
Uff ... Das erklärt einiges.
Schau mal, ob ein Scraper aktiviert ist
TADAAA! Lösch' das und danach auch das Bucket.
Danke! influxdB Adapter stoppen, dann Bucket löschen und wieder neu anlegen? Die Tokens sind dann auch zu erneuern, richtig?
dies reicht dann sicher nicht, oder?
-
@dieter_p sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
Danke! influxdB Adapter stoppen, dann Bucket löschen und wieder neu anlegen? Die Tokens sind dann auch zu erneuern, richtig?
- Adapter muss meines Wissens nicht gestoppt werden
- Das Bucket wird automatisch wieder angelegt, wenn die ersten Daten reinkommen
- Tokens behalten ihre Gültigkeit, wenn sie nicht speziell für ein Bucket berechtigt wurden
-
@marc-berg said in InfluxdB Größe? Aufspüren und Ausmisten?:
@dieter_p sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
Danke! influxdB Adapter stoppen, dann Bucket löschen und wieder neu anlegen? Die Tokens sind dann auch zu erneuern, richtig?
- Adapter muss meines Wissens nicht gestoppt werden
- Das Bucket wird automatisch wieder angelegt, wenn die ersten Daten reinkommen
Vielen Dank! Da ich ja ein Backup habe, habe ich mal auf "Alle Daten in Datenbank Löschen" geklickt. Dabei wird bucket "iobroker" komplett gelöscht und da ich nun ein Test-DP zum loggen angelegt hab, passiert genau das was Du sagst. Ich habe ein "saubres" bucket iobroker.
Nun bin ich auf das Backup gespannt, vermute aber die Lösung. Danke Euch vielmals!
-
mit konfiguriertem DP funktioniert nun auch der Ursprungsansatz:
from(bucket: "iobroker") |> range(start: -2y) |> filter(fn: (r) => r["_field"] == "value") |> count() |> group() |> keep(columns: ["_measurement", "_value"]) |> sort(columns: ["_value"], desc: true) |> rename(columns: {_value: "Anzahl"})Thx!
-
@dieter_p sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
Thx!
Moin,
musst gerade mal meinen häuslichen Pflichten nachkommen, Müll hinausbringen und Grillen
Schön, dass es jetzt klappt, Dank auch an @Marc-Berg für den konstruktiven Input.
@Dieter_P
Jetzt vielleicht aufräumen und evtl. nicht auf zu vielen Systemen herummachen, lieber eins, das dann aber richtig
Nicht böse gemeint, nur ein Tipp/Hinweis
VG
Bernd -
@dp20eic
Danke und bin froh, die Ursache scheint beseitigt, auch wenn ich keine Ahnung hab wie dieser Scraper entstanden ist und wofür/was das überhaupt ist.
Aufräumen ist immer gut, aber eine leere neue dB dürfte recht clean sein
und von einem IObroker trennen wird schwer, da ich so einen Haushalt ohne IObroker hätte und dauerhaft über ein VPN Netzwerk sowas zu betreiben wird für mich noch komplexer. -
@dieter_p sagte in InfluxdB Größe? Aufspüren und Ausmisten?:
keine Ahnung hab wie dieser Scraper entstanden ist
Moin,
wie ich schon oben sagte, bei der Ersteinrichtung, kann man in der WEB-UI von
influxDBdrei mögliche Szenarien wählen,Easy/Automatisch(hier wird dann auch der Metrik Kram angelegt), Simple (hier wird man durch die Ersteinrichtung mit ein paar Fragen geführt) und Profi (hier musst Du alles alleine machen).Scraper -> https://docs.influxdata.com/influxdb/v2.7/write-data/no-code/scrape-data/
In diesem Fall wurde ein Scraper für das Lokale System eingerichtet, der Dir die Daten zum System, CPU, Memory, usw. gesammelt hat, zusätzlich wurden Daten, die die
influxDBbetreffen gesammelt, Zugriffszeiten, Queries, usw.
Sinn und Zweck ist, da jainfluxDBin professionellen Umgebungen laufen, dort ein Monitoring der Systeme zu haben, in Firmen laufen vielleicht Hunderte Server mitinfluxDbdort werden dann von allen 100 Syrern, die Daten auf einem der nur fürs Monitoren da ist, gespeichert und die Admins schauen sich nur den an, anstatt 100 einzelne Kisten.VG
Bernd -
@dp20eic
Vielen Dank! Verstanden und top erklärt.
Welche "Methode" ich bei der Installation gewählt hab, kann ich nicht mehr sagen. Ist für mich immer ein kleiner Krampf solche Dinge durchzuführen, da die influxdB-Doku sehr knapp und wenig erläuternd für mich ist. Daher muß ich ich quasie immer mir Artikel oder Forenbeiträge suchen die dazu passen bzw. als passend empfunden werden. Aber die influxdB Doku/Beschreibung hier wächst und freue mich dort immer mehr lesen und lernen zu können. Danke!
