Mal wieder Webseite auslesen

liv-in-sky

@homoran ok - mach mich mal an die arbeit

liv-in-sky

bitte testen- du mußt die datenpunkte im blockly noch richtig eintragen

die webseite wird direkt ausgelesen - die datei wird mit request geholt

die berechnungen sind schon im script

Image 7.png

<xml xmlns="https://developers.google.com/blockly/xml">
 <variables>
   <variable id="W3q,ZUH:5Q6saMtf{AUA">s65</variable>
   <variable id="T%=$W;0kK#gD_`r(}o:9">s35</variable>
   <variable id="Yr7zlPOZj)6N*k!]cQvq">s37</variable>
 </variables>
 <block type="procedures_defcustomnoreturn" id="]33#,HkQS%bDF`vB`P^q" x="337" y="212">
   <mutation statements="false">
     <arg name="s65" varid="W3q,ZUH:5Q6saMtf{AUA"></arg>
     <arg name="s35" varid="T%=$W;0kK#gD_`r(}o:9"></arg>
     <arg name="s37" varid="Yr7zlPOZj)6N*k!]cQvq"></arg>
   </mutation>
   <field name="NAME">etwas tun</field>
   <field name="SCRIPT">DQp2YXIgcGFyc2UgPSByZXF1aXJlKCdjc3YtcGFyc2UnKTsNCnZhciBpbnB1dCA9IHJlcXVpcmUoJ2ZzJykucmVhZEZpbGVTeW5jKCcvRGF0ZW4vY292aWQxOV81LmNzdicpLnRvU3RyaW5nKCk7DQoNCg0KDQp0cnkgew0KICByZXF1aXJlKCJyZXF1ZXN0IikoJ2h0dHBzOi8vd3d3Lmx6Zy5ucncuZGUvY292aWQxOS9kYXRlbi9jb3ZpZDE5XzUuY3N2JywgYXN5bmMgZnVuY3Rpb24gKGVycm9yLCByZXNwb25zZSwgcmVzdWx0KSB7DQogICAvLyBjb25zb2xlLmxvZyhyZXN1bHQpOw0KICAgDQpwYXJzZShyZXN1bHQsIHtjb21tZW50OiAnIyd9LCBmdW5jdGlvbihlcnIsIG91dHB1dCl7DQoJLy8gc2hvdyByZXN1bHQNCgkvL2NvbnNvbGUubG9nKEpTT04uc3RyaW5naWZ5KG91dHB1dCkpOw0KZm9yKGxldCByPTA7cjxvdXRwdXQubGVuZ3RoO3IrKyl7DQogICAvLyBsb2cob3V0cHV0W3JdWzQ2XSkNCn0NCmxvZyhvdXRwdXRbb3V0cHV0Lmxlbmd0aC0xXVs2NV0pDQpkNjU9TnVtYmVyKG91dHB1dFtvdXRwdXQubGVuZ3RoLTFdWzY1XSkqMTAwDQpsb2cob3V0cHV0W291dHB1dC5sZW5ndGgtMV1bMzddKQ0KZDM3PU51bWJlcihvdXRwdXRbb3V0cHV0Lmxlbmd0aC0xXVszN10pLzEwMDANCmxvZyhvdXRwdXRbb3V0cHV0Lmxlbmd0aC0xXVszNV0pDQpkMzU9TnVtYmVyKG91dHB1dFtvdXRwdXQubGVuZ3RoLTFdWzM1XSkvMTAwMA0Kc2V0U3RhdGUoczY1LGQ2NSkNCnNldFN0YXRlKHMzNSxkMzUpDQpzZXRTdGF0ZShzMzcsZDM3KQ0KDQp9KTsNCiAgDQogfSkub24oImVycm9yIiwgZnVuY3Rpb24gKGUpIHtjb25zb2xlLmVycm9yKGUpO30pOw0KfSBjYXRjaCAoZSkgeyBjb25zb2xlLmVycm9yKGUpOyB9ICAgDQoNCg0KDQo=</field>
   <comment pinned="false" h="80" w="160">Beschreibe diese Funktion …</comment>
 </block>
 <block type="procedures_callcustomnoreturn" id="VtDoZ,@!?HK~J,vK;+*R" x="238" y="287">
   <mutation name="etwas tun">
     <arg name="s65"></arg>
     <arg name="s35"></arg>
     <arg name="s37"></arg>
   </mutation>
   <value name="ARG0">
     <block type="text" id="7#PKlzH+`3;Z9]dS(cEB">
       <field name="TEXT">0_userdata.0.CONTROL-OWN.AAATEST.HOMORAN-CSV.s65</field>
     </block>
   </value>
   <value name="ARG1">
     <block type="text" id="vlrWSNU/ZNiILFfr(E|E">
       <field name="TEXT">0_userdata.0.CONTROL-OWN.AAATEST.HOMORAN-CSV.s35</field>
     </block>
   </value>
   <value name="ARG2">
     <block type="text" id="F[Nb@+#:(/JyXaX-uQyl">
       <field name="TEXT">0_userdata.0.CONTROL-OWN.AAATEST.HOMORAN-CSV.s37</field>
     </block>
   </value>
 </block>
</xml>

Homoran

@liv-in-sky sagte in Mal wieder Webseite auslesen:

die berechnungen sind schon im script

Supi, dann habe ich mich wohl geirrt und die Werte müssen nicht durch 1000 geteilt werden

Ich teste mal - DANKE

Homoran

@liv-in-sky sagte in Mal wieder Webseite auslesen:

du mußt die datenpunkte im blockly noch richtig eintragen

werden die dann angelegt???
oder muss ich erst welche (Number) anlegen?

liv-in-sky

@homoran

musst du selbst anlegen

liv-in-sky

@homoran number !!! ist der type

Homoran

@liv-in-sky Ja doch

Hab ich alles - passiert nix
müsste dann doch bei Skriptstart einmalig funktionieren, oder?

{
  "from": "system.adapter.admin.0",
  "user": "system.user.admin",
  "ts": 1632744780482,
  "common": {
    "name": "Hospitalisierung",
    "role": "value",
    "type": "number",
    "desc": "Manuell erzeugt",
    "read": true,
    "write": true,
    "def": 0
  },
  "native": {},
  "acl": {
    "object": 1636,
    "owner": "system.user.admin",
    "ownerGroup": "system.group.administrator",
    "state": 1636
  },
  "_id": "0_userdata.0.Gesundheit.Hospitalisierung",
  "type": "state"
}

liv-in-sky

@homoran

ja - ist ja kein trigger drin - einmal beim scriptstart - git es einen fehler im log - werden die daten im log angezeigt ?

Homoran

@liv-in-sky sagte in Mal wieder Webseite auslesen:

git es einen fehler im log - werden die daten im log angezeigt

nope und nope

habe csv-parse und auch fs als Module in der Instanz hinzugefügt

liv-in-sky

@homoran

check ich nicht ????

schaut das so aus ?

Image 9.png

Homoran

@liv-in-sky
Hab mir den code mal näher angesehen

var input = require('fs').readFileSync('/Daten/covid19_5.csv').toString();

try {

require("request")('https://www.lzg.nrw.de/covid19/daten/covid19_5.csv', async function (error, response, result) {

...

Was ist die erste Zeile?
hier ist Daten groß geschrieben

im request ist alles ok - der Pfad passt

EDIT:

sieht bei mir so aus:

liv-in-sky

@homoran sagte in Mal wieder Webseite auslesen:

var input = require('fs').readFileSync('/Daten/covid19_5.csv').toString();

ist überbleibsel - kannste löschen - wird nicht benutzt

bei mir funktioniert es - daher die verwunderung - es gibt keinen grund, dass da ein fehler bei dir ist - vorallem sollte dann auch ein fehler im log sein

aktiviere mal diese zeile - kommt dann was im llog

Image 10.png

Homoran

@liv-in-sky sagte in Mal wieder Webseite auslesen:

es gibt keinen grund, dass da ein fehler bei dir ist

doch - das ist eine antike Installation.
Bin immer noch nicht dazu gekommen sie um- und hochzuziehen

Gibt es da Befehle, die neuere Versionen benötigen?
Ich kopiere es gerade auf ein Testsystem

liv-in-sky

@homoran

eigentlich sehe ich da keine befehle, die ärger machen könnten - aber teste mal in einem anderen system

lösche diese zeile zur sicherheit raus:

var input = require('fs').readFileSync('/Daten/covid19_5.csv').toString();

Homoran

@liv-in-sky sagte in Mal wieder Webseite auslesen:

lösche diese zeile zur sicherheit raus:

und läuft

liv-in-sky

@homoran
puuh

Homoran

@liv-in-sky

DANKE!!
sieht jetzt so aus:

Logging ist auch aktiviert.
Dann muss ich mal morgen sehen, wie ich die Daten der letzten Tage in die History bringe

liv-in-sky

@homoran

hier das geänderte script - es muss ein neuer dp für das datum hinzugefügt werden - so sollte nur einmal am tag geschrieben werden, egal, was du für ein scheule hast

dann ist in der history nur ein wert pro tag

Image 7.png

<xml xmlns="https://developers.google.com/blockly/xml">
 <variables>
   <variable id="W3q,ZUH:5Q6saMtf{AUA">s65</variable>
   <variable id="T%=$W;0kK#gD_`r(}o:9">s35</variable>
   <variable id="Yr7zlPOZj)6N*k!]cQvq">s37</variable>
   <variable id="}-E+#=$du-36bQ-k{+2:">time</variable>
 </variables>
 <block type="comment" id="7/}6Z]{o5y_9ePTV%Ocv" x="113" y="63">
   <field name="COMMENT">https://forum.iobroker.net/topic/48057/mal-wieder-webseite-auslesen/33</field>
   <next>
     <block type="comment" id="3[R3_Kd(YKh$LFgBu3Zr">
       <field name="COMMENT">csv parse  request</field>
       <next>
         <block type="comment" id="+ig?Un6h,r/:z=PWAQCT">
           <field name="COMMENT">@homoran</field>
         </block>
       </next>
     </block>
   </next>
 </block>
 <block type="procedures_defcustomnoreturn" id="]33#,HkQS%bDF`vB`P^q" x="337" y="212">
   <mutation statements="false">
     <arg name="s65" varid="W3q,ZUH:5Q6saMtf{AUA"></arg>
     <arg name="s35" varid="T%=$W;0kK#gD_`r(}o:9"></arg>
     <arg name="s37" varid="Yr7zlPOZj)6N*k!]cQvq"></arg>
     <arg name="time" varid="}-E+#=$du-36bQ-k{+2:"></arg>
   </mutation>
   <field name="NAME">etwas tun</field>
   <field name="SCRIPT">ICANCnZhciBwYXJzZSA9IHJlcXVpcmUoJ2Nzdi1wYXJzZScpOw0KLy92YXIgaW5wdXQgPSByZXF1aXJlKCdmcycpLnJlYWRGaWxlU3luYygnL0RhdGVuL2NvdmlkMTlfNS5jc3YnKS50b1N0cmluZygpOw0KDQoNCg0KdHJ5IHsNCiAgcmVxdWlyZSgicmVxdWVzdCIpKCdodHRwczovL3d3dy5semcubnJ3LmRlL2NvdmlkMTkvZGF0ZW4vY292aWQxOV81LmNzdicsIGFzeW5jIGZ1bmN0aW9uIChlcnJvciwgcmVzcG9uc2UsIHJlc3VsdCkgew0KICAgLy8gY29uc29sZS5sb2cocmVzdWx0KTsNCiAgIA0KcGFyc2UocmVzdWx0LCB7Y29tbWVudDogJyMnfSwgZnVuY3Rpb24oZXJyLCBvdXRwdXQpew0KCS8vIHNob3cgcmVzdWx0DQoJY29uc29sZS5sb2coSlNPTi5zdHJpbmdpZnkob3V0cHV0KSk7DQpmb3IobGV0IHI9MDtyPG91dHB1dC5sZW5ndGg7cisrKXsNCiAgIC8vIGxvZyhvdXRwdXRbcl1bNDZdKQ0KfQ0KbG9nKG91dHB1dFtvdXRwdXQubGVuZ3RoLTFdWzY1XSkNCmQ2NT1OdW1iZXIob3V0cHV0W291dHB1dC5sZW5ndGgtMV1bNjVdKSoxMDANCmxvZyhvdXRwdXRbb3V0cHV0Lmxlbmd0aC0xXVszN10pDQpkMzc9TnVtYmVyKG91dHB1dFtvdXRwdXQubGVuZ3RoLTFdWzM3XSkNCmxvZyhvdXRwdXRbb3V0cHV0Lmxlbmd0aC0xXVszNV0pDQpkMzU9TnVtYmVyKG91dHB1dFtvdXRwdXQubGVuZ3RoLTFdWzM1XSkNCmxvZyhvdXRwdXRbb3V0cHV0Lmxlbmd0aC0xXVsyXSkNCmQyPVN0cmluZyhvdXRwdXRbb3V0cHV0Lmxlbmd0aC0xXVsyXSkNCmlmKGQyIT1nZXRTdGF0ZSh0aW1lKS52YWwpew0Kc2V0U3RhdGUoczY1LE1hdGgucm91bmQoZDY1ICogMTAwKSAvIDEwMCkNCnNldFN0YXRlKHMzNSxNYXRoLnJvdW5kKGQzNSAqIDEwMCkgLyAxMDApDQpzZXRTdGF0ZShzMzcsTWF0aC5yb3VuZCgzNyAqIDEwMCkgLyAxMDApDQpzZXRTdGF0ZSh0aW1lLGQyKQ0KfQ0KfSk7DQogIA0KIH0pLm9uKCJlcnJvciIsIGZ1bmN0aW9uIChlKSB7Y29uc29sZS5lcnJvcihlKTt9KTsNCn0gY2F0Y2ggKGUpIHsgY29uc29sZS5lcnJvcihlKTsgfSAgIA0KDQoNCg0K</field>
   <comment pinned="false" h="80" w="160">Beschreibe diese Funktion …</comment>
 </block>
 <block type="procedures_callcustomnoreturn" id="VtDoZ,@!?HK~J,vK;+*R" x="238" y="287">
   <mutation name="etwas tun">
     <arg name="s65"></arg>
     <arg name="s35"></arg>
     <arg name="s37"></arg>
     <arg name="time"></arg>
   </mutation>
   <value name="ARG0">
     <block type="text" id="7#PKlzH+`3;Z9]dS(cEB">
       <field name="TEXT">0_userdata.0.CONTROL-OWN.AAATEST.HOMORAN-CSV.s65</field>
     </block>
   </value>
   <value name="ARG1">
     <block type="text" id="vlrWSNU/ZNiILFfr(E|E">
       <field name="TEXT">0_userdata.0.CONTROL-OWN.AAATEST.HOMORAN-CSV.s35</field>
     </block>
   </value>
   <value name="ARG2">
     <block type="text" id="F[Nb@+#:(/JyXaX-uQyl">
       <field name="TEXT">0_userdata.0.CONTROL-OWN.AAATEST.HOMORAN-CSV.s37</field>
     </block>
   </value>
   <value name="ARG3">
     <block type="text" id="NG`ShBH)Ye1e53:w(D2e">
       <field name="TEXT">0_userdata.0.CONTROL-OWN.AAATEST.HOMORAN-CSV.time</field>
     </block>
   </value>
 </block>
</xml>

Homoran

@liv-in-sky

DANKE! - sehe ich mir später einmal an.
Ich muss mal etwas suchen, Paul hatte irgendwo einen Schnipsel zum Runden auf zwei Nachkommastellen ohne das Ergebnis als Text zu erhalten.
Das wollte ich mal versuchen mit einzubauen.

So toll sieht das nämlich nicht aus

liv-in-sky

@homoran wollt ich gerade machen - oder willst du selbst

NEWS

Mal wieder Webseite auslesen

Support us

712
Online

31.9k
Users

80.1k
Topics

1.3m
Posts

NEWS

Mal wieder Webseite auslesen

Support us

712Online

31.9kUsers

80.1kTopics

1.3mPosts

712
Online

31.9k
Users

80.1k
Topics

1.3m
Posts