Tägliche Regenmenge aus DWD-Radolan Daten einlesen

[Gisbert]

Hallo Jörg,

ich bin auf dieses Modul gestoßen und hab es gleich genutzt.
Ich würde es gerne in der Weise nutzen, dass ich das Reading, das am nächsten zur Abfragezeit ist, als Event/Trigger für ein DOIF einsetzen will.
Geht das und wenn ja, wie?

Viele Grüße Gisbert

[JoWiemann]

Anscheinend noch ein Problem issue:
Wenn ich "enableDWDdata = rainByDay,rainSinceMidnight,rainRadarbyLocation" habe, tauchen die since_midnight readings nicht mehr auf

Hallo Franz,

anbei eine neue Version:

- fehlende Readings since_midnight bei enableDWDdata = rainByDay,rainSinceMidnight,rainRadarbyLocation behoben
- Readings rain_radar bekommen Readings-Timestamp des DWD timestamp. Somit ist das Attribut outputFormat im FileLog Device nicht mehr notwendig und die Readings sind richtig sortiert.

Grüße Jörg

PS: (%hash) = split(/\\/, $string); Führt zu einem unsortierten Ergebnis

[alkazaa]

Hallo Jörg,

anbei eine neue Version:

Ist leider die gleiche Datei wie vorher...

[JoWiemann]

Hallo Jörg,

anbei eine neue Version:

Ist leider die gleiche Datei wie vorher...

Ups, mein Fehler 

[alkazaa]

Super Jörg, Danke!
Es scheint jetzt alles OK, bis auf eine Kleinigkeit, die ich aber selber fixen konnte:
Im log-File stehen Zeilen der Form

Code Auswählen Erweitern

2023-10-27_16:15:00 myCDC Home_rain_radar:2023-10-27_16:15:00: 0
2023-10-27_16:20:00 myCDC Home_rain_radar:2023-10-27_16:20:00: 0
usw.D.h. jedes reading hat einen anderen Namen, da der timestamp im reading auftaucht ("Home_rain_radar:2023-10-27_16:15:00:"). Im SVG-Plot Editor kann man dann den interessierenden Ort nicht auswählen (ich habe auch mehrere locations).
Gefixt habe ich das durch     

Code Auswählen Erweitern

attr FileLog_DWD_Regen_Radar outputFormat { return $TIMESTAMP." ".$NAME." ".$1." ".$2."\n" if $EVENT =~ /(.*?):.*?:\s(.*)/}Die Zeilen der log-Datei sind dann

Code Auswählen Erweitern

2023-10-27_18:15:00 myCDC Home_rain_radar 0
2023-10-27_18:20:00 myCDC Home_rain_radar 0
2023-10-27_16:20:00 myCDC CW78_rain_radar 0.08
2023-10-27_16:25:00 myCDC CW78_rain_radar 0.16
usw.
Noch ne Neugierfrage:
wie lange dauert auf Deiner hardware ein kompletter "set <CDC-device> update"? Bei mir (Raspi 3B+) sind es 6...6,5 sec.

Beste Grüße
Franz

[JoWiemann]

Super Jörg, Danke!
Es scheint jetzt alles OK, bis auf eine Kleinigkeit, die ich aber selber fixen konnte:
Im log-File stehen Zeilen der Form

Code Auswählen Erweitern

2023-10-27_16:15:00 myCDC Home_rain_radar:2023-10-27_16:15:00: 0
2023-10-27_16:20:00 myCDC Home_rain_radar:2023-10-27_16:20:00: 0
usw.D.h. jedes reading hat einen anderen Namen, da der timestamp im reading auftaucht ("Home_rain_radar:2023-10-27_16:15:00:"). Im SVG-Plot Editor kann man dann den interessierenden Ort nicht auswählen (ich habe auch mehrere locations).
Gefixt habe ich das durch     

Hallo Franz,

Da ich ja jetzt den Reading Timestamp anpasse, kann der Timestamp aus dem Name ja raus. Soll ich das so ändern? Geht natürlich nicht, weil identische Reading Namen.

Ich werde beim Generieren eines FileLog über das Attribut RainRadarFileLog Deine Idee einbauen.

Noch ne Neugierfrage:
wie lange dauert auf Deiner hardware ein kompletter "set <CDC-device> update"? Bei mir (Raspi 3B+) sind es 6...6,5 sec.

Sie bei mir genauso aus.

Grüße Jörg

[JoWiemann]

Super Jörg, Danke!
Es scheint jetzt alles OK, bis auf eine Kleinigkeit, die ich aber selber fixen konnte:
Im log-File stehen Zeilen der Form

Code Auswählen Erweitern

2023-10-27_16:15:00 myCDC Home_rain_radar:2023-10-27_16:15:00: 0
2023-10-27_16:20:00 myCDC Home_rain_radar:2023-10-27_16:20:00: 0
usw.D.h. jedes reading hat einen anderen Namen, da der timestamp im reading auftaucht ("Home_rain_radar:2023-10-27_16:15:00:"). Im SVG-Plot Editor kann man dann den interessierenden Ort nicht auswählen (ich habe auch mehrere locations).
Gefixt habe ich das durch     

Hallo Franz,

leider funktioniert das nicht wirklich. Entstehen durch mehrere Lokationen unterschiedliche Zeilenlängen, so werden, sofern das Log mit kürzen Zeilen startet, diese nicht geplottet. Im gezeigten Fall wird kein Plot für DWD_Regen_Radar Home_rain_radar. Kopiere ich die DWD_Regen_Radar Home_rain_radar Zeilen nach hinten funktioniert es.

Code Auswählen Erweitern

2023-10-27_19:10:00 DWD_Regen_Radar Home_rain_radar: 0
2023-10-27_19:15:00 DWD_Regen_Radar Home_rain_radar: 0
...
2023-10-27_21:00:00 DWD_Regen_Radar Home_rain_radar: 0
2023-10-27_21:05:00 DWD_Regen_Radar Home_rain_radar: 0
2023-10-27_21:10:00 DWD_Regen_Radar Home_rain_radar: 0
2023-10-27_19:10:00 DWD_Regen_Radar Bad_Soden_rain_radar: 0
2023-10-27_19:15:00 DWD_Regen_Radar Bad_Soden_rain_radar: 0
...
2023-10-27_21:00:00 DWD_Regen_Radar Bad_Soden_rain_radar: 0
2023-10-27_21:05:00 DWD_Regen_Radar Bad_Soden_rain_radar: 0
2023-10-27_21:10:00 DWD_Regen_Radar Bad_Soden_rain_radar: 0

Grüße Jörg

[alkazaa]

Hallo Jörg,
das ist merkwürdig. Bei mir funktioniert es. Mit diesen Log-Datei Einträgen

Code Auswählen Erweitern

...
2023-10-27_21:30:00 myCDC Home_rain_radar 0.03
2023-10-27_21:35:00 myCDC Home_rain_radar 0.03
2023-10-27_19:35:00 myCDC A_Dorf_rain_radar 0.06
2023-10-27_19:40:00 myCDC A_Dorf_rain_radar 0.16
...führt zu diesem Plot:
Du darfst diesen Dateianhang nicht ansehen.

Allerdings ist bei mir auch der ":" vor dem Zahlenwert entfernt worden, vielleicht liegt's daran?

Gruß Franz

[JoWiemann]

Allerdings ist bei mir auch der ":" vor dem Zahlenwert entfernt worden, vielleicht liegt's daran?

Hallo Franz,

ich hatte den : entfernt, da ich ihn zunächst in Verdacht hatte. Komisch, komisch

Grüße Jörg

[alkazaa]

Der Auswahldilog beim SVG Ploteditor sieht bei mir so aus (sind hier andere Orte als im vorigen Beispiel):Du darfst diesen Dateianhang nicht ansehen. 
-Franz

[alkazaa]

Ich werde beim Generieren eines FileLog über das Attribut RainRadarFileLog Deine Idee einbauen.

D.h. Du hast es im *.pm Modul gemacht, nicht per outputFormat Attribut?
Falls ja, lad doch mal den modifizierten 98_CDCOpenData.pm Code hoch.

[JoWiemann]

Ich werde beim Generieren eines FileLog über das Attribut RainRadarFileLog Deine Idee einbauen.

D.h. Du hast es im *.pm Modul gemacht, nicht per outputFormat Attribut?
Falls ja, lad doch mal den modifizierten 98_CDCOpenData.pm Code hoch.

Hallo Franz,

nein, dass habe ich verworfen. Ich habe ein FileLog Device mit Deiner Ergänzung.

Code Auswählen Erweitern

defmod FileLog_DWD_Regen_Radar FileLog ./log/DWD_Regen_Radar-%Y-%m.log DWD_Regen_Radar:.*
attr FileLog_DWD_Regen_Radar logtype text:linesInTheFile
attr FileLog_DWD_Regen_Radar outputFormat { return $TIMESTAMP." ".$NAME." ".$1." ".$2."\n" if $EVENT =~ /(.*?):.*?:\s(.*)/}
attr FileLog_DWD_Regen_Radar room Wetter

Ich hänge Dir mal das FileLog an. Bitte kopier es doch mal in Dein System und prüfe, ob es bei Dir funktioniert.

Danke und Grüße Jörg

[alkazaa]

Ich habe dieses FileLog erstellt:

Code Auswählen Erweitern

defmod FileLog_DWD_Regen_Radar2 FileLog ./log/DWD_Regen_Radar-%Y-%m.log DWD_Regen_Radar:.*?_rain_radar:.*
attr FileLog_DWD_Regen_Radar2 outputFormat { return $TIMESTAMP." ".$NAME." ".$1." ".$2."\n" if $EVENT =~ /(.*?):.*?:\s(.*)/}
und von dort dann mit 'Create SVG Plot' das SVG device, dessen raw definition so aussieht:

Code Auswählen Erweitern

defmod SVG_FileLog_DWD_Regen_Radar2_1 SVG FileLog_DWD_Regen_Radar2:SVG_FileLog_DWD_Regen_Radar2_1:CURRENT

setstate SVG_FileLog_DWD_Regen_Radar2_1 initialized
Damit konnte ich was plotten. Ich habe allerdings einige der 0-Werte in der Log-Datei durch !=0 Werte ersetzt, um was zu sehen.

[JoWiemann]

Hallo Franz,

dann wird es an meiner Umgebung liegen. Ich werde morgen mal auf meinem Cubie testen.

Danke und Grüße Jörg

[alkazaa]

Hallo Jörg, Du schriebst:

Da ich ja jetzt den Reading Timestamp anpasse, kann der Timestamp aus dem Name ja raus. Soll ich das so ändern? Geht natürlich nicht, weil identische Reading Namen.

Ich schlage vor, den timestamp doch aus dem Namen zu entfernen.
Grund: Das eigentliche "reading" ist ja in diesem Fall ein Array von 25 Werten, die anzuschauen nur in der SVG-Graphik Sinn macht. Solange im Modul die Werte in der FileLog Datei landen, können sie in der readings-Liste ohne Not entfallen.
Und buchstäblich 'Anschauen' wird man sie sich dort ohnehin nicht. Für etwaige automatisierte Auswertungen (z.B. DOIFs oder notifies für Markisensteuerung etc.) wären aber 'verdichtete' Angaben hilfreich: z.B. könnten (bei jedem update des 25-Werte Radars fürs nächste 2-Stunden-Intervall) die readings "<location>_rain_next_5_minutes", "<location>_rain_next_15_minutes" und "<location>_rain_next_30_minutes" erzeugt werden. Die ließen sich dann für solche DOIFs gut automatisiert auswerten.

Gruß Franz