Autor Thema: [gelöst] Nodes überwachen: outstandingAck und alive Prüfung  (Gelesen 1825 mal)

Offline alru

  • Jr. Member
  • **
  • Beiträge: 89
Moin,

ich habe jetzt meine ersten "Gehversuche" mit MySensors hinter mir und will da noch ein paar weitere Projekte realisieren.
Bei Homematic finde ich die bidirektionale Kommunikation sehr schön. Bei MySensors könnte man evtl. mit "requestAck" ein wenig Übertragungssicherheit in die Kommunikation der Nodes bringen.

Ich würde gerne eine Überwachung implementieren, um bei nicht erreichbaren Nodes eine Notification zu erzeugen und dachte mir, das müsste mit diesem Attribut machbar sein.

Im Gateway sehe ich auch, wenn ein "outstandingACK" registriert wurde. Allerdings finde ich keine Info, welcher Node die Ursache dafür ist. Setzt man den Verbose-Level auf 5, dann findet man im Log Hinweise auf die Node-ID. Der Log-Eintrag ist aber ein wenig unstrukturiert, ich hab keine Ahnung wie man den auswerten soll.

Gibt es noch einen besseren Weg, um den Node-Status abzufragen?
« Letzte Änderung: 13 April 2018, 12:43:27 von alru »
Gruß,

Stefan
(Raspi 3B - Stretch / CUL868 / MAX!Cube@culfw / HomeMatic / MySensors)

Offline Mathea

  • Full Member
  • ***
  • Beiträge: 138
Antw:requestAck / outstandingAck
« Antwort #1 am: 29 März 2018, 15:05:04 »
Hi Stefan,

ich habe festgestellt, dass ein abgesetzter Befehl zu den MySensor Nodes im fhem Eventmanager doppelt vorkommt. Einmal ohne Doppelpunkt zwischen dem Reading des Gerätenamens und dem zu setzenden Wert, und einmal mit. Das eine ist der von fhem abgesetzte Befehl, das andere die zurückkommende ACK-Message des Nodes. Du könntest eine generische DOIF Funktion schreiben, die eine Art Timeout abwartet nachdem ein Befehl von fhem an ein MySensors Device abgesetzt wurde. Sollte das ACK-Event nicht innerhalb einer gewissen Zeitspanne zurückkommen, kannst du das Gerät als "offline" markieren.

Ich befürchte, dass es allein mit dem "outstandingACK" Reading ansonsten nicht möglich ist, da es, wie du schon sagtest, keinerlei Information über das beteiligte Device preisgibt.

Gruß,
Mathea

Offline alru

  • Jr. Member
  • **
  • Beiträge: 89
Antw:requestAck / outstandingAck
« Antwort #2 am: 30 März 2018, 11:13:54 »
Hi Mathea,

das war der entscheidende Hinweis! Es funktioniert mit den von dir beschriebenen Events.
Mit einem DOIF werte ich jetzt die Events aus und schreibe die Ergebnisse in ein userReading vom Device.
Allerdings macht mir die Auswertung, bzw. das von dir genannte "...eine Art Timeout..." noch Probleme. Der Vergleich zwischen dem Status vom Device und dem ACK-Wert müsste etwas verzögert werden. Wie ich den Start so einer Abfrage verzögern kann, habe ich noch nicht herausgefunden.

Update:
Ich hab das "Timeout" Problem jetzt so gelöst: Ein DOIF speichert zunächst den Befehl und das darauf folgende ACK-Event ab. Danach wird (zeitverzögert) ein zweites DOIF getriggert, das die beiden Werte vergleicht. Wenn beide nicht gleich sind, dann wird eine Fehlermeldung generiert. Ist ein bisschen aufwändig, aber geht.
Ich werde jetzt als nächsten versuchen das auch für Sensoren zu implementiere, die eigentlich keine Befehle empfangen, sondern nur Daten senden. Das wird dann zeitgesteuert (ein mal pro Tag) getriggert, damit man weiß, dass der Sensor noch lebt.
« Letzte Änderung: 30 März 2018, 19:48:56 von alru »
Gruß,

Stefan
(Raspi 3B - Stretch / CUL868 / MAX!Cube@culfw / HomeMatic / MySensors)

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:requestAck / outstandingAck
« Antwort #3 am: 04 April 2018, 12:55:44 »
Zwischeneinwurf:

An sich finde ich die Idee, eine Art "alive"-Status zu haben sehr gut!

Eigentlich dürfte es nicht das Hexenwerk sein, sowas direkt in die Module zu implementieren.

Sieht da noch jemand Bedarf?

Würde das der Spur nach so angehen:
- Zwei neu Attribute (timeoutAck und timeoutAlive) fürMySensors-Device (beides Sekundenangaben)
- Ist das jeweilige Attr. gesetzt: internen Timer setzen. Kommt innerhalb der Zeiten eine Info: Device bekommt den Status "ALIVE"; Läuft der jeweils ab ohne Rückmeldung, gibt's entweder den Status "NO ACK" oder "DEAD" (mit Event - da kann man dann ein notify, DOIF oder was auch immer andocken).
- Jede erhaltene Message setzt den allg. Timer zurück, eine Ack-Message löscht den Ack-Timer.

Wenn mich jemand Modulentwicklungserfahrenes an die Hand nimmt und das nicht droht, zum Performance-Killer zu werdeb, mache ich mich gelegentlich mal dran... Die "???" gefallen mir schon länger nicht ;) . Liege ich richtig, das Timer-Handling evtl. nach Zeile 251 anzusiedeln?

Gruß, Beta-User
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN

Offline alru

  • Jr. Member
  • **
  • Beiträge: 89
Antw:requestAck / outstandingAck
« Antwort #4 am: 04 April 2018, 16:41:56 »
Moin,

eine schöne Idee, das im Modul zu integrieren. Das würde die Überwachung natürlich viel eleganter lösen.

Ich habe eine Anmerkung zu dem vorgeschlagenen Ablauf:
In meiner selbst gestrickten Lösung über DOIFs war es mir wichtig, dass nicht nur "irgendein" ACK zurück kommt, sondern das zum gesendeten Befehl passende ACK. Wenn das bei der Lösung im Modul Berücksichtigung finden könnte, würde ich mich freuen.
Gruß,

Stefan
(Raspi 3B - Stretch / CUL868 / MAX!Cube@culfw / HomeMatic / MySensors)

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:requestAck / outstandingAck
« Antwort #5 am: 04 April 2018, 17:29:06 »
Danke für die schnelle Rückmeldung, mal schauen, was sich machen läßt.

Allerdings glaube ich einerseits nicht so richtig, dass das auf die Art einfach so geht, andererseits aber auch nicht, dass das ein praktisches Problem darstellt:
Die Überwachung der Sendequeue macht das IO-Modul in der sub onAcknowledge($$) ab Zeile 398. Für einen einfachen Status sollte es m.E. aber genügen, wenn mit dem jeweils letzten Setzen einer Ack-Message ein Timer losläuft bzw. erneuert wird, der dann bei Ablauf der Zeit schlicht meldet, wenn die Ack-Warteschlange nicht leer ist. Gibt es ein Problem mit der Kommunikation, kann man das dann erkennen, gibt es keins, sind die Ack's auch alle durchgelaufen und man braucht diese ganzen Details gar nicht...

Wenn es dann im Fehlrfall doch benötigt wird, könntest du in einer entsprechenden notify-Routine immer noch den Mechanismus wie im IO-Modul verwenden, um die ganze Warteschlange anzuzeigen.

Aber erst mal sollte sowas überhaupt funktionieren, das wird erst mal Herausforderung genug 8) .
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN
Zustimmung Zustimmung x 1 Liste anzeigen

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:requestAck / outstandingAck
« Antwort #6 am: 08 April 2018, 11:13:42 »
Hallo zusammen,

anbei eine erste Version eines entsprechend angepaßten Moduls zum Testen.
Scheint bei mir problemlos zu sein, allerdings wie üblich: ohne Funktionsgarantie!

Es gibt die beiden neuen, nicht voneinander abhängigen Attribute timeoutAck und timeoutAlive. Beides sind Sekundenwerte, wobei für timeoutAlive ein Wert sinnvoll sein dürfte, der etwas länger ist als 2-3 reguläre Sendungszyklen einer Node. Ein Ack sollte dagegen recht zügig durchlaufen, hier reichen m.E. also wenige Sekunden.

Hat das GW nach Ablauf der Zeit timeoutAck noch eine zuzustellende Sendung an eine Node, wird der Status des Devices zu "NACK" mit Event und bleibt auch so, bis die nächste Message an die Node zugestellt wurde und die Queue dann leer ist.
Solange alles sauber durchläuft, ändert sich hier der Status des Devices nie.

Setzt man timeoutAlive, muß innerhalb der Zeit irgendeine Anfrage oder ein Wert von der Node gesendet werden, dann wird der Status auf "ALIVE" gesetzt, ansonsten wird er zu "DEAD", es sei denn, der Status sei "NACK" (das bleibt also immer, es sei denn der oben beschr. Fall tritt ein).

Fragen oder Anregungen: gerne...
Wenn mehr das hilfreich finden, können die Anpassungen gerne nach erfolgreichem Test auf mehr Installationen in die allg. Codebasis rein. Ich finde es jedenfalls eine nette Option und hoffe, die Lösung ist auch nicht sonderlich resourcenfressend. Wäre natürlich schön, das würde jemand mal prüfen, der mehr Ahnung von Perl hat als meinereiner.

Gruß, Beta-User

EDIT: Anhang gelöscht, neue Version siehe Folgebeiträge
« Letzte Änderung: 11 April 2018, 20:39:53 von Beta-User »
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN

Offline SensorMane

  • New Member
  • *
  • Beiträge: 36
    • Elektro Doku
Antw:requestAck / outstandingAck
« Antwort #7 am: 10 April 2018, 11:09:40 »
Hallo,

von mir erstmal ein Daumen hoch! So eine Möglichkeit fehlt mir schon lange. Ich habe bisher immer die Zeit bei den Readings mit anzeigen lassen, um zu sehen ob ein Node noch aktiv ist. Ist für mich wichtig, weil ich auch Batteriegepufferte Sensoren z.B. im Garten draußen habe.
Das aufwendige Anzeigen der Timestamps würde damit entfallen, man könnte dann ja direkt eine Anzeige implementieren die auf das inaktive Gerät hinweist.

Mal schauen wann ich das Testen kann und ob ichs hinkriege!

Danke für eure Bemühungen jedenfalls!
_________________________________
Virtualisiertes FHEM 5.8 auf debian
Mysensors Netzwerk www.mysensors.org

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:requestAck / outstandingAck
« Antwort #8 am: 10 April 2018, 16:45:00 »
Das aufwendige Anzeigen der Timestamps würde damit entfallen, man könnte dann ja direkt eine Anzeige implementieren die auf das inaktive Gerät hinweist.
Da das "state"-Reading genutzt wird, wird das ALIVE/DEAD/NACK direkt beim Device auch schon in der Raumübersicht angezeigt. Z.B.in einer ReadingsGroup sollte das auch problemlos abzufragen sein. Und es werden beim Wechsel des Status Events generiert, man kann also z.B. ein notify darauf ansetzen.

Apropos Events: Ist die Benennung für euch so ok? Ich habe da nicht lange drüber gehirnt oder Quervergleiche angestellt (HM kennt NACK, aber sonst...?). Vielleicht hat jemand bessere Ideen, bevor zu viele notify im Umlauf sind ;) .

Mal schauen wann ich das Testen kann und ob ichs hinkriege!
Ist nicht sonderlich schwer: .pm tauschen (Rechte beachten), reload ausführen, Attribut(e) setzen, warten...

Viel Erfolg!
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN

Offline alru

  • Jr. Member
  • **
  • Beiträge: 89
Antw:requestAck / outstandingAck
« Antwort #9 am: 10 April 2018, 21:44:23 »
Moin,

ich hab jetzt einmal einpaar Testfälle durchgespielt und finde die Funktionalität der neuen Attribute klasse.

Das Verhalten in folgendem Testfall finde ich nicht ganz schlüssig:
timoutAck=10
timeoutAlive=30

Der Ausgangsstatus ist ALIVE. Legt man den Node jetzt "tot" wechselt der Status nach DEAD. Wird nun ein Befehl abgeschickt erfolgt der Wechsel nach NACK.
Soweit alles OK.
Wird jetzt der Node wieder zum Leben erweckt, wird der letzte Befehl gesendet und ausgeführt. Im GW wird dann auch outstandingAck wieder auf 0 gesetzt.
Immer noch alles OK.
Allerdings erfolgt jetzt kein Wechsel vom Node Status auf ALIVE. Er bleibt bei NACK stehen, bis ein neuer Befehl erfolgreich gesendet wird. Das entspricht aber nicht dem tatsächlichen Verhalten.

@Beta-User: Ich habe mir daraufhin noch mal deine Beschreibung durchgelesen. Vermutlich hast du das Verhalten hier beschrieben
...
Hat das GW nach Ablauf der Zeit timeoutAck noch eine zuzustellende Sendung an eine Node, wird der Status des Devices zu "NACK" mit Event und bleibt auch so, bis die nächste Message an die Node zugestellt wurde und die Queue dann leer ist.
...

Ich kann irgendwie den Grund für dieses Verhalten nicht nachvollziehen. Ich hätte jetzt wieder einen Wechsel auf ALIVE erwartet.

Kleine Notiz am Rande: Mein "notify", das ich eigentlich mal für die Homematic Geräte programmiert habe, um mir bei fehlenden ACK eine Pushover Nachricht zu senden, hat mich zu meiner Überraschung bei diesen Tests sofort informiert, läuft also super!
Gruß,

Stefan
(Raspi 3B - Stretch / CUL868 / MAX!Cube@culfw / HomeMatic / MySensors)

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:requestAck / outstandingAck
« Antwort #10 am: 11 April 2018, 08:00:19 »
Moin,

Danke für die positive Rückmeldung!

Was das beobachtete Verhalten angeht, ist das "works as designed" (und versucht zu beschreiben).

Es gibt hier zwei Wege, das zu lösen:
- Man könnte den ack-Timer ständig erneuern, um zu sehen, ob es (doch noch) was neues gibt. Das wäre zwar möglich, aber ob das sinnvoll wäre, bin ich nicht so recht sicher: Wir haben dann ja (zu irgend einem Zeitpunkt) ein Problem in der Kommunikation, und eine vollständige Selbstheilung ist eher die Ausnahme, es sind eher Benutzereingriffe erforderlich. Dann kann man ja einen Befehl senden und sieht das Ergebnis dann wieder recht zeitnah.
- Man kann auch die "andere", eigentlich unabhängige Auswertungs-/Timererneuerungsroutine für "Alive" mit nutzen, um zu prüfen, ob das Problem gelöst ist. Das erfordert zwar, dass auch das  2. Attribut gesetzt ist, im Zusammenspiel erscheint mir das aber sinnvoll und sollte durch eine Änderung in Zeile 648 zu machen sein (statt unless ...):
if ($hash->{STATE} ne "NACK" or $hash->{STATE} eq "NACK" and @{$hash->{IODev}->{messagesForRadioId}->{$hash->{radioId}}->{messages}} == 0) {
Mutige können gerne mit testen, konnte selbst erst mal nur einen (erfolgreichen) Schnelltest machen ;) .

Dass notify, die für HM angelegt sind sauber funktionieren, ist super, das war der Hintergedanke der Benennung mit "NACK". Der Begriff ist damit gesetzt, oder? Sonst Rückmeldungen zu "ALIVE/DEAD"?

Gruß, Beta-User
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN

Offline alru

  • Jr. Member
  • **
  • Beiträge: 89
Antw:requestAck / outstandingAck
« Antwort #11 am: 11 April 2018, 08:55:35 »
Moin,

zur den noch vorgeschlagenen Lösungen:
(1. Lösungsweg)
Ich kann deinem "works as designed" nach nochmaliger Überlegung zustimmen. Letztendlich ist es schon sinnvoll, den letzten Fehlerzustand festzuhalten, auch wenn ich den mit einer Notification erhalte.
Also meinetwegen kann das so bleiben !

(2.Lösungsweg)
Deinen zweiten Lösungsweg habe ich nicht so ganz verstanden und auch den Code habe ich nicht ausprobiert.

Einen Hinweis noch: "NACK" würde ich sehr gerne so behalten, "ALIVE/DEAD" sind bei HM klein geschrieben. das wäre zur Vereinheitlichung noch schön, wenn man das ändern könnte.

Also ein echter Mehrwert diese Änderung!!!
Gruß,

Stefan
(Raspi 3B - Stretch / CUL868 / MAX!Cube@culfw / HomeMatic / MySensors)

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:requestAck / outstandingAck
« Antwort #12 am: 11 April 2018, 09:45:38 »
So,

anbei eine aktualisierte Fassung, ungetestet, aber mit dem Zutrauen, dass das so funktioniert ;) .

Changelog:
- "alive" und "dead" statt der großgeschriebenen Varianten. Danke für den Hinweis!
- Zeile 648 geändert wie vorhin beschrieben.

Zu dem 2. Punkt: sobald alles wieder läuft und nichts mehr zuzustellen ist, kann der Status m.E. auch wieder auf "alive" gesetzt werden (macht HM ja auch ähnlich, nur dass dort die Sendeversuche irgendwann abgebrochen werden, was MySensors nach meinem Stand der Erkenntnisse nicht macht). Dann hat man den jeweils letzten bekannten Stand.

Das finde ich eigentlich ein besseres "Design"... Deswegen ist es jetzt soweit drin, als es keinen wesentlichen zusätzlichen Rechen-und Prüfungsaufwand darstellt. (Ich mußte auch erst lernen, wie man sowas überhaupt umsetzt, deswegen habe ich das Ausgangs-"Design" erst mal eher in der Basisvariante gehalten).

Aber den (weiteren)  Aufwand, das aktiv durch eine Erneuerung des Ack-Timers zu prüfen würde ich nicht treiben wollen (wäre vom Code her kein großes Problem, man könnte dabei auch ggf. dann die Prüfintervalle immer länger werden lassen). Im Prinzip betrifft das aber eh' nur rein passive Nodes (die nicht zyklisch irgendwas senden); wer da ein Ack will, wird die Node in der Regel sowieso über irgendeinen Automatismus ansprechen (at, weekdayTimer...), dann ist ja auch wieder eine neue Message da, die den Status ggf. zurücksetzt.

Also ein echter Mehrwert diese Änderung!!!
:) Mal schauen, ob sich noch mehr finden, die das genauso sehen...

Gruß, Beta-User

EDIT: Anhang gelöscht, da jetzt per update verfügbar
« Letzte Änderung: 13 April 2018, 11:01:58 von Beta-User »
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:requestAck / outstandingAck
« Antwort #13 am: 11 April 2018, 20:38:44 »
ungetestet, aber mit dem Zutrauen, dass das so funktioniert ;) .
Jetzt auch etwas getestet: Scheint zu funktionieren, wie es soll :) .
Ich lösche daher die Ausgangsversion in dem ersten Post dazu.

Gruß, Beta-User
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN

Offline alru

  • Jr. Member
  • **
  • Beiträge: 89
Antw:requestAck / outstandingAck
« Antwort #14 am: 11 April 2018, 21:25:22 »
Moin,

kann ich bestätigen. Meine Tests waren ok. Ich wäre mit der Version erst mal glücklich!
Gruß,

Stefan
(Raspi 3B - Stretch / CUL868 / MAX!Cube@culfw / HomeMatic / MySensors)

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:requestAck / outstandingAck
« Antwort #15 am: 12 April 2018, 07:55:36 »
Danke für die Rückmeldung!

Da der Thread-Titel m.E. jetzt etwas zu eng für das Thema ist: Könntest du ihn evtl. ändern in z.B. "Nodes überwachen: outstandingAck bzw. alive"? Gerne mit "patch:"

Sonst bin ich mir nicht so recht sicher, ob das z.B. auch Hauswart und eventuelle weitere Interessierte/potentielle Tester hier mitbekommen, und einen extra Thread braucht es eigentlich dazu nicht, oder?

Anbei auch noch die .diff (mein erster Patch 8) ).

Gruß, Beta-User
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN
Zustimmung Zustimmung x 1 Liste anzeigen

Offline Mathea

  • Full Member
  • ***
  • Beiträge: 138
Antw:Nodes überwachen: outstandingAck und alive Prüfung (siehe Patch!)
« Antwort #16 am: 12 April 2018, 16:27:56 »
Sehr cool, dass jemand so schnell diese Funktionalität im Modul nachzieht  :) Vielen Dank für die Arbeit.

Ist es möglich, den Patch mit fhem Update ausrollen zu lassen?

Gruß,
Mathea

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:Nodes überwachen: outstandingAck und alive Prüfung (siehe Patch!)
« Antwort #17 am: 12 April 2018, 16:44:33 »
Ist es möglich, den Patch mit fhem Update ausrollen zu lassen?

Möglich von mir aus schon und gerne, aber wie ich @Hauswart als Modulmaintainer kenne, will er vermutlich
- einige Vorabtester, die bestätigen, dass es ohne Probleme funktioniert
- Rückmeldung, ob das insgesamt eine wünschenswerte Erweiterung der "Funktionalität" ist.

Zum ersten Punkt:
- läuft bei mir auf i386-Debian-stretch, Perl 5.24.
- wir sind grade mal 3 (von ca. 180 gemeldeten Installationen lt. Statistics), und das ist zwar nichts weltbewegendes, aber doch etwas mehr als nur eine kleine Änderung, und besondere Perl-Kenntnisse will ich nicht für mich reklamieren...

Zum zweiten:
bislang liegen "nur" 3 oder 4 positive Stimmen vor.

Gruß, Beta-User

PS: Apropos Perl-Kenntnisse - vielleicht mag sich ja jemand versierteres auch kurz das hier ansehen, dann könnte man das auch gleich mit in Angriff nehmen, wenn es denn wirklich ein Problem sein sollte...
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN
Gefällt mir Gefällt mir x 1 Liste anzeigen

Offline Hauswart

  • Developer
  • Sr. Member
  • ****
  • Beiträge: 803
Antw:Nodes überwachen: outstandingAck und alive Prüfung (siehe Patch!)
« Antwort #18 am: 12 April 2018, 16:49:41 »
Danke für das Erwähnen im Beitrag. Ich schaue es mir morgen Vormittag gerne Mal an. Gruß
Derzeitiges Setup unter Anderem:
* HM-CFG-USB
* nanoCUL868 (SlowRF)
* MySensors
* SIGNALduino 433
Gefällt mir Gefällt mir x 3 Liste anzeigen

Offline Hauswart

  • Developer
  • Sr. Member
  • ****
  • Beiträge: 803
Antw:Nodes überwachen: outstandingAck und alive Prüfung (siehe Patch!)
« Antwort #19 am: 13 April 2018, 10:47:19 »
So sollte ab morgen per Update verfügbar sein. :) Danke an Beta-User!
Derzeitiges Setup unter Anderem:
* HM-CFG-USB
* nanoCUL868 (SlowRF)
* MySensors
* SIGNALduino 433
Gefällt mir Gefällt mir x 2 Liste anzeigen

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:Nodes überwachen: outstandingAck und alive Prüfung (siehe Patch!)
« Antwort #20 am: 13 April 2018, 10:57:48 »
So sollte ab morgen per Update verfügbar sein. :)
Ups, so schnell :o .

Danke ebenso! :)

Der Ordnung halber an den TE: [gelöst]?
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN
Zustimmung Zustimmung x 1 Liste anzeigen

Offline Hauswart

  • Developer
  • Sr. Member
  • ****
  • Beiträge: 803
Antw:[gelöst] Nodes überwachen: outstandingAck und alive Prüfung
« Antwort #21 am: 16 April 2018, 10:47:52 »
Nur als Anregung:
defmod rg_battery readingsGroup TYPE=MYSENSORS_DEVICE:state .*:battery
attr rg_battery alias Batteriestatus
attr rg_battery room Z_Batterie
attr rg_battery valueIcon {'state.alive' => 'batterie', 'state.dead' => 'batterie@red', 'battery.ok' => 'batterie', 'battery.low' => 'batterie@red'}

defmod n_state_chk notify .*:dead|.*:[Bb]attery:.* { \
   if($EVENT !~ m/ok/ ) {                                                                                                                                         \
        { fhem ("msg FHEM Batteriewarnung, $NAME: $EVENT:\nBatterien sollten demnächst gewechselt werden!");;;;                                                                             \
         Log 3, "$NAME: Batteriewarnung $EVENT";;;;                                                                                                                                                               \
         } \
   } \
}
attr n_state_chk room Z_Batterie
Derzeitiges Setup unter Anderem:
* HM-CFG-USB
* nanoCUL868 (SlowRF)
* MySensors
* SIGNALduino 433

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:[gelöst] Nodes überwachen: outstandingAck und alive Prüfung
« Antwort #22 am: 18 April 2018, 11:30:31 »
Nur als Anregung:
Danke! Hab's zusammen mit einer kurzen Beschreibung der Attribute und einem allg. Update im Starter-Guide ins Wiki übernommen.

Bei Gelegenheit versuche ich mich noch an einer ReadingsGroup, die nur tot bzw. NACK-Nodes anzeigt...
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN

Offline Hauswart

  • Developer
  • Sr. Member
  • ****
  • Beiträge: 803
Antw:[gelöst] Nodes überwachen: outstandingAck und alive Prüfung
« Antwort #23 am: 18 April 2018, 11:51:50 »
Sollte so möglich sein:
defmod rg_battery readingsGroup TYPE=MYSENSORS_DEVICE:state .*:battery
attr rg_battery alias Batteriestatus
attr rg_battery room Z_Batterie
attr rg_battery valueFormat {$VALUE !~ m/(alive|ok)/?$VALUE:undef;;}
attr rg_battery valueIcon {'state.alive' => 'batterie', 'state.dead' => 'batterie@red', 'state.NACK' => 'batterie@red', 'battery.ok' => 'batterie', 'battery.low' => 'batterie@red'}

defmod n_state_chk notify .*:dead|.*:NACK|.*:[Bb]attery:.* { \
if($EVENT !~ m/ok/ ) {                                                                                                                                         \
  { fhem ("msg FHEM Batteriewarnung, $NAME: $EVENT:\nBatterien sollten demnächst gewechselt werden!");;;;                                                                             \
    Log 3, "$NAME: Batteriewarnung $EVENT";;;;                                                                                                                                                               \
    } \
} \
}
attr n_state_chk room Z_Batterie,Z_System
Derzeitiges Setup unter Anderem:
* HM-CFG-USB
* nanoCUL868 (SlowRF)
* MySensors
* SIGNALduino 433
Gefällt mir Gefällt mir x 1 Liste anzeigen

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:[gelöst] Nodes überwachen: outstandingAck und alive Prüfung
« Antwort #24 am: 18 April 2018, 12:54:38 »
Danke für den Stupser, sonst hätte es vermutlich noch länger gedauert :) .

Werde heute abend mal folgendes testen:
define Status_RS485 readingsGroup <Gerät>,<Status> TYPE=MYSENSORS_DEVICE:FILTER=IODev=MySensorsRS485GW:state
attr Status_RS485 group Technik
attr Status_RS485 mapping %ALIAS
attr Status_RS485 noheading 1
attr Status_RS485 room Info,Startseite
attr Status_RS485 valueFormat {$VALUE !~ m/alive/?$VALUE:undef;;}
attr Status_RS485 valueIcon {'state.dead' => 'lan_rs485@orange','state.NACK' => 'lan_rs485@red' }

EDIT: Getestet und für gut befunden :) .
Ich habe noch mehr solcher bedingter readingsGroups, die ich mir direkt auf der Startseite anzeigen lasse, aber eben nur dann, wenn auch Probleme vorliegen.
« Letzte Änderung: 19 April 2018, 18:35:58 von Beta-User »
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN
Gefällt mir Gefällt mir x 1 Liste anzeigen

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:[gelöst] Nodes überwachen: outstandingAck und alive Prüfung
« Antwort #25 am: 20 April 2018, 10:27:49 »
Das Ganze findet man jetzt auch im Starter-Guide. Korrektur/Verbesserungsvorschläge ausdrücklich erwünscht :) .

[OT1]
Den Artikel habe ich insgesamt auf meinen aktuellen Kenntnisstand gebracht, wer da noch was beitragen mag: gerne Rückmeldung im entsprechenden Wiki-Thread.
[/OT1]

Gruß, Beta-User
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN

Offline Ranseyer

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 1242
    • Homepage
Antw:[gelöst] Nodes überwachen: outstandingAck und alive Prüfung
« Antwort #26 am: 23 April 2018, 18:32:18 »
OK, ich mache also ein "update all"...

Dann müsste ich so ca. das umsetzen:
https://wiki.fhem.de/wiki/MySensors_Starter_Guide#alive.2C_NACK_und_dead

Frage: Wenn ich "neue HW" teste und jeden "Fehler an einem RS485 Bus" in ein separates Log haben möchte, wie gehe ich dazu am besten vor, dass dann nichts unter den Tisch fällt.
(Also weniger wie der Batteriestatus aktuell ist)
FHEM mit FTUI. Homematic-Funk für Thermostate und Licht. MySensors als Basis für eigene HW.
Zentrale ist der MAPLE-CUL mit RFM69+HModUART-AddOn.
Doku zu meinen Projekten: Github/Ranseyer. Platinen falls verfügbar gerne auf Anfrage.
Support: gerne wenn ich Zeit+Lust habe im Forum. Nicht per PN!

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:[gelöst] Nodes überwachen: outstandingAck und alive Prüfung
« Antwort #27 am: 23 April 2018, 20:04:43 »
Das/die Attribut/e nur für die betreffenden Nodes setzen, dann z.B. ein FileLog-Device definieren.
Das sollte dann (der Spur nach) auf MYSENSORS.*:.(dead|alive|NACK) reagieren (braucht ggf. addStateEvent). Wenn dein naming anders ist (ich nutze Alias), muß dann eben die DEF etwas anders aussehen.

Ich selbst nutze im Moment nur die readingsGroup unten.
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN

Offline Ranseyer

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 1242
    • Homepage
Antw:[gelöst] Nodes überwachen: outstandingAck und alive Prüfung
« Antwort #28 am: 23 April 2018, 20:24:15 »
Danke !

Hmm, so ?

defmod Status_RS485 readingsGroup MYSENSOR.*:.,(dead|alive|NACK) TYPE=MYSENSORS_DEVICE:FILTER=IODev=mySensGwRS485
attr Status_RS485 DbLogExclude .*
attr Status_RS485 mapping %ALIAS1
attr Status_RS485 room Unsorted
attr Status_RS485 valueFormat {$VALUE !~ m/alive/?$VALUE:undef;;}
attr Status_RS485 valueIcon {'state.dead' => 'lan_rs485@orange','state.NACK' => 'lan_rs485@red' }

Den Status am Ende habe ich nicht Eingetragen, aber dafür vorne. Soll das von vorn nach hinten verschoben werden ?


FHEM mit FTUI. Homematic-Funk für Thermostate und Licht. MySensors als Basis für eigene HW.
Zentrale ist der MAPLE-CUL mit RFM69+HModUART-AddOn.
Doku zu meinen Projekten: Github/Ranseyer. Platinen falls verfügbar gerne auf Anfrage.
Support: gerne wenn ich Zeit+Lust habe im Forum. Nicht per PN!

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:[gelöst] Nodes überwachen: outstandingAck und alive Prüfung
« Antwort #29 am: 23 April 2018, 20:41:46 »
Hmm, in dem Fall steht "<Gerät>,<Status>" genau so in der DEF (die <> sind die Erkennungszeichen für die Überschrift, das ist also ausnahmsweise kein Platzhalter).

Warum kein FileLog?
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN

Offline Ranseyer

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 1242
    • Homepage
Antw:[gelöst] Nodes überwachen: outstandingAck und alive Prüfung
« Antwort #30 am: 23 April 2018, 21:00:22 »
FileLog soll schon sein.
Das wäre nun mein Stand:
(Das Log ist noch leer)

define Status_RS485 readingsGroup <Gerät>,<Status> TYPE=MYSENSORS_DEVICE:FILTER=IODev=mySensGwRS485
attr Status_RS485 DbLogExclude .*
attr Status_RS485 mapping %ALIAS
attr Status_RS485 room Unsorted
attr Status_RS485 valueFormat {$VALUE !~ m/alive/?$VALUE:undef;;}
attr Status_RS485 valueIcon {'state.dead' => 'lan_rs485@orange','state.NACK' => 'lan_rs485@red' }
define Status_RS485_Log FileLog ./log/Status_RS485-%Y-%m.log Status_RS485
attr Status_RS485_Log DbLogExclude .*
attr Status_RS485_Log room 9.90_Logs
FHEM mit FTUI. Homematic-Funk für Thermostate und Licht. MySensors als Basis für eigene HW.
Zentrale ist der MAPLE-CUL mit RFM69+HModUART-AddOn.
Doku zu meinen Projekten: Github/Ranseyer. Platinen falls verfügbar gerne auf Anfrage.
Support: gerne wenn ich Zeit+Lust habe im Forum. Nicht per PN!

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:[gelöst] Nodes überwachen: outstandingAck und alive Prüfung
« Antwort #31 am: 23 April 2018, 21:12:57 »
Die ReadingsGroup dient m.E. nur zur Anzeige und generiert nach meiner Kenntnis keine eigenen Events.

Ich würde meinen, dass das (ungetestet) eher so aussehen sollte:
define Status_RS485_Log FileLog ./log/Status_RS485-%Y-%m.log MYSENSORS.*:.(dead|alive|NACK) und eben addStateEvent benötigt.
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN

Offline basti223

  • New Member
  • *
  • Beiträge: 12
Antw:[gelöst] Nodes überwachen: outstandingAck und alive Prüfung
« Antwort #32 am: 21 Mai 2018, 22:22:03 »
Hallo zusammen,

super Anpassung! Danach habe ich auch schon lange gesucht.. Könnte man im Zuge dieser Anpassung auch noch die Heartbeatlogik aus MySensors implementieren? Ich habe meine MySensors-Geräte alle so aufgebaut, dass diese alle 5 Minuten einen Heartbeat senden, anscheinend wird dieser in FHEM aber immer noch nicht ausgewertet :( Habe mit Verbose 5 im Gateway nichts dergleichen gesehen und meine Geräte springen alle auf dead  :(

Offline Beta-User

  • Moderator
  • Hero Member
  • ***
  • Beiträge: 4605
Antw:[gelöst] Nodes überwachen: outstandingAck und alive Prüfung
« Antwort #33 am: 22 Mai 2018, 09:41:13 »
Könnte man im Zuge dieser Anpassung auch noch die Heartbeatlogik aus MySensors implementieren? Ich habe meine MySensors-Geräte alle so aufgebaut, dass diese alle 5 Minuten einen Heartbeat senden, anscheinend wird dieser in FHEM aber immer noch nicht ausgewertet :(
Moin basti223,

die Heartbeat-Logik ist in den aktuellen Modulen nicht implementiert.

Wenn du magst, kannst du gerne meine aktuellen Versionen testen: https://github.com/rejoe2/FHEM_MYSENSORS/tree/Development
Es werden die 10_MYSENSORS_DEVICE.pm und die Constants.pm in lib/Device/MySensors benötigt.

Damit wird der heartbeat ausgewertet und man hat auch die Möglichkeit, diesen aktiv durch ein "get" anzufordern (was jedenfalls bei nicht-schlafenden Nodes problemlos funktioniert).

Hat auch den Vorteil, dass man darüber auch ein "get" für RSSI-Werte von RFM-Nodes absetzen können sollte (allerdings habe ich noch keine RFM-Nodes, weiß also nicht, ob die Richtung paßt, und die Rückmeldung bei RS485-Nodes ist wenig aussagekräftig ::) ). Was ganz vielleicht geht, ist das verzögerte Senden von Meldungen an "smartsleep"-Nodes (bislang komplett ungetestet, der Code-Entwurf schadet aber bei "normalen" nodes auch nicht).

Diese (bzw. eine geringfügig andere Vor-) Version hatte ich jetzt ca. 2 Wochen im Einsatz, die hat(te) aber noch ein paar Haken:

- Es gab da noch zu viele sichtbare interne Readings (sollte weitestgehend behoben sein)
- das battery-Reading ist umbenannt (siehe aktuelle Diskussion dazu im Entwickerbereich, auf batteryPercentage)

Dann gibt es noch einen zusätzlichen Percentage-Kanal für RGB(W)-Devices (da gab es neulich hier auch einen Thread zu).

An sich könnte man das "alive"-update zukünftig (so wie du (@bast223) das auch geplant hattest) nur noch bei einem heartbeat (bzw. evtl. noch einzubauen: einer smartsleep-Info) machen. Die Node muß das dann entweder senden, oder man muß ein entsprechendes get ausführen. Das würde den Code für alle anderen wieder entschlacken, die das nicht nutzen wollen (weil nur noch ein kleiner Teil der Messages zur Erneuerung des Timers führen würde).

Tests und Rückmeldung dazu sind natürlich willkommen, aber erwartet keine Wunder ;) . Insbesondere das mit dem smartsleep sollte sich mal jemand ansehen, der wirklich was von Perl versteht, da sind ein paar weitere Implikationen im Zusammenhang mit ACK-Anforderungen drin, die man ggf. noch abfangen sollte.

Und ob bzw. wann und in welcher Form das effektiv einen Weg in die offiziellen Module findet, ist eine andere Frage. Wenn allg. Interesse an den heartbeat-Geschichten besteht, aber die smartsleep-Funktionalität eine größere Baustelle ist, könnte man daraus ggf. auch recht einfach erst mal eine Zwischenversion stricken, die nur die oben geschilderten heartbeat und RSSI-Implementierung aus der 2.0 API enthält.

Grüße,
Beta-User
Server: HP-T5740 mit Debian stretch (i386) + aktuellem FHEM | ConfigDB | VCCU mit einiger HM-Hardware | MySensors seriell (2.3.1-beta@RS485, div. konkrete Hardware, u.a. einige DS18B20) | Milight@ESP-GW@MQTT2 | zigbee2mqtt@MQTT2 | SIGNALduino | MapleCUN