HTTPMOD bei unbekannter Anzahl Einträge (Zeilen)

Markofu · 29 Dezember 2017, 17:55:17

Hallo an die Profis hier,
ich habe gerade angefangen mich mit HTTPMOD zu beschäftigen. Ich möchte gern den Vertretungsplan meines Sohes auswerten, da in diesem täglich Änderungen erscheinen und er andere Bücher einpacken muß. Diese Änderungen würde ich mir dann per Telegram zusenden. Telegram läuft schon

Es Handelt sich um folgende zwei Seiten.
http://plan.ernestinum-celle.de/Schueler/subst_001.htm
http://plan.ernestinum-celle.de/Schueler/subst_002.htm

Der Aufbau ist leider ohne ID´s
Ich würde nur gern die Zeilen auswerten, wo in der Spalte Klasse"6c" vorkommt. Das kann entweder allein (6c) oder (6c-6d) oder (6a,6b,6c) sein. Wir können auch gern zum testen die Klasse "9Fn" nehmen die kommt mehrmals auf beiden Plänen vor.

Das Datum und Tag zu ermitteln ist ja recht einfach, aber wie kann ich weitermachen? Mir fehlen die Ideen. Wie bekomme ich dann einzelne readings für jedes Feld in der entsprechenden Zeile

Hier mal ein Auszug des Quelltext der Seite.

<div class="mon_title">21.12.2017 Donnerstag</div>
<tr class='list odd'><td class="list" align="center">8L2</td><td class="list" align="center">5</td><td class="list" align="center">Ba</td><td class="list" align="center">Ph</td><td class="list" align="center">74</td><td class="list" align="center">Vertretung</td><td class="list" align="center">Bio ep1</td><td class="list" align="center"> </td><td class="list" align="center"> </td></tr>
<tr class='list even'><td class="list" align="center">9Fa</td><td class="list" align="center">3</td><td class="list" align="center">Ts</td><td class="list"> </td><td class="list" align="center">06</td><td class="list" align="center">Vertretung</td><td class="list" align="center">Bio</td><td class="list" align="center"> </td><td class="list" align="center"> </td></tr>
<tr class='list odd'><td class="list" align="center">9Fa</td><td class="list" align="center">4</td><td class="list" align="center">vB</td><td class="list" align="center">PoWi</td><td class="list" align="center">135</td><td class="list" align="center">.</td><td class="list" align="center">PoWi</td><td class="list"> </td><td class="list" align="center">dauerhafter Raumwechsel</td></tr>
<tr class='list even'><td class="list" align="center">9Fn</td><td class="list" align="center">2</td><td class="list" align="center">Ts</td><td class="list" align="center">En</td><td class="list" align="center">81</td><td class="list" align="center">Vertretung</td><td class="list" align="center">Bio</td><td class="list" align="center"> </td><td class="list" align="center"> </td></tr>
<tr class='list odd'><td class="list" align="center">9Fn</td><td class="list" align="center">4</td><td class="list" align="center">Ts</td><td class="list" align="center">En</td><td class="list" align="center">81</td><td class="list" align="center">Tausch</td><td class="list" align="center">PoWi</td><td class="list" align="center">Mi-20.12. / 3</td><td class="list" align="center"> </td></tr>

Die Zeile die ich z.B. suche Lautet mit Beispiel der Klasse "9Fn" etwas deutlicher formatiert.
<tr class='list even'>
<td class="list" align="center">9Fn</td>
<td class="list" align="center">2</td>
<td class="list" align="center">Ts</td>
<td class="list" align="center">En</td>
<td class="list" align="center">81</td>
<td class="list" align="center">Vertretung</td>
<td class="list" align="center">Bio</td>
<td class="list" align="center"> </td>
<td class="list" align="center"> </td>
</tr>

Wie bekomme ich jetzt die restlichen Sachen weg so das ich nur die Daten mit einem Trenner bekomme?

Vielen Dank schon mal

Gruß Marko

Markofu · 30 Dezember 2017, 06:25:33

Hallo,
hat keiner eine Idee? Ich such schon einige Tage in Foren und bei Goggle aber ich komme leider mit der Syntax noch nicht klar.

Bitte helft mir !!

Gruß Marko

Markofu · 30 Dezember 2017, 16:17:37

Hallo,

ich nochmal.

Habe ich die Frage an einer falschen Stelle gestellt? Ist es zu schwer oder zu einfach oder kann ich es mit HTTPMOD nicht lösen?

Über einen Tipp würde ich mich sehr freuen.

Gruß Marko

StefanStrobel · 01 Januar 2018, 20:21:50

Hallo Marko,

wenn Du mehrere Treffer für eine Regex verarbeiten möchtest, geht das z.B. mit regopt g.
Leider verstehe ich aber nicht was Du genau erreichen möchtest bzw. welche Daten Du in welchem Reading haben möchtest.
Wenn Dir regopt nicht weiter hilft, dann könntest Du Dir auch eine eigene Parse-Funktion in HTTPMOD einklinken.
So oder so musst Du Dich entweder mit regulären Ausdrücken oder mit Perl beschäftigen.

Gruss
Stefan

Markofu · 02 Januar 2018, 09:19:53

Hallo SrefanStrobel,

vielen Dank für deine Antwort. Vieleicht habe ich mich ja nicht richtig ausgedrückt. Sorry

Wie gesagt ist es ein Vertretungsplan. Manchmal gibt es keinen und manchmal mehrere Einträge (Zeilen in der Tabelle) die auf die Klasse zutreffen. Ich möchte dann gern die Daten aus den Spalten Vertreter Stunde usw ..... für die entsprechende Klasse als Readings speichern (Mehrere Zeilen möglich). Im Anschluß eine Benachrichtigung schicken sobald ein neuer Eintrag für die gesuchte Klasse hinzugekommen ist.

Das Ich mit Perl beschäftigen muß ist mir klar aber ich finde halt nicht den richtigen Start deshalb habe ich hier gepostet.

Gruß Marko

andi11 · 02 Januar 2018, 09:29:27

Zitat von: Markofu am 29 Dezember 2017, 17:55:17
Das Datum und Tag zu ermitteln ist ja recht einfach, aber wie kann ich weitermachen?

Wie machst du es denn da?

viegener · 02 Januar 2018, 12:19:02

Ich versuche mal einen ersten Teil beizutragen: Ich würde das in mehreren Schritten machen erstmal ein Reading pro Zeile die für Dich passt:

Lege mal ein httpmod an mit folgenden Attributen:

Code Auswählen


reading01Name zeile
reading01RegOpt g
reading01Regex tr class[^<]+<td[^<]+<b>9Fn(.*)

Als Ergebnis bekommst Du pro Zeile ein Reading mit den Einträgen für die Klasse 9Fn

Diese kannst Du dann weiter aufspalten in verschiedene Readings (entweder über verschiedene Regex/Readings) oder indem Du mehrere Capturegroups anlegst

Markofu · 03 Januar 2018, 09:23:07

Hallo viegener,

vielen Dank für deinen Tipp.
Leider bekomme ich ja auch nur eine Zeile. Das Datum finde ich und es ist O.K. Nur bei den Zeilen habe ich meine Probleme wenn es mehrere sind die zutreffend sind.

Attributes:
enableControlSet 1
get01RegOpt g
reading01Name Klasse
reading01Regex tr class[^<]+<td[^<]+9Fn(.*)
reading02Name Datum
reading02Regex <div class="mon_title">(.*)</div>
room Ernestinum
stateFormat Klasse 9Fn
timeout 5
userattr get01RegOpt reading01Name reading01Regex reading02Name reading02Regex

Gruß Marko

viegener · 03 Januar 2018, 09:58:14

Lies noch mal genau durch was ich oben geschrieben habe - es war nicht ger01RegOpt sondern reading01RegOpt!

Markofu · 03 Januar 2018, 10:44:44

Hallo viegener,

wer lesen kann ist klar im Vorteil

Es klappt ! Super und jetzt muß ich nur noch die Formatierungen der Tabelle wegfiltern und dann kann ich damit etwas anfangen.

Vielen vielen Dank !!!

Gruß Marko

Markofu · 04 Januar 2018, 01:12:16

Hallo viegener,

es klappt schon ganz gut nur eine Tipp bräuchte ich noch. In der Klasse können ja mehrere stehen.

bei "9Fn" ==> tr class[^<]+<td[^<]+9Fn(.*) => klappt es
bei "9Fn,9Fa" ==> tr class[^<]+<td[^<]+9Fn(.*) => klappt es

bei "9Fa,9Fn" ==> tr class[^<]+<td[^<]+(.*)9Fa(.*) => bekomme ich zu viel
bei einem tr class[^<]+<td[^<]+(.*)9Fa(.*)(.*) =>kommt nichts

Gruß Marko

viegener · 04 Januar 2018, 10:52:02

Ich denke Du musst Dich schon mit HTTPMOD unf regexp befassen - einfach nur (.*) irgendwo hinzufügen bringt doch gar nichts.

Wenn es Einträge gibt die mehrere Klassen enthalten, so muss ja ein Ausdruck her der zwischen und die richtige Klasse findet.

Code Auswählen

reading01Regex tr class[^<]+<td[^<]+[\w,]*9Fn[\w,]*(.*)

Vielleicht passt ja das, ohne dass ich es ausproboert hätte.

Aber wie gesagt, das ist keine einfache Aufgabe und ohne Einarbeiten in HTTPMOD (was bedeutet die Klammer in Regexp) und Regexp selbst wirst Du das nicht lösen können

Markofu · 04 Januar 2018, 12:45:23

Hallo,
vielen Dank. Es funktioniert leider nicht.

Zu welchen Seiten kannst du mir denn raten, wenn es geht in deutsch. Ich wollte es schnell zum laufen bekommen, da die Ferien bald zuende sind aber dann dauert es halt etwas länger.

Gruß Marko

dev0 · 04 Januar 2018, 12:51:09

http://wiki.selfhtml.org/wiki/Regul%C3%A4rer_Ausdruck
https://perldoc.perl.org/perlre.html
https://regex101.com/

viegener · 04 Januar 2018, 13:12:56

Leider ist die selfhtml-Seite für regexp nur noch für javascript und nicht mehr für perl
Das angebot wird da leider dünner - aber die self-html-Seite ist noch über webarchive verfügbar:

https://web.archive.org/web/20170402184254/https://wiki.selfhtml.org/wiki/Perl