Test/Support für Adapter rssfeed und vis-2-widgets-rssfeed

[OliverIO]

@sborg
kann dieses wochenende nicht debuggen, aber ich habe eine starke Vermutung.
Die haben den xml-Namesapce falsch angegeben
Anstatt
http://www.w3.org/2005/Atom wurde
https://www.w3.org/2005/Atom
angegeben.
Der feedparser validiert die Namespaces. Auch der w3-Tester sagt das es falsch ist.

Ich müsste jetzt die zugrundeliegende Bibliothek feedparser forken und
die dort enthaltenen Namespace-Definitionen erweitern:
https://github.com/danmactough/node-feedparser/blob/0a734f88195e4c7048a53867a8ec7c52f150fff2/lib/namespaces.js

Werde das aber durch debuggen nochmal verifizieren.
Lösung wäre halt rumpfuscheln an den Standards, nur weil jemand denkt der namespace sei ein Link und Links sind neuerdings alle https

[SBorg]

@oliverio Danke schon mal

Ich könnte sie auch einfach anschreiben es rückgängig bzw. korrekt zu machen.
Die andere Lösung, die ich zum testen aber mal ausführen werde, ich lade den Feed lokal auf meinen Web-Server und ändere ihn dementsprechend ab. Dann sehe ich ja ob es funktioniert.

(Notfalls kleines bash mit curl und sed mittels cronjob und ich ändere die Feed-URL )

[OliverIO]

@sborg said in Test und Support Adapter rssfeed v1.x.x:

Ich könnte sie auch einfach anschreiben

hehe, hab ich schon gemacht.
aber viel Hoffnung mach ich mir da nicht.
jetzt erst mal debuggen

[SBorg]

@oliverio sagte in Test und Support Adapter rssfeed v1.x.x:

hehe, hab ich schon gemacht.

Die sind aber eigentlich recht zugänglich. Sie stellen bspw. ihre Daten kostenlos dem SerienRecorder (Plugin für E2-Sat-Receiver) zur Verfügung

[SBorg]

@oliverio Bin auch eben erst dazugekommen. Es liegt am "https". Patche ich den Feed funktioniert es.
Von daher Danke und problem solved

---

Ich warte mal ab ob sie den Feed aufgrund deiner Meldung ändern. Da ich ihn nur einmal täglich abfrage, genügt mir auch ein cronjob der ihn per curl lokal auf meinen Web-Server downlädt, per sed patcht und ich dann den Feed über meinen internen Web-Server abonniere. Sind ja nur zwei Programmzeilen

[OliverIO]

@sborg
Sehr gut.
Noch eine Frage, hast du, wie von @skokarl auch berichtet, gelegentliche Speicher und absturzprobleme in Verbindung mit dem rssfeed Adapter?

[SBorg]

@oliverio Nein, läuft seit 26 ( ) Monaten ohne zu murren (sorry alter Haudegen @skokarl).

---

...und falls jemand zufällig per Suche hier landet und eine temporäre Lösung für den Atom-Feed von "Wunschliste" braucht:

#!/bin/bash

#Feed in den Web-Serverspace laden
 sudo -s -u www-data curl -o ./tmp/feed.atom "https://api.wunschliste.de/atom.pl?user_id=1234567&key=123456789012"

#Feed patchen
 sed -i 's/feed xmlns=\"https/feed xmlns=\"http/g' ./tmp/feed.atom

Dann den Feed vom eigenen Web-Server abonnieren. That's all

[OliverIO]

So nach längerer Zeit mal eine
neue Version 2.0.0

• Neuer Admin Konfigurationsdialog mittels jsonConfig
• Dadurch sind die Probleme in verschiedenen Browsern behoben
• Auch die falsche Farbdarstellung, wenn iobroker auf dunkles Design umgestellt wurde ist damit behoben
• Das untere Request/Refresh-Limit wurde auf 5 Minuten abgesenkt
• Die Einstellung maxarticles gibt es nun für jeden einzelnen feed separat
• wenn das widget rssfeed widget 2 platziert wird, erscheint nun keine hässliche Fehlermeldung mehr
• die Übersetzung wurde erneuert auf basis des iobroker übersetzers
• Bereiche des READMEs die nicht übersetzt werden sollten wurden nun als solche markiert
• Konfigurationsdaten müssten 1:1 übernommen werden, es muss nix migriert werden.

Ich freu mich über Tester und Fehlerberichte hier im Thread

@skokarl

[skokarl]

@oliverio

Danke, hatte schon nicht mehr damit gerechnet.

Update fehlerfrei durchgelaufen. ( wesentlich besseres Design )

Mein Speicherproblem hatte ich zunächst damit behoben, dass ich einen von 4 Feeds gelöscht hatte, der kommt jetzt
natürlich wieder rein.

kurze Frage, meinst Du wirklich Minuten ? Wäre 15 Minuten zu knapp ?

[skokarl]

@oliverio

sieht nicht gut aus, hab den Adapter gestoppt

nach Absturz von IO und Neustart der VM

Wir können gerne mal zusammen drüber gucken, nur kann ich nicht zeitaufwändige Tests am Live System machen....
meine Frau nutzt das Tablet ..... aber der Fehler kam relativ schnell nach dem Start vom RSS Feed

[OliverIO]

@skokarl sagte in Test und Support Adapter rssfeed v1.x.x:

@oliverio

kurze Frage, meinst Du wirklich Minuten ? Wäre 15 Minuten zu knapp ?

ja Minuten, das niedrigste ist jetzt 5 Minuten
wie in der Warnung geschrieben kann man das nicht generell sagen.
Große Anbieter merken da nicht viel davon und setzten auch Caches ein.
Kleinere Anbieter merken da halt schon was davon, wenn regelmäßig viele Leute viele Daten abrufen.

[OliverIO]

@skokarl
Der Speicherverbrauch von rssfeed ist normal, aber der des webservers unnatürlich hoch.
jetzt weiß ich nicht, was der da alles im hautpspeicher hält.

was passiert, wenn du alle widgets zu rssfeed entfernst. dann dürfte doch nix passieren?
Ansonsten gibt es keine Berührungspunkte zu rssfeed, ausser das die widgets html code erzeugen, der in einer vis seite enthalten ist und die der web server ausliefern muss

[skokarl]

@oliverio
bin nur am Handy....System lief wochenlang stabil, mit 3 Feeds, .... heute update gemacht, 4. RSS Feed wieder hinzugefügt....nach 5 Minuten komplett Zusammenbruch. Meine Feeds stehen hier weiter oben...hna, bild, zweimal ntv

[OliverIO]

@skokarl
dann den einen wieder entfernen und schauen.
kannst du mir den feed sagen der schwierigkeiten macht?
also genauen link?

evtl muss man dafür das template anpassen

an der eigentlichen rss funktionalität habe ich nichts geändert.
im code nur kleinigkeiten, die sich eher bei einer neuinstallation auswirken,

[skokarl]

@oliverio

meine Einstellungen und Feeds

der "letzte" war der neu hinzugefügte, wobei der nicht der schuldige sein muss, evtl. ist es die Gesamtanzahl der News

meine Widget Einstellungen

[OliverIO]

@skokarl
ok test gestartet.

ich werde dann gegen 0 Uhr sehen wie das ERgebnis ist.

[OliverIO]

@skokarl
so Ergebnis des Tests abgeschlossen.
leider keine guten Nachrichten für dich.
Ergebnis ist so wie ich es erwartet habe.

Hier meine Daten

Hier die aktuelle Instanzenansicht

Leider bekomme ich die Diagramme nicht raus, da arbeitet er ewig.
Aber bevor ich gegangen bin, hat es sich ebenfalls so um die Zahlen gedreht bei rssfeed und web

[skokarl]

@oliverio

Neustart, Jetzt, So

[skokarl]

@oliverio

Absturz, nach 5 Minuten, ich werd irre !

HILFE

das blöde ist, dass ich den Adapter super finde, sonst würde ich einfach drauf verzichten.

Meinst Du, dass es möglich ist, dass sich da zwei Adapter gegenseitig in die Quere kommen ?

Muss ja irgendetwas sein was ich habe und Du nicht.

In Proxmox konnte man verfolgen dass der Speicher langsam volläuft, also nicht schlagartig sondern Stück für Stück.

[OliverIO]

@skokarl

so fehler gefunden.

hattest du einmal erwähnt, das du das marquee widget oder mutlifeed widget verwendest?
oder das das log massenweise mit subscribe hinweisen geflutet wird?

das wären hinweise gewesen, die mich eher darauf gebracht hätte.
es war ein widget und nicht der adapter selbst.

release kommt wahrscheinlich morgen