Puppeteer Adapter

[OliverIO]

@jensen

Ist mittlerweile etwas schwierig zu sagen, da du hier selbst mit npm rumgemacht hast.
Nur neben bei. Mit löschen meinst du sicherlich den Befehl npm uninstall und nicht einfach nur das Verzeichnis löschen?
Eigentlich sorgt npm uninstall dafür das package und Package-lock gepflegt bleibt
Hoffentlich hast du Backup. Die ganzen Aktionen können auch dazu führen, das die Installation am Ende Müll ist und du von Grund auf neu aufbauen musst.

[Jensen]

@oliverio
Oh, ich hatte nur die Verzeichnisse gelöscht, da ich gehofft hatte, daß das npm uninstall beim Deinstallieren des Adapters aufgerufen wird.
Ok, mal sehen wie ich das bereinigt bekomme.

[OliverIO]

@jensen

Du deinstallierst alle manuell installierten Module die du im Rahmen der Aktion mit npm install installiert hast
,it dem Befehl npm uninstall

Package.json ist für npm immer die Referenz.
Es kann sein, das manuell gelöschte Verzeichnisse zunächst wieder erscheinen.
Mit Package-lock machst du gar nix.

Wenn du dann denkst einigermaßen den ausgangszustand wieder erreicht zu haben,
Kannst du den puppeteer Adapter erneut installieren.

Die Fehlermeldungen und das entstehende detaillog dann bitte hier posten

[Jensen]

@oliverio
Ich bekomme das Ganze nicht richtig deinstalliert.
npm uninstall iobroker.puppeteer läuft zwar durch, aber npm list zeigt puppeteer trotzdem noch an.
Auch die Ordner erscheinen wieder.
Sieht mir alles so aus, als bräuchte ich eine Neuinstallation, und davor habe ich Schiss.

[arteck]

du hampelst da bisse zu viel rum.. vor allem hör auf Ordner zu löschen "nur weil es geht"
die Abhängigkeiten unterienander in den Paketen kannst du mit deiner logik (löschen vVerzeichniss fertig) nicht auflösen..

[OliverIO]

@jensen

Du kannst mal mit

npm ls puppeteer

Schauen zu welchem packet das puppeteer noch gehört.
Es kann durchaus sein, dass ein anderer Adapter das verwendet. Das hat uns aber dann nicht so interessieren.
Npm organisiert, dass auch mehrere Versionen parallel installiert werden können.

[Jensen]

@arteck
Ich lösche keine Ordner mehr, ich habe nur geschaut, was da ist.

[Jensen]

@oliverio
das ist die Ausgabe

c:\ioBroker>npm ls puppeteer
iobroker.inst@3.0.0 c:\ioBroker
`-- iobroker.puppeteer@0.3.0
  `-- puppeteer@22.15.0

[OliverIO]

@jensen

ok, das hängt direkt an der installation von iobroker und kommt wahrscheinlich von einer deiner
manuellen versuche puppeteer zu installieren. daher dann auch manuell deinstallieren

was passiert wenn du jetzt

npm uninstall puppeteer

eingibst?
bitte dann auch nochmal
npm ls puppeteer ausführen

[Jensen]

@oliverio

c:\ioBroker>npm uninstall puppeteer
npm error code EBUSY
npm error syscall rename
npm error path c:\ioBroker\node_modules\iobroker.admin
npm error dest c:\ioBroker\node_modules\.iobroker.admin-FjHuUvU7
npm error errno -4082
npm error EBUSY: resource busy or locked, rename 'c:\ioBroker\node_modules\iobroker.admin' -> 'c:\ioBroker\node_modules\.iobroker.admin-FjHuUvU7'
npm error A complete log of this run can be found in: C:\Users\IpsJensen\AppData\Local\npm-cache\_logs\2024-09-05T11_35_36_427Z-debug-0.log

c:\ioBroker>npm ls puppeteer
iobroker.inst@3.0.0 c:\ioBroker
`-- iobroker.puppeteer@0.3.0
  `-- puppeteer@22.15.0

[Jensen]

@OliverIO
mit angehaltenem ioBroker sieht's so aus

c:\ioBroker>npm uninstall puppeteer
npm warn deprecated dgram@1.0.1: npm is holding this package for security reasons. As it's a core Node module, we will not transfer it over to other users. You may safely remove the package from your dependencies.
npm warn deprecated @npmcli/move-file@1.1.2: This functionality has been moved to @npmcli/fs
npm warn deprecated inflight@1.0.6: This module is not supported, and leaks memory. Do not use it. Check out lru-cache if you want a good and tested way to coalesce async requests by a key value, which is much more comprehensive and powerful.
npm warn deprecated npmlog@5.0.1: This package is no longer supported.
npm warn deprecated npmlog@6.0.2: This package is no longer supported.
npm warn deprecated rimraf@3.0.2: Rimraf versions prior to v4 are no longer supported
npm warn deprecated har-validator@5.1.5: this library is no longer supported
npm warn deprecated glob@7.2.3: Glob versions prior to v9 are no longer supported
npm warn deprecated glob@7.2.3: Glob versions prior to v9 are no longer supported
npm warn deprecated glob@8.1.0: Glob versions prior to v9 are no longer supported
npm warn deprecated glob@7.2.3: Glob versions prior to v9 are no longer supported
npm warn deprecated abab@2.0.6: Use your platform's native atob() and btoa() methods instead
npm warn deprecated are-we-there-yet@2.0.0: This package is no longer supported.
npm warn deprecated are-we-there-yet@3.0.1: This package is no longer supported.
npm warn deprecated node-inspect@2.0.0: This module is part of Node.js core and does not need to be installed separately. It is now unmaintained.
npm warn deprecated debug@4.1.1: Debug versions >=3.2.0 <3.2.7 || >=4 <4.3.1 have a low-severity ReDos regression when used in a Node.js environment. It is recommended you upgrade to 3.2.7 or 4.3.1. (https://github.com/visionmedia/debug/issues/797)
npm warn deprecated debug@4.1.1: Debug versions >=3.2.0 <3.2.7 || >=4 <4.3.1 have a low-severity ReDos regression when used in a Node.js environment. It is recommended you upgrade to 3.2.7 or 4.3.1. (https://github.com/visionmedia/debug/issues/797)
npm warn deprecated debug@4.1.1: Debug versions >=3.2.0 <3.2.7 || >=4 <4.3.1 have a low-severity ReDos regression when used in a Node.js environment. It is recommended you upgrade to 3.2.7 or 4.3.1. (https://github.com/visionmedia/debug/issues/797)
npm warn deprecated domexception@4.0.0: Use your platform's native DOMException instead
npm warn deprecated phantomjs-prebuilt@2.1.16: this package is now deprecated
npm warn deprecated gauge@4.0.4: This package is no longer supported.
npm warn deprecated gauge@3.0.2: This package is no longer supported.
npm warn deprecated uuid@3.4.0: Please upgrade  to version 7 or higher.  Older versions may use Math.random() in certain circumstances, which is known to be problematic.  See https://v8.dev/blog/math-random for details.
npm warn deprecated request@2.88.2: request has been deprecated, see https://github.com/request/request/issues/3142
npm warn deprecated sinon@15.2.0: 16.1.1

changed 1360 packages, and audited 1362 packages in 1m

170 packages are looking for funding
  run `npm fund` for details

57 vulnerabilities (6 low, 30 moderate, 20 high, 1 critical)

To address issues that do not require attention, run:
  npm audit fix

To address all issues possible (including breaking changes), run:
  npm audit fix --force

Some issues need review, and may require choosing
a different dependency.

Run `npm audit` for details.

c:\ioBroker>npm ls puppeteer
iobroker.inst@3.0.0 c:\ioBroker
`-- iobroker.puppeteer@0.3.0
  `-- puppeteer@22.15.0

Qix- created this issue in visionmedia/debug

closed ReDos Vulnerability Regression Visibility Notice #797

Qix- created this issue in visionmedia/debug

closed ReDos Vulnerability Regression Visibility Notice #797

Qix- created this issue in visionmedia/debug

closed ReDos Vulnerability Regression Visibility Notice #797

[OliverIO]

@jensen

ah ok,
hab selbst was übersehen.
siehst du im iobroker noch den adapter pupeteer?
dann dort über die oberfläche den adapter entfernen.

[Jensen]

@oliverio
direkt aus der Adapterseite aufgerufen

$ iobroker del puppeteer --custom --debug
Delete adapter "puppeteer"
host.IpsServerWB Deleting 1 object(s).
You might have to delete it yourself!
Process exited with code 0

dann auf der Console

c:\ioBroker>npm ls puppeteer
iobroker.inst@3.0.0 c:\ioBroker
`-- iobroker.puppeteer@0.3.0
  `-- puppeteer@22.15.0

[OliverIO]

@jensen

ok, dann mal mit gewalt
du gehst direkt in das hauptverzeichnis von iobroker
auf linux /opt/iobroker
auf windows weiß ich nicht genau, aber in diesem verzeichnis muss
sich eine datei package.json befinden.

in diesem verzeichnis führst du den folgenden befehl aus

npm uninstall iobroker.puppeteer

und dann wieder den ls befehl und im iobroker in der adapter seite schauen ob der adapter weg ist.

wenn das auch nicht richtig funktioniert, dann gebe ich die installation als verloren auf
und du musst neu installieren. wahrscheinlich hat sich da was verrannt, was mit den normalen mitteln nicht auflösbar ist.

evtl weiß dann noch jemand anderes was.

[Jensen]

@oliverio

c:\ioBroker>npm uninstall iobroker.puppeteer
npm warn deprecated dgram@1.0.1: npm is holding this package for security reasons. As it's a core Node module, we will not transfer it over to other users. You may safely remove the package from your dependencies.
npm warn deprecated @npmcli/move-file@1.1.2: This functionality has been moved to @npmcli/fs
npm warn deprecated inflight@1.0.6: This module is not supported, and leaks memory. Do not use it. Check out lru-cache if you want a good and tested way to coalesce async requests by a key value, which is much more comprehensive and powerful.
npm warn deprecated npmlog@5.0.1: This package is no longer supported.
npm warn deprecated npmlog@6.0.2: This package is no longer supported.
npm warn deprecated rimraf@3.0.2: Rimraf versions prior to v4 are no longer supported
npm warn deprecated har-validator@5.1.5: this library is no longer supported
npm warn deprecated glob@7.2.3: Glob versions prior to v9 are no longer supported
npm warn deprecated glob@8.1.0: Glob versions prior to v9 are no longer supported
npm warn deprecated glob@7.2.3: Glob versions prior to v9 are no longer supported
npm warn deprecated glob@7.2.3: Glob versions prior to v9 are no longer supported
npm warn deprecated abab@2.0.6: Use your platform's native atob() and btoa() methods instead
npm warn deprecated are-we-there-yet@2.0.0: This package is no longer supported.
npm warn deprecated are-we-there-yet@3.0.1: This package is no longer supported.
npm warn deprecated node-inspect@2.0.0: This module is part of Node.js core and does not need to be installed separately. It is now unmaintained.
npm warn deprecated debug@4.1.1: Debug versions >=3.2.0 <3.2.7 || >=4 <4.3.1 have a low-severity ReDos regression when used in a Node.js environment. It is recommended you upgrade to 3.2.7 or 4.3.1. (https://github.com/visionmedia/debug/issues/797)
npm warn deprecated debug@4.1.1: Debug versions >=3.2.0 <3.2.7 || >=4 <4.3.1 have a low-severity ReDos regression when used in a Node.js environment. It is recommended you upgrade to 3.2.7 or 4.3.1. (https://github.com/visionmedia/debug/issues/797)
npm warn deprecated debug@4.1.1: Debug versions >=3.2.0 <3.2.7 || >=4 <4.3.1 have a low-severity ReDos regression when used in a Node.js environment. It is recommended you upgrade to 3.2.7 or 4.3.1. (https://github.com/visionmedia/debug/issues/797)
npm warn deprecated domexception@4.0.0: Use your platform's native DOMException instead
npm warn deprecated phantomjs-prebuilt@2.1.16: this package is now deprecated
npm warn deprecated gauge@4.0.4: This package is no longer supported.
npm warn deprecated gauge@3.0.2: This package is no longer supported.
npm warn deprecated uuid@3.4.0: Please upgrade  to version 7 or higher.  Older versions may use Math.random() in certain circumstances, which is known to be problematic.  See https://v8.dev/blog/math-random for details.
npm warn deprecated request@2.88.2: request has been deprecated, see https://github.com/request/request/issues/3142
npm warn deprecated sinon@15.2.0: 16.1.1

added 1 package, removed 64 packages, changed 1296 packages, and audited 1299 packages in 1m

165 packages are looking for funding
  run `npm fund` for details

57 vulnerabilities (6 low, 30 moderate, 20 high, 1 critical)

To address issues that do not require attention, run:
  npm audit fix

To address all issues possible (including breaking changes), run:
  npm audit fix --force

Some issues need review, and may require choosing
a different dependency.

Run `npm audit` for details.

Qix- created this issue in visionmedia/debug

closed ReDos Vulnerability Regression Visibility Notice #797

Qix- created this issue in visionmedia/debug

closed ReDos Vulnerability Regression Visibility Notice #797

Qix- created this issue in visionmedia/debug

closed ReDos Vulnerability Regression Visibility Notice #797

[Jensen]

@OliverIO
das ist jetzt mal neu

c:\ioBroker>npm ls puppeteer
iobroker.inst@3.0.0 c:\ioBroker
`-- (empty)

[OliverIO]

@jensen

und ist er in der adapter sicht des iobrokers auch weg?

wenn ja, kannst ihn wieder über die adaptersicht des iobrokers wieder installieren
und schauen ob alles funktioniert

und bitte nur noch die iobroker befehle und die iobroker oberfläche verwenden.
npm ist für dich tabu, ausser jemand der sich auskennt sagt es ausdrücklich.
dann aber auch immer nur mit vorhergehendem backup

[Jensen]

@oliverio
In der Adapteransicht wird er auch nicht mehr als installiert gelistet, sieht alles sehr gut aus.
Ich lasse es bis morgen ruhen, damit heute Nacht erst mal das Backup durchläuft.
Dann ein neuer Versuch, ohne npm

Danke für die Hilfe und die Geduld mit mir.

[Jensen]

Wie versprochen werde ich jetzt alle Schritte dokumentieren, die ich unternehme um den Puppeteer Adapter wieder ins System zu bringen.

Adapter installieren
Eigentlich denke ich, man sollte über die Adapterseite jeden Adapter bei laufendem System installieren können. Der Versuch, den Puppeteer Adapter zu installieren gibt mir folgende Rückmeldung:

$ iobroker add puppeteer auto --host IpsServerWB --debug
NPM version: 10.8.2
Installing iobroker.puppeteer@0.3.0... (System call)
npm error code EBUSY
npm error A complete log of this run can be found in: C:\WINDOWS\system32\config\systemprofile\AppData\Local\npm-cache\_logs\2024-09-06T05_46_44_817Z-debug-0.log
host.IpsServerWB Cannot install iobroker.puppeteer@0.3.0: 4294963214
ERROR: Process exited with code 25

Der komplette Log umfasst über 8000 Zeilen, ich hänge ihn hier als Datei ran.
2024-09-06T05_46_44_817Z-debug-0.log

Wenn ich mir die Log Datei anschaue, dann verstehe ich meistens nur Bahnhof, aber irgendwie beschleicht mich das Gefühl, an meinem System ist immer noch was im Argen.

[OliverIO]

@jensen

hm, der konkrete fehler ist der

7083 verbose stack Error: EBUSY: resource busy or locked, rename 'C:\ioBroker\node_modules\iobroker.admin' -> 'C:\ioBroker\node_modules\.iobroker.admin-GBn0lhRQ'

da wird versucht das verzeichnis umzubenennen. jetzt bin ich nicht firm im detailprozess der adapter installation. umgehen kannst du das, indem du den iobroker stoppst, prüfst ob iobroker wirklich beendet ist und dann von der kommandozeile aus installierst.
ich hab mal noch das fix kommando hinzugefügt, das prüft deine installation ob die richtigen berechtigungen überall gesetzt sind.
durch deine wilden npm befehle hast du sicherlich auch mal mit sudo gearbeitet, weil linux wegen berechtigung gemeckert hat?

iobroker stop
iobroker fix
iobroker isrun
iobroker install iobroker.puppeteer
iobroker start

der adapter ist dann installiert, eine neue instanz musst du dann noch selbst von der adapterseite aus erzeugen