NPM entfernt und ändert bei jedem Vorgang unzählige Pakete

[Thomas Braun]

@darkbrain85 sagte in NPM entfernt und ändert bei jedem Vorgang unzählige Pakete:

bullseye
sarge
xenial
stretch

Bei dem bunten Zoo an Quellen für falsche Distributionen wundert es mich eigentlich das der zusammengeflickte Frankenstein da überhaupt noch zuckt.

Installier den icons-open-icon-library-png Adapter nochmal sauber drüber.

[darkbrain85]

@thomas-braun
Mag sein, aber IMHO ist da keine Software mehr von den Repos installiert. Tatsächlich sollten die natürlich mal raus. Die Installation hat schon einige Jahre hinter sich und läuft an sich bis auf den oben genannten "Fehler" sauber.

[Thomas Braun]

@darkbrain85

Wie gesagt:
Installier den icons-open-icon-library-png Adapter nochmal sauber drüber.

Aus dem Repo, nicht aus github.

Dann den npm tree mal prunen.

cd /opt/iobroker
npm prune

[darkbrain85]

@thomas-braun

npm prune ist durch:

admin@debian:/opt/iobroker$ npm prune
npm WARN deprecated crypto@1.0.1: This package is no longer supported. It's now a built-in Node module. If you've depended on crypto, you should switch to the one that's built-in.
npm WARN deprecated har-validator@5.1.5: this library is no longer supported
npm WARN deprecated request-promise@4.2.6: request-promise has been deprecated because it extends the now deprecated request package, see 
npm WARN deprecated json3@3.3.2: Please use the native JSON object instead of JSON 3
npm WARN deprecated querystring@0.2.1: The querystring API is considered Legacy. new code should use the URLSearchParams API instead.
npm WARN deprecated circular-json@0.5.9: CircularJSON is in maintenance only, flatted is its successor.
npm WARN deprecated node-inspect@2.0.0: This module is part of Node.js core and does not need to be installed separately. It is now unmaintained.
npm WARN deprecated debug@4.1.1: Debug versions >=3.2.0 <3.2.7 || >=4 <4.3.1 have a low-severity ReDos regression when used in a Node.js environment. It is recommended you upgrade to 3.2.7 or 4.3.1. 
npm WARN deprecated debug@4.1.1: Debug versions >=3.2.0 <3.2.7 || >=4 <4.3.1 have a low-severity ReDos regression when used in a Node.js environment. It is recommended you upgrade to 3.2.7 or 4.3.1. 
npm WARN deprecated debug@4.1.1: Debug versions >=3.2.0 <3.2.7 || >=4 <4.3.1 have a low-severity ReDos regression when used in a Node.js environment. It is recommended you upgrade to 3.2.7 or 4.3.1. 
npm WARN deprecated querystring@0.2.0: The querystring API is considered Legacy. new code should use the URLSearchParams API instead.
npm WARN deprecated querystring@0.2.0: The querystring API is considered Legacy. new code should use the URLSearchParams API instead.
npm WARN deprecated request@1.9.9: request has been deprecated, see h
npm WARN deprecated uuid@3.4.0: Please upgrade  to version 7 or higher.  Older versions may use Math.random() in certain circumstances, which is known to be problematic.  
npm WARN deprecated uuid@3.4.0: Please upgrade  to version 7 or higher.  Older versions may use Math.random() in certain circumstances, which is known to be problematic.  
npm WARN deprecated uuid@3.3.2: Please upgrade  to version 7 or higher.  Older versions may use Math.random() in certain circumstances, which is known to be problematic.  
npm WARN deprecated request@2.88.2: request has been deprecated, see 
npm WARN deprecated tough-cookie@0.12.1: ReDoS vulnerability parsing Set-Cookie 

removed 647 packages, and changed 1467 packages in 6m

Eine Installation mit anschließendem Löschvorgang eines zufälligen Adapters dauert dann wieder aus meiner Sicht eine Spur zu lang:

$ iobroker del uv-protect --debug
Delete adapter "uv-protect"
host.debian Counted 1 instances of uv-protect
host.debian Counted 1 meta of uv-protect
host.debian Counted 1 adapter for uv-protect
host.debian Counted 4 channels of uv-protect
host.debian Counted 32 states of uv-protect
host.debian Counted 14 states of system.adapter.uv-protect
host.debian Counted 32 states (io.uv-protect.*) from states
host.debian Counted 12 states (system.adapter.uv-protect.*) from states
host.debian file uv-protect.admin deleted
host.debian object uv-protect deleted
host.debian object uv-protect.admin deleted
host.debian Deleting 53 object(s).
host.debian Deleting 44 state(s).
removed 648 packages, and changed 1467 packages in 2m142 packages are looking for funding run `npm fund` for details
Process exited with code 0

icons-open-icon-library-png ist natürlich auch sauber aus dem Repo neu installiert.

[darkbrain85]

Das kann weg... Wurstfinger...

[darkbrain85]

Sonst noch jemand eine Idee zu dem Thema?

[Thomas Braun]

@darkbrain85

Bei mehr als 70 Adaptern ist auch der npm tree entsprechend groß. Das kann dann auch gut und gerne die 2 Minuten irgendwas dauern bis der komplett durchlaufen wurde.

[darkbrain85]

@thomas-braun

Einfach mal für mein Verständnis:

Was wird denn da im letzten Schritt gemacht? Warum werden da so viele Aktionen per NPM durchgeführt? Ich bin halt der Meinung, dass das nicht immer so war. Könnte sogar mit dem Update auf Nodejs 16 gekommen sein, da bin ich mir aber unsicher.

Vielleicht jammere ich auch zu viel, aber es nervt Unglaube ich wenn jedes Update eines Adapters einfach mehrere Minuten dauert. Also vor allem wenn man mehrere Adapter gleichzeitig aktualisieren möchte.

[Thomas Braun]

@darkbrain85

Im Detail weiß ich auch nicht was da ganz genau gemacht wird, aber der npm tree (der halt bei dir recht groß sein muss, bei > 70 Adaptern) wird durchlaufen und auf z. B. Duplikate untersucht und Abhängigkeiten werden ggf. neu geschrieben. Dauert halt.

iobroker update && iobroker upgrade all -y

und dann kannst du die Kiste laufen lassen.

Könnte sogar mit dem Update auf Nodejs 16 gekommen sein, da bin ich mir aber unsicher.

Jein, hat eher mit dem Upgrade auf npm 8 und dem neuen Format der package.json-Datei zu tun.

Hast du dir denn jetzt iobroker.icons-open-icon-library-png angeschaut?

[darkbrain85]

@thomas-braun sagte in NPM entfernt und ändert bei jedem Vorgang unzählige Pakete:

Hast du dir denn jetzt iobroker.icons-open-icon-library-png angeschaut?

Ja, das hatte ich oben ja schon geschrieben. Habe ich entfernt und sauber aus dem Repo neu installiert.

Ich hatte allerdings gerade einen Erfolg.
Nachdem ich gestern nach Deinen Hinweisen ein

npm prune

im iobroker Verzeichnis gemacht habe, brachte das keinen Erfolg.
Jetzt habe ich das gerade einfach nochmal gemacht, weil ich mich an anderer Stelle ein bisschen in NPM eingelesen hatte. Und siehe da, das Problem ist scheinbar weg.

Nun wird wie an sich auch erwartet folgendes bei der deinstallation eines Adapters gemeldet:

removed 1 package in 4s141 packages are looking for funding run `npm fund` for details

Halt ein Paket und nicht mehr drölfzig. Updates und Installationen laufen jetzt auch wieder ein paar Sekunden durch. Traumhaft! Es scheint also nicht normal, wenn da hunderte Pakete angefasst werden.

Danke für Deinen Input.