ANSI Zeichen in Node-Red decodieren

[_R_A_L_F_]

Hallo,

ich bekomme via http in Node in einem Objekt einen ANSI Code: Au�entemperatur������� St�rung Beginn als Payload Input. @mickym Kennst du vielleicht eine Möglichkeit den Wert in z.B. UTF-8 zu wandeln und die Sonderzeichen wieder in Klartext zu wandeln?

Vielen Dank und VG

[mickym]

@_r_a_l_f_ sagte in ANSI Zeichen in Node-Red decodieren:

Au�entemperatur������� St�rung

Solchen Text in CodeTags hier eingeben - im HTML nutzt das doch nichts, da dies vom Browser interpretiert wird.

[_R_A_L_F_]

@mickym ok, ich wusste nicht genau, wie ich das übermitteln soll. Probiere es mal so

Au�entemperatur�������

Ich habe das ganze auch nochmal in eine Inject Node gepackt. So sollte es hoffentlich besser nachvollziehbar sein:

Spoiler

[{"id":"94499721ca4a903a","type":"tab","label":"Flow 4","disabled":false,"info":"","env":[]},{"id":"67ff42a946daac45","type":"inject","z":"94499721ca4a903a","name":"","props":[{"p":"payload"},{"p":"topic","vt":"str"}],"repeat":"","crontab":"","once":false,"onceDelay":0.1,"topic":"msgText","payload":"Au�entemperatur�������  St�rung","payloadType":"str","x":570,"y":260,"wires":[[]]}]

Passt das so?

[mickym]

@_r_a_l_f_ Ich kann Dir da zumindest nicht weiterhelfen - da musst bissi stöbern. In der NodeJS ist eigentlich eine Konvertierung bereits eingebaut (ist dann auch in der Buffer Node - aber brauchst du nicht).

Na ich bin da auch überfragt im Moment - vielleicht fragst du besser im allgemeinen Bereich und nutzt erst mal normales JS.

var buf= Buffer.from(msg.payload, 'latin1');
msg.payload=buf.toLocaleString();
return msg;

Ich bin da im Moment auch nicht erfolgreich. Du musst irgendwie in einen Buffer wandeln und da die Codierung angeben.

Schau mal ob Dir da jemand im generell in JS helfen kann.

Spoiler

[
   {
       "id": "1a18a1407040ae8e",
       "type": "inject",
       "z": "d25606275138920f",
       "name": "",
       "props": [
           {
               "p": "payload"
           }
       ],
       "repeat": "",
       "crontab": "",
       "once": false,
       "onceDelay": 0.1,
       "topic": "",
       "payload": "Au�entemperatur�������",
       "payloadType": "str",
       "x": 520,
       "y": 3900,
       "wires": [
           [
               "f07c50d18ecc5c1f"
           ]
       ]
   },
   {
       "id": "646b817af825ad6a",
       "type": "debug",
       "z": "d25606275138920f",
       "name": "debug 2",
       "active": true,
       "tosidebar": true,
       "console": false,
       "tostatus": false,
       "complete": "false",
       "statusVal": "",
       "statusType": "auto",
       "x": 920,
       "y": 3900,
       "wires": []
   },
   {
       "id": "f07c50d18ecc5c1f",
       "type": "function",
       "z": "d25606275138920f",
       "name": "function 1",
       "func": "var buf= Buffer.from(msg.payload, 'latin1');\nmsg.payload=buf.toLocaleString();\nreturn msg;",
       "outputs": 1,
       "timeout": 0,
       "noerr": 0,
       "initialize": "",
       "finalize": "",
       "libs": [],
       "x": 760,
       "y": 3900,
       "wires": [
           [
               "646b817af825ad6a"
           ]
       ]
   },
   {
       "id": "67ff42a946daac45",
       "type": "inject",
       "z": "d25606275138920f",
       "name": "",
       "props": [
           {
               "p": "payload"
           },
           {
               "p": "topic",
               "vt": "str"
           }
       ],
       "repeat": "",
       "crontab": "",
       "once": false,
       "onceDelay": 0.1,
       "topic": "msgText",
       "payload": "Au�entemperatur������� St�rung",
       "payloadType": "str",
       "x": 630,
       "y": 3840,
       "wires": [
           [
               "f07c50d18ecc5c1f"
           ]
       ]
   }
]

[mickym]

Woher hast Du das überhaupt?

Wenn es eine Datei ist - kann man die Kodierung bei Lesen ja angeben:

[_R_A_L_F_]

@mickym ne das kommt über einen POST Request so rein.

[_R_A_L_F_]

@mickym Ok Danke. Trotzdem schon mal Danke für die Hilfe und dann werde ich da wohl mal weiter stöbern müssen

[mickym]

@_r_a_l_f_ Ja aber über eine HTTP Request Node?

Dann lass Dir das ggf. mal als Buffer ausgeben und schau, ob du mit den NodeJS Methoden konvertieren kannst. Oder Du kannst das bei deinem Request angeben, in welchem Format du das zurückbekommst.

[_R_A_L_F_]

@mickym Ne kein http Request sondern eine http in Node:

[mickym]

@_r_a_l_f_ ok dann schau mal nach allgemeinen methoden und ob wir die dann in node-red anpassen können. es gibt auch noch so eine alte converter node, vielleicht hilfts, wenn du den output in einen buffer wandelst. aber ich glaub nicht.

[_R_A_L_F_]

@mickym said in ANSI Zeichen in Node-Red decodieren:

ok dann schau mal nach allgemeinen methoden und ob wir die dann in node-red anpassen können. es gibt auch noch so eine alte converter node, vielleicht hilfts, wenn du den output in einen buffer wandelst.

Ok, dann schaue ich mal. Aber Danke

[mickym]

@_r_a_l_f_ Ich weiß nicht ob ich eine Lösung habe, weil ich glaube, dass das Problem ist, dass ich nicht wirklich die Originalquelle habe. Vielleicht musst Du den Buffer exportieren.

Ich hab hier trotzdem mal ein function Node - mit dem NodeJS Modul iconv erstellt:

Spoiler

[
   {
       "id": "67ff42a946daac45",
       "type": "inject",
       "z": "94499721ca4a903a",
       "name": "",
       "props": [
           {
               "p": "payload"
           },
           {
               "p": "topic",
               "vt": "str"
           }
       ],
       "repeat": "",
       "crontab": "",
       "once": false,
       "onceDelay": 0.1,
       "topic": "msgText",
       "payload": "Au�entemperatur������� St�rung",
       "payloadType": "str",
       "x": 370,
       "y": 580,
       "wires": [
           [
               "6fbcd04977e304fd"
           ]
       ]
   },
   {
       "id": "6fbcd04977e304fd",
       "type": "function",
       "z": "94499721ca4a903a",
       "name": "function 2",
       "func": "var Iconv = iconv.Iconv;\nvar conv = new Iconv('CP1250','UTF-8');\n// msg.payload = conv.convert(Buffer.from(msg.payload));\nmsg.payload = conv.convert(msg.payload).toString();\nreturn msg;",
       "outputs": 1,
       "timeout": 0,
       "noerr": 0,
       "initialize": "",
       "finalize": "",
       "libs": [
           {
               "var": "iconv",
               "module": "iconv"
           }
       ],
       "x": 520,
       "y": 580,
       "wires": [
           [
               "7aad120c21e94f8e"
           ]
       ]
   },
   {
       "id": "7aad120c21e94f8e",
       "type": "debug",
       "z": "94499721ca4a903a",
       "name": "debug 2",
       "active": true,
       "tosidebar": true,
       "console": false,
       "tostatus": false,
       "complete": "false",
       "statusVal": "",
       "statusType": "auto",
       "x": 680,
       "y": 580,
       "wires": []
   }
]

Du kannst ja mehrere Codepages verwenden, vielleicht funktioniert ja eine.
https://www.npmjs.com/package/iconv

var Iconv = iconv.Iconv;
var conv = new Iconv('CP1250','UTF-8');
// msg.payload = conv.convert(Buffer.from(msg.payload));
msg.payload = conv.convert(msg.payload).toString();
return msg;

[_R_A_L_F_]

@mickym said in ANSI Zeichen in Node-Red decodieren:

https://www.npmjs.com/package/iconv

Ah ok. Probiere ich mal. Muss ich dazu noch etwas nachinstallieren bei Iconv?:

[mickym]

@_r_a_l_f_ Du musst nur etwas warten, dann installiert sich die Bibliothek automatisch. NEIN - nicht manuell installieren.

Einfach den Flow importieren und ein paar Minuten warten.

Die Bibliothek installiert sich durch die function Node automatisch:

Musst höchstens schauen, dass das Modul im Setup eingetragen ist.

[_R_A_L_F_]

@mickym ok, ich kann es erst nächste Woche testen aber ich berichte über das Ergebnis. Danke

[_R_A_L_F_]

@mickym said in ANSI Zeichen in Node-Red decodieren:

Musst höchstens schauen, dass das Modul im Setup eingetragen ist.

Das war ein wertvoller Tipp :).

[_R_A_L_F_]

@mickym said in ANSI Zeichen in Node-Red decodieren:

Musst höchstens schauen, dass das Modul im Setup eingetragen ist.

Ich wollte gerade die Vorbereitungen für morgen treffen und die function node einbinden.
Dabei kam folgender Fehler:

D.h. ich benötige auch Python auf dem Windows Rechner, damit das ganze läuft oder?

Oder mit folgendem Node könnte es evtl. auch noch klappen:
https://flows.nodered.org/node/node-red-contrib-iconv
Scheinbar sind es ANSI Zeichen, was wohl windows-1252 entspricht. Und das wäre in der Lite Variante auch enthalten. Aber das Paket ist wohl schon älter.

[mickym]

@_r_a_l_f_ Ok ja bei mir gings unter windows nicht.

Hier nochmal der flow mit iconv-lite:

Spoiler

[{"id":"7b0c89ea680be73e","type":"inject","z":"578345f4956c7a57","name":"","props":[{"p":"payload"},{"p":"topic","vt":"str"}],"repeat":"","crontab":"","once":false,"onceDelay":0.1,"topic":"msgText","payload":"Au�entemperatur������� St�rung","payloadType":"str","x":330,"y":2940,"wires":[["e3deb08b1ecaef90"]]},{"id":"e3deb08b1ecaef90","type":"function","z":"578345f4956c7a57","name":"function 3","func":"msg.payload = iconv.decode(Buffer.from(msg.payload), 'win1251');\n\nreturn msg;","outputs":1,"timeout":0,"noerr":0,"initialize":"","finalize":"","libs":[{"var":"iconv","module":"iconv-lite"}],"x":480,"y":2940,"wires":[["3395014078e80eb5"]]},{"id":"3395014078e80eb5","type":"debug","z":"578345f4956c7a57","name":"iconv-lite","active":true,"tosidebar":true,"console":false,"tostatus":false,"complete":"payload","targetType":"msg","statusVal":"","statusType":"auto","x":640,"y":2940,"wires":[]}]

Das scheint zu gehen.

Die Node habe ich auch mal ausprobiert - die ist halt schon ziemlich alt.

[_R_A_L_F_]

@mickym Danke für die Info. Zumindest sieht der Zeichensatz jetzt anders aus

Jetzt müsste ich nur noch wissen, in welchem Format das ganze gesendet wird :(. Habe jetzt auch mal 1251-1258 durchprobiert und sich entsprechend immer andere Zeichen.

[mickym]

@_r_a_l_f_ ja ich hab da auch nichts vernünftiges rausgebracht. ich würde es halt mal direkt mit der http-in versuchen- ansonsten kann ich auch nicht helfen