[gelöst] Used invalid characters über Blockly

[haus-automatisierung]

@steffe-s sagte in Used invalid characters über Blockly:

die Daten werden mir auf einer Seite des Wechselrichters über "http://ipWR/vip/livedata/staus" in dieser Form dargestellt:

Bitte teile mal alle HTTP-Header aus dem Response. Ich denke es ist ein Encoding-Problem und der Browser macht es richtig.

@Codierknecht Gut aufgepasst: https://www.compart.com/de/unicode/U+0006

[mcm1957]

@haus-automatisierung
Ja - das tun sie ja.

Nur in einem guten Adapter prüft bzw. bereinigt der Dev die Id bevor setObject / extendObject ect. aufgerufen wird. Ich spreche nichr dvon dass Blockly intern was umbiegen sollte - das keinesfalls. Aber der User würde einen fertigen "bereinige" Block, sprich was Fertiges zum Klicken in Blockly das ebenfalls diese Bereinigung macht, durchaus brauchen können. Ev. also ein Featurerequest. Sollte ggF aber wer stellen, ders auch benutzen / testen kann und will. ICh verwende Blockly nicht.

[Steffe.S.]

@haus-automatisierung sagte in Used invalid characters über Blockly:

@steffe-s sagte in Used invalid characters über Blockly:

die Daten werden mir auf einer Seite des Wechselrichters über "http://ipWR/vip/livedata/staus" in dieser Form dargestellt:

Bitte teile mal alle HTTP-Header aus dem Response. Ich denke es ist ein Encoding-Problem und der Browser macht es richtig.

wie teile ich denn HTTP-Header aus dem Response?

[haus-automatisierung]

@steffe-s Hat sich erledigt. @Codierknecht hat das Problem im JSON ja schon gefunden. Habe ich auf der mobilen Ansicht eben übersehen.

[Steffe.S.]

@haus-automatisierung sagte in Used invalid characters über Blockly:

@steffe-s Hat sich erledigt. @Codierknecht hat das Problem im JSON ja schon gefunden. Habe ich auf der mobilen Ansicht eben übersehen.

aber die JSON wird mir ja vom WR ausgegeben oder sehe ich das falsch?

[haus-automatisierung]

@steffe-s Siehst Du schon richtig, aber da ist ein Unicode-Zeichen in dem Attribut enthalten, welches später als Name genutzt wird. Das müsste man also im Script entfernen / bereinigen, bevor man damit arbeitet und einen State anlegt.

[Codierknecht]

@steffe-s sagte in Used invalid characters über Blockly:

aber die JSON wird mir ja vom WR ausgegeben oder sehe ich das falsch?

Und wer hat da wo die Namen eingestellt?
Hat der WR eine Verwaltungs-Website?

[Steffe.S.]

@codierknecht sagte in Used invalid characters über Blockly:

@steffe-s sagte in Used invalid characters über Blockly:

aber die JSON wird mir ja vom WR ausgegeben oder sehe ich das falsch?

Und wer hat da wo die Namen eingestellt?
Hat der WR eine Verwaltungs-Website?

ja, alles kommt vom Hersteller und kann auch nicht geändert werden.

Es ist eine Enphase PV Anlage mit MicroWechselrichtern und die Daten werden dann gesammelt über eine Webseite bereitgestellt.

[Steffe.S.]

@haus-automatisierung sagte in Used invalid characters über Blockly:

@steffe-s Siehst Du schon richtig, aber da ist ein Unicode-Zeichen in dem Attribut enthalten, welches später als Name genutzt wird. Das müsste man also im Script entfernen / bereinigen, bevor man damit arbeitet und einen State anlegt.

oh je, da bin ich wohl raus, kannst Du mir da vielleicht helfen?

[Steffe.S.]

@haus-automatisierung sagte in Used invalid characters über Blockly:

@steffe-s Siehst Du schon richtig, aber da ist ein Unicode-Zeichen in dem Attribut enthalten, welches später als Name genutzt wird. Das müsste man also im Script entfernen / bereinigen, bevor man damit arbeitet und einen State anlegt.

Gibt es denn eine Möglichkeit vor dem Befehl "JSON nach Object" , einfach die Zeilen 1 bis 96 der JSON einzugrenzen und alles andere zu ignorieren bzw alles was mit "dry" beginnt zu ignorieren?

[haus-automatisierung]

@steffe-s Man kann vieles machen. Ich müsste mich da auch erstmal einlesen. Momentan fehlt mir dafür die Zeit.

Ich würde mit einem regulären Ausdruck alles entfernen, was nicht A-Za-z0-9 ist.

[Steffe.S.]

@haus-automatisierung sagte in Used invalid characters über Blockly:

@steffe-s Man kann vieles machen. Ich müsste mich da auch erstmal einlesen. Momentan fehlt mir dafür die Zeit.

Ich würde mit einem regulären Ausdruck alles entfernen, was nicht A-Za-z0-9 ist.

Danke für Deinen Tipp, ich teste einfachmal rum, vielleicht finde ich ja eine Lösung. Zumindest weiß ich jetzt wo ich ansetzen muss.

[Codierknecht]

@steffe-s
Bevor man das ungeprüft weiterverarbeitet, müssen Sonderzeichen raus.

Ich hab's mal so versucht:

Die JS-Funktion sieht dabei so aus:

let regex = RegExp('[^a-zA-Z0-9\.\-\_]+');
return text.replace(regex, '');

Das funktioniert, um 1x ein Sonderzeichen zu entfernen.
Enthält der Text mehr als 1 Sonderzeichen, funzt das nicht.

Vielleicht können die JS-Experten das noch kurz anpassen

[haus-automatisierung]

@codierknecht sagte in Used invalid characters über Blockly:

Vielleicht können die JS-Experten das noch kurz anpassen

Einfach das global Flag anhängen

return text.replace(/[^a-zA-Z0-9\.\-\_]+/g, '');

Oder (in deiner Schreibweise)

const regex = RegExp('[^a-zA-Z0-9\.\-\_]+', 'g');

Generell sollte das aber mit in die Funktion welche die States anlegt. Separat kann man damit ja nicht viel anfangen in diesem Beispiel.

[Codierknecht]

@haus-automatisierung sagte in Used invalid characters über Blockly:

Einfach das global Flag anhängen

Tut's leider nicht - schon probiert

Holzhammermethode: Schleife

[haus-automatisierung]

@codierknecht sagte in Used invalid characters über Blockly:

Tut's leider nicht

Doch, läuft:

"a!b§c$d&".replace(/[^a-zA-Z0-9._-]+/g, '')

Wird aber Offtopic langsam

[Codierknecht]

@haus-automatisierung sagte in Used invalid characters über Blockly:

Oder (in deiner Schreibweise)

Jepp - damit geht's.

@Steffe-S
Sähe dann so aus:

let regex = RegExp('[^a-zA-Z0-9\.\-\_]+', 'g');
return text.replace(regex, '');

Wo das am besten reinpasst, überlasse ich Dir

[Homoran]

@haus-automatisierung sagte in Used invalid characters über Blockly:

Wird aber Offtopic langsam

nicht wirklich!

Wenn ich das richtig verstanden habe holt das Skript von @Steffe-S das JSON vom Wechselrichter, zerlegt das JSON und baut daraus die Datenpunkte unter 0_userdata.0.
Jetzt ist da ein 'illegal character' drin.
Den holt der admin(??) da raus und ersetzt ihn durch _ was zu der Meldung führt.
In der nächsten Runde ist der vom Skript geplante DP verschwunden und wird wieder angelegt, was jetzt zum Teufelskreis führt.

[haus-automatisierung]

@homoran sagte in Used invalid characters über Blockly:

nicht wirklich!

Ich meinte nur die Kleinigkeiten was die Schreibweise des regulären Ausdrucks angeht. Am Ende musst jetzt nur diese eine Zeile in die Funktion gepackt werden, welche es eh schon in Blockly gibt.

[haus-automatisierung]

Quick and dirty (nicht getestet):

for (const i in obj) {
    const value = obj[i];
    const attr = i.replace(/[^a-zA-Z0-9._-]+/g, '');

    if (typeof value == 'object') {
        IObSetState(id + '.' + attr, value);
    } else {
        if (existsState(id + '.' + attr)) { // Existing object/ Update
            if (typeof value === 'string' || value instanceof String) { // String
                setState(id + '.' + attr, value, true);
            } else { // It is a number or date
                if ((new Date(value)).getTime() > 0 && Number(value) > 1685000000 && Number(value) < 4100000000) { // Date
                   setState(id + '.' + attr, value, true);
                   setState(id + '.' + attr + '_str', formatDate(value, 'TT.MM.JJJJ SS:mm:ss'), true);
                } else { // Number
                   setState(id + '.' + attr, Number(value), true);
                }
            }
        } else { // New object / Create
            if (typeof value === 'string' || value instanceof String) { // String
                createState(id + '.' + attr, value, false, { type: 'string', read: true, write: true });
            } else { // It is a number or date
                if ((new Date(value)).getTime() > 0 && Number(value) > 1685000000 && Number(value) < 4100000000) { // Date
                   createState(id + '.' + attr, value, false, { type: 'number', read: true, write: true });
                   createState(id + '.' + attr + '_str', formatDate(value, 'TT.MM.JJJJ SS:mm:ss'), false, { type: 'string', read: true, write: true }); 
                } else { // Number
                   createState(id + '.' + attr, value, false, { type: 'number', read: true, write: true }); // or type: "mixed"?
                }
            }
        }
    }
}