[Erledigt] N26- weiterhin Web-Login mit Selenium-WebDriver fehlgeschlagen wegen Spracheinstellungen

[hibi67]

Hallo,

Ich habe einen ähnlichen Fehler wie viewtopic.php?f=34&t=856, aber mit den vorgeschlagenen aktuellen Nightly-Updates von finance.websync und hibiscus.mashup.

Bei der Synchronisierung, nach der Passworteingabe kommt:
"Fehler: Web-Login mit Selenium-WebDriver fehlgeschlagen! Fehler beim Setzen des Login-Formulars oder der Felder (siehe Log - Bitte den Entwickler im Forum informieren)"

Hier die Ausgabe:

Code: Alles auswählen

[23.04.2020 13:58:32] Synchronisierung via non-HBCI (Hibiscus Mashup) läuft
[23.04.2020 13:58:32]  
[23.04.2020 13:58:32] System-Info: OS[Linux (ver. 5.3.0-46-generic) amd64]  Platform[Jameica 2.8.6 | Build: 455 vom 20191101]  Plugin[hibiscus 2.8.23 | Build: 387 vom 20200114]
[23.04.2020 13:58:32] Installierte und aktive Plugin-Versionen: [Finance.Websync ver. 0.9.11-nightly | Build: 590 vom 20200421] [Hibiscus Mashup ver. 0.9.11-nightly | Build: 384 vom 20200419]
[23.04.2020 13:58:32] Überprüfe Java-Version und den verwendeten Zeichensatz ...
[23.04.2020 13:58:32] OK: Java-Version 1.8.0_241 von 'Oracle Corporation' installiert, aktiv und verwendet Zeichensatz 'UTF-8' (Home: /opt/jameica/javaruntime)
[23.04.2020 13:58:32] Überprüfe Selenium-Version ...
[23.04.2020 13:58:32] OK: Selenium-Version 3.141.59 installiert und aktiv
[23.04.2020 13:58:32] Überprüfe ChromeDriver-Version ...
[23.04.2020 13:58:32] OK: ChromeDriver-Version 81.0.4044.69 installiert und aktiv
[23.04.2020 13:58:32]  
[23.04.2020 13:58:32] Synchronisiere Konto '1 N26 - Giro [gelöscht] [N26 Bank]' ...
[23.04.2020 13:58:32] Selenium WebDriver über ChromeDriver wird gestartet ...
[23.04.2020 13:58:32] -> Erst-Initialisierung des WebDriver nicht erfolgreich, der Start dauert daher länger:
[23.04.2020 13:58:32] -> Sie verwenden bereits den alternativen Chromium-Browser. Info: Google Chrome beschleunigt den WebDriver-Start!
[23.04.2020 13:58:32] Sicherheits-Check der Integrität des alternativen Chromium-Browser gegen Manipulation ...
[23.04.2020 13:58:37] OK. Ergebnis der Berechnung: 5129640F3220184C8ECD4EAA49259A92 (Dauer: 4 Sek.)
[23.04.2020 13:58:37] Überprüfe Chromium-Version ...
[23.04.2020 13:58:37] OK. Browser ist: chrome ver. 81
[23.04.2020 13:58:38] Web-Login mit Selenium-WebDriver-Engine mit Anmeldekennung [gelöscht]******* auf https://app.n26.com/login ...
[23.04.2020 13:59:04] Fehler: Web-Login mit Selenium-WebDriver fehlgeschlagen! Fehler beim Setzen des Login-Formulars oder der Felder (siehe Log - Bitte den Entwickler im Forum informieren)
Log-Eintrag: org.openqa.selenium.NoSuchElementException: no such element: Unable to locate element: {"method":"xpath","selector":"//button[text()='Einloggen']"}
  (Session info: headless chrome=81.0.4044.0)
For documentation on this error, please visit: https://www.seleniumhq.org/exceptions/no_such_element.html
Build info: version: '3.141.59', revision: 'e82be7d358', time: '2018-11-14T08:25:53'
System info: host: 'john', ip: '127.0.1.1', os.name: 'Linux', os.arch: 'amd64', os.version: '5.3.0-46-generic', java.version: '1.8.0_241'
Driver info: org.openqa.selenium.chrome.ChromeDriver
Capabilities {acceptInsecureCerts: false, browserName: chrome, browserVersion: 81.0.4044.0, chrome: {chromedriverVersion: 81.0.4044.69 (6813546031a4b..., userDataDir: /tmp/.com.google.Chrome.5UkcJz}, goog:chromeOptions: {debuggerAddress: localhost:40069}, javascriptEnabled: true, networkConnectionEnabled: false, pageLoadStrategy: normal, platform: LINUX, platformName: LINUX, proxy: Proxy(direct), setWindowRect: true, strictFileInteractability: false, timeouts: {implicit: 0, pageLoad: 300000, script: 30000}, unhandledPromptBehavior: dismiss and notify, webauthn:virtualAuthenticators: true}
Session ID: ba0f4e415cc57ccd8c7e6fdc57d5f49b
*** Element info: {Using=xpath, value=//button[text()='Einloggen']}
	at sun.reflect.GeneratedConstructorAccessor35.newInstance(Unknown Source)
	at sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45)
	at java.lang.reflect.Constructor.newInstance(Constructor.java:423)
	at org.openqa.selenium.remote.http.W3CHttpResponseCodec.createException(W3CHttpResponseCodec.java:187)
	at org.openqa.selenium.remote.http.W3CHttpResponseCodec.decode(W3CHttpResponseCodec.java:122)
	at org.openqa.selenium.remote.http.W3CHttpResponseCodec.decode(W3CHttpResponseCodec.java:49)
	at org.openqa.selenium.remote.HttpCommandExecutor.execute(HttpCommandExecutor.java:158)
	at org.openqa.selenium.remote.service.DriverCommandExecutor.execute(DriverCommandExecutor.java:83)
	at org.openqa.selenium.remote.RemoteWebDriver.execute(RemoteWebDriver.java:552)
	at org.openqa.selenium.remote.RemoteWebElement.execute(RemoteWebElement.java:285)
	at org.openqa.selenium.remote.RemoteWebElement.findElement(RemoteWebElement.java:185)
	at org.openqa.selenium.remote.RemoteWebElement.findElementByXPath(RemoteWebElement.java:261)
	at org.openqa.selenium.By$ByXPath.findElement(By.java:353)
	at org.openqa.selenium.remote.RemoteWebElement.findElement(RemoteWebElement.java:181)
	at de.derrichter.finance.websync.institute.n26.WebAuth.loginWithSelenium(WebAuth.java:117)
	at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
	at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
	at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
	at java.lang.reflect.Method.invoke(Method.java:498)
	at de.derrichter.hibiscus.mashup.crossover.interact.Auth.seleniumLogin(Auth.java:324)
	at de.derrichter.hibiscus.mashup.crossover.websync.institute.n26.Collector.run(Collector.java:162)
	at de.derrichter.hibiscus.mashup.crossover.websync.WebSynchronizeJobKontoauszug.execute(WebSynchronizeJobKontoauszug.java:74)
	at de.derrichter.hibiscus.mashup.crossover.websync.WebSynchronizeBackend$WebSyncJobGroup.sync(WebSynchronizeBackend.java:619)
	at de.willuhn.jameica.hbci.synchronize.AbstractSynchronizeBackend$Worker.run(AbstractSynchronizeBackend.java:407)
	at de.willuhn.jameica.gui.GUI$7.run(GUI.java:1069)

Vielen Dank

[Hibiscus-Scripter]

So, danke für die ordentliche Meldung mit der vollständigen Status-Log,

nur kann ich das Problem nicht reproduzieren und bei mir funktioniert es auch einwandfrei. Wird bei dir Online denn was anderes angezeigt.
Jedenfalls, hab ich dennoch mal was verändert. Wenn das nicht hilf, hmm...

Gerne mal mit den aktuellen Nightly-Builds von

• finance.websync
• hibiscus.mashup

ausprobieren, in welcher die Fehler behoben sein sollten.
Hilfe hierzu gibst wie immer auch im Tipps und Tricks-Forum


Hier dann bitte auch wieder Rückmeldung geben!
Dabei bitte nicht vergessen:
Sollten dennoch weiterhin Fehler auftreten hier das vollständige Status-Log posten!
(formatiert wie in den Posting-Regeln beschrieben)

Gruß

[hibi67]

Hallo,

Ich habe das Problem gefunden, aber ich kann verstehen wenn es zu speziell und aufwändig ist um es zu beheben.

Es liegt daran wie Chrome/Chromium unter Linux die Sprache einstellt. Er übernimmt immer die Systemsprache und lässt keine Veränderungen zu. Diese ist bei mir Englisch und sollte auch so bleiben aus unterschiedlichen Gründen. Dadurch ist die Login-Seite in der falschen Sprache wenn Hibiscus den Abruf macht.

______________
Lösungsversuche:
Somit bliebe nur die unelegante Möglichkeit das Plugin für beide Sprachen zu schreiben oder es unten auf der Login-Seite im Dropdown-Menu die Sprache erst auf Deutsch umstellen zu lassen. Das müsste dann aber potentiell bei allen Plugins gemacht werden, wo die Loginseite unterschiedliche Sprachen zur Verfügung stellt.

Die sinnvollere Variante wäre Chrome/Chromium auf Deutsch zu starten. Dies misslang mir aber.

Code: Alles auswählen

sh -c "LANGUAGE=de /opt/google/chrome/google-chrome %U"

Startet das Userinterface von Chrome auf Deutsch, die Webseiten bleiben aber weiterhin auf Englisch.

In Chrome alle Sprachen außer Deutsch zu löschen / Deutsch an erste Stelle zu schieben funktioniert zwar für Chrome, die Login-Seite wird auf Deutsch angezeigt. Aber der Webabruf in Hibiscus scheint diese Einstellung zu ignorieren, möglicherweise weil die Konfigurationsdateien von Chrome nicht mitgelesen werden?

Somit bleibt nur die Systemsprache jedes Mal zu ändern, was auch funktionierte. Dies ist aber sehr umständlich und zumindestens in meinem Linux hat der Wechsel zurück Stunden gedauert, weil aus unerfindlichen Gründen einige Sprach-Konfigurationsdateien dabei gelöscht wurden.

Wie gesagt, verstehe ich wenn dies zu viel Aufwand ist zu impementieren. Optimal wäre es wenn Hibiscus einem Startparameter an den Browser senden könnte, der die Sprache auf Deutsch einstellt, so dass weder die Systemsprache geändert noch Chrome installiert noch jedes Plugin einzeln bearbeitet werden muss.

Vielen Dank

[Hibiscus-Scripter]

Ach, das hab ich schon wieder vergessen und ich weiß auch warum:

Dein Lösungsvorschlag "sinnvollste Variante" wird nämlich, natürlich bereits seit 1,5 Jahren angewendet um eben genau dieses Problem zu lösen:

CHG [180811] 001: ChromeDriver-Webclient: Sprache des Browsers auf Deutsch gestellt um automatische Webseiten-Spracherkennung zu nutzen

mit dem Switch:

Code: Alles auswählen

comlineArgs.add("--lang=de-DE"); // Load the Browser in Language DE (German)

Und das hat bisher, vor allem unter Linux, doch auch super funktioniert. Vor allem, es ging bei dir ja wohl auch schon mal?!
Wenn nun dein System (plötzlich?) deinen Browser dennoch zu einer englischen Webseite zwingt, obwohl ja der Browser sichtbar auf Deutsch umgestellt wurde, dann ist das ja wirklich ein lokales Problem bei dir.

Ob ich da jetzt für dich alleine drauf reagiere und wie muss ich mir noch überlegen

Gruß

[hibi67]

Danke für die Antwort,

Dann lassen wir das lieber mal auf sich beruhen, ich benutze das Konto eh sehr selten. Bis wann es funktionierte kann ich nicht sagen, Ende Januar hatte ich einen anderen Fehler beim Abrufen und habe es bis jetzt nicht mehr versucht.

Ich habe es aber jetzt in einer VM mit frisch installiertem Xubuntu ohne Updates mit aktuellem Hibiscus probiert. Das Problem besteht weiterhin genauso. Deutsche Systemeinstellung ruft ab, Englische nicht. Damit bin ich mit meinem Latein am Ende. An sich sollte der Host ja nichts beeinflussen und ich habe keinen anderen PC zur Verfügung um es auf einem vollständig unabhängigen System zu testen.

Für mich hat sich das Problem aber damit gelöst, hatte eh vor eine VM zum testen von Programmen und Einstellungen einzurichten, da bietet es sich ja sogar sinnvoll an zwei unterschiedliche Sprachen zu haben um die Fenster nicht zu verwechseln.

Vielen Dank für die Hilfe.

[Hibiscus-Scripter]

So, danke nochmals für die ordentliche Meldung mit der vollständigen Status-Log und vor allem für die Erläuterung.

Mein Sprach-Switch hat wohl aber auch nicht mehr richtig gegriffen. Deiner ging allerdings auch nicht.
Somit habe ich die Einstellungen auch über eine alte Methode gesetzt und das bewirkt nun, dass die Browseroberfläche zwar in der eingestellten Systemsprache bleibt, aber wohl in den Einstellungen als (zusätzliche) Sprache deutsch eingestellt ist. Die Website reagiert auch wohl dementsprechend darauf.
Dennoch habe ich einen Check für die Sprachauswahl der N26-Homepage eingebaut und diese wird bei Bedarf angepasst.

Gerne mal mit den aktuellen Nightly-Builds von

• finance.websync
• hibiscus.mashup

ausprobieren, in welcher die Fehler behoben sein sollten.
Hilfe hierzu gibst wie immer auch im Tipps und Tricks-Forum


Hier dann bitte auch wieder Rückmeldung geben!
Dabei bitte nicht vergessen:
Sollten dennoch weiterhin Fehler auftreten hier das vollständige Status-Log posten!
(formatiert wie in den Posting-Regeln beschrieben)

Gruß

[hibi67]

Leider hat sich da Nichts getan, weiterhin das gleiche Verhalten. In der VM weiterhin kein Abruf bei Systemsprache in Englisch, auf Deutsch geht es.

Hier die aktuelle Log vom Host:

Code: Alles auswählen

[25.04.2020 02:19:17] Synchronisierung via non-HBCI (Hibiscus Mashup) läuft
[25.04.2020 02:19:17]  
[25.04.2020 02:19:17] System-Info: OS[Linux (ver. 5.3.0-46-generic) amd64]  Platform[Jameica 2.8.6 | Build: 455 vom 20191101]  Plugin[hibiscus 2.8.23 | Build: 387 vom 20200114]
[25.04.2020 02:19:17] Installierte und aktive Plugin-Versionen: [Finance.Websync ver. 0.9.11-nightly | Build: 593 vom 20200424] [Hibiscus Mashup ver. 0.9.11-nightly | Build: 384 vom 20200419]
[25.04.2020 02:19:17] Überprüfe Java-Version und den verwendeten Zeichensatz ...
[25.04.2020 02:19:17] OK: Java-Version 1.8.0_241 von 'Oracle Corporation' installiert, aktiv und verwendet Zeichensatz 'UTF-8' (Home: /opt/jameica/javaruntime)
[25.04.2020 02:19:17] Überprüfe Selenium-Version ...
[25.04.2020 02:19:17] OK: Selenium-Version 3.141.59 installiert und aktiv
[25.04.2020 02:19:18] Überprüfe ChromeDriver-Version ...
[25.04.2020 02:19:18] OK: ChromeDriver-Version 81.0.4044.69 installiert und aktiv
[25.04.2020 02:19:18]  
[25.04.2020 02:19:18] Synchronisiere Konto '1 N26 - Giro, [gelöscht] [N26 Bank]' ...
[25.04.2020 02:19:18] Selenium WebDriver über ChromeDriver wird gestartet ...
[25.04.2020 02:19:18] -> Erst-Initialisierung des WebDriver nicht erfolgreich, der Start dauert daher länger:
[25.04.2020 02:19:18] -> Sie verwenden bereits den alternativen Chromium-Browser. Info: Google Chrome beschleunigt den WebDriver-Start!
[25.04.2020 02:19:18] Sicherheits-Check der Integrität des alternativen Chromium-Browser gegen Manipulation ...
[25.04.2020 02:19:22] OK. Ergebnis der Berechnung: 5129640F3220184C8ECD4EAA49259A92 (Dauer: 4 Sek.)
[25.04.2020 02:19:22] Überprüfe Chromium-Version ...
[25.04.2020 02:19:22] OK. Browser ist: chrome ver. 81
[25.04.2020 02:19:24] Web-Login mit Selenium-WebDriver-Engine mit Anmeldekennung [gelöscht] auf https://app.n26.com/login ...
[25.04.2020 02:19:54] Fehler: Web-Login mit Selenium-WebDriver fehlgeschlagen! Fehler beim Setzen des Login-Formulars oder der Felder (siehe Log - Bitte den Entwickler im Forum informieren)
Log-Eintrag: org.openqa.selenium.NoSuchElementException: no such element: Unable to locate element: {"method":"xpath","selector":"//button[contains(.,'Einloggen')]"}
  (Session info: headless chrome=81.0.4044.0)
For documentation on this error, please visit: https://www.seleniumhq.org/exceptions/no_such_element.html
Build info: version: '3.141.59', revision: 'e82be7d358', time: '2018-11-14T08:25:53'
System info: host: 'john', ip: '127.0.1.1', os.name: 'Linux', os.arch: 'amd64', os.version: '5.3.0-46-generic', java.version: '1.8.0_241'
Driver info: org.openqa.selenium.chrome.ChromeDriver
Capabilities {acceptInsecureCerts: false, browserName: chrome, browserVersion: 81.0.4044.0, chrome: {chromedriverVersion: 81.0.4044.69 (6813546031a4b..., userDataDir: /tmp/.com.google.Chrome.53TbjL}, goog:chromeOptions: {debuggerAddress: localhost:37663}, javascriptEnabled: true, networkConnectionEnabled: false, pageLoadStrategy: normal, platform: LINUX, platformName: LINUX, proxy: Proxy(direct), setWindowRect: true, strictFileInteractability: false, timeouts: {implicit: 0, pageLoad: 300000, script: 30000}, unhandledPromptBehavior: dismiss and notify, webauthn:virtualAuthenticators: true}
Session ID: ad24af3669a990ee254eda9f524d0acc
*** Element info: {Using=xpath, value=//button[contains(.,'Einloggen')]}
	at sun.reflect.GeneratedConstructorAccessor52.newInstance(Unknown Source)
	at sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45)
	at java.lang.reflect.Constructor.newInstance(Constructor.java:423)
	at org.openqa.selenium.remote.http.W3CHttpResponseCodec.createException(W3CHttpResponseCodec.java:187)
	at org.openqa.selenium.remote.http.W3CHttpResponseCodec.decode(W3CHttpResponseCodec.java:122)
	at org.openqa.selenium.remote.http.W3CHttpResponseCodec.decode(W3CHttpResponseCodec.java:49)
	at org.openqa.selenium.remote.HttpCommandExecutor.execute(HttpCommandExecutor.java:158)
	at org.openqa.selenium.remote.service.DriverCommandExecutor.execute(DriverCommandExecutor.java:83)
	at org.openqa.selenium.remote.RemoteWebDriver.execute(RemoteWebDriver.java:552)
	at org.openqa.selenium.remote.RemoteWebElement.execute(RemoteWebElement.java:285)
	at org.openqa.selenium.remote.RemoteWebElement.findElement(RemoteWebElement.java:185)
	at org.openqa.selenium.remote.RemoteWebElement.findElementByXPath(RemoteWebElement.java:261)
	at org.openqa.selenium.By$ByXPath.findElement(By.java:353)
	at org.openqa.selenium.remote.RemoteWebElement.findElement(RemoteWebElement.java:181)
	at de.derrichter.finance.websync.institute.n26.WebAuth.loginWithSelenium(WebAuth.java:133)
	at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
	at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
	at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
	at java.lang.reflect.Method.invoke(Method.java:498)
	at de.derrichter.hibiscus.mashup.crossover.interact.Auth.seleniumLogin(Auth.java:324)
	at de.derrichter.hibiscus.mashup.crossover.websync.institute.n26.Collector.run(Collector.java:162)
	at de.derrichter.hibiscus.mashup.crossover.websync.WebSynchronizeJobKontoauszug.execute(WebSynchronizeJobKontoauszug.java:74)
	at de.derrichter.hibiscus.mashup.crossover.websync.WebSynchronizeBackend$WebSyncJobGroup.sync(WebSynchronizeBackend.java:619)
	at de.willuhn.jameica.hbci.synchronize.AbstractSynchronizeBackend$Worker.run(AbstractSynchronizeBackend.java:407)
	at de.willuhn.jameica.gui.GUI$7.run(GUI.java:1069)

[Hibiscus-Scripter]

Das ist allerdings komisch, vor allem weil dann trotzdem ja das Select greifen müsste. Daher hab ich noch einen ordentlichen Wait eingebaut.
Also bitte nochmals mit der neuen Version probieren bitte, also nochmals drüber installieren.

Wenns dann wirklich immer noch nicht geht, dann

Zur besseren Analyse benötige ich von dir eine vollständige TRACE-Log.
Hilfe hierzu gibst wie immer auch im Tipps und Tricks-Forum mit dem Punkt #2

Diese sendest du mir dann bitte am besten per PM (= Private Nachricht, oben rechts) als ZIP-Datei.

Gruß

[hibi67]

Hallo,

Entschuldigung für die späte Nachricht. Mit der neuesten Nightly funktioniert es wieder (385 und 595), mit 384 und 593 funktionierte es nicht.

VIelen Dank für die schnelle und engagierte Hilfe.

Ich wünsche eine schöne Woche.