ESO-Database.com - Die Charakter- und Gildendatenbank

Gustaverus

Vielen Dank für Deine Arbeit @Keldor.
Meine ESODBExport.lua ist mittlerweile 23MB.
Es kommt auch nach mehrmaligen Versuchen die Fehlermeldung "Es ist ein Fehler beim Hochladen deiner Datei aufgetreten! Bitte versuche es erneut!"
Kann es sein das es eine max. Upload-Größe gibt?

Ist der Source-Code für den alten Client geheim oder kannst Du den auf Github o.ä. veröffentlichen?
Wie arbeitet der Client? Liest der einfach die ESODBExport.lua und ruft dann eine Webeseite von eso-database.com auf und schiebt dann die Daten hoch?
Alternativ.....
Der neue Java-Client hört sich auch interessant an. Den kann man im Normalfall ja decompilieren und schauen ob da nix böses gemacht wird ;-)
Danke nochmal an @Keldor und @Woeler für eure Zeit und Arbeit.

Keldor

Gustaverus schrieb: »

Vielen Dank für Deine Arbeit @Keldor.
Meine ESODBExport.lua ist mittlerweile 23MB.
Es kommt auch nach mehrmaligen Versuchen die Fehlermeldung "Es ist ein Fehler beim Hochladen deiner Datei aufgetreten! Bitte versuche es erneut!"
Kann es sein das es eine max. Upload-Größe gibt?

Ist der Source-Code für den alten Client geheim oder kannst Du den auf Github o.ä. veröffentlichen?
Wie arbeitet der Client? Liest der einfach die ESODBExport.lua und ruft dann eine Webeseite von eso-database.com auf und schiebt dann die Daten hoch?
Alternativ.....
Der neue Java-Client hört sich auch interessant an. Den kann man im Normalfall ja decompilieren und schauen ob da nix böses gemacht wird ;-)
Danke nochmal an @Keldor und @Woeler für eure Zeit und Arbeit.

Danke für den Hinweis! Vermutlich fehlen da einfach noch die richtigen PHP Einstellungen für das Projekt. Der alte Client hat noch ein paar Tokens drin, daher ist es da etwas schwieriger den zu veröffentlichen aber im Prinzip arbeitet der Client recht Simpel: Es gibt eine Schnittstelle, um sich mit seinem Account einzuloggen. Der Client macht nichts weiter als das Änderungsdatum der SavedVariables-Datei zu prüfen, sobald sich das Datum ändert wird die Datei an die API gesendet. Dieser Schritt entspricht dem manuellen Upload

DENDYBAR

Ich wünschte es würde so etwas cooles auch für die Xbox bzw. Konsolen geben... :-(

Gustaverus

Upload hat eben schon einmal geklappt.
Jetzt nur noch warten auf die Aktualisierung.

Keldor

Gustaverus schrieb: »

Upload hat eben schon einmal geklappt.
Jetzt nur noch warten auf die Aktualisierung.

Super, die Dateigröße war tatsächlich noch auf 3 MB eingestellt, da kommt man hier nicht weit mit

Die Aktualisierung wird aber noch einige Zeit dauern. Wir haben gerade aktuell ca. 4000 Dateien in der Warteschlange. Woeler hatte den Upload schon vor einiger Zeit abgestellt, somit kommen jetzt noch eine Menge Daten an, die die Clients nicht senden konnten

Gustaverus

Keldor schrieb: »

Super, die Dateigröße war tatsächlich noch auf 3 MB eingestellt, da kommt man hier nicht weit mit

Die Aktualisierung wird aber noch einige Zeit dauern. Wir haben gerade aktuell ca. 4000 Dateien in der Warteschlange.

Grins, hatte nicht ins Forum geschaut und war schon am Tippen einer PN an Dich das sich nichts aktualisert. Hab dann doch geschaut und siehe... 4000 Dateien. Krass.
Selbst bei einer schnellen Bearbeitung von 1 Minute sind wird das dann ja einige Tage dauern oder?

Keldor

Gustaverus schrieb: »

Keldor schrieb: »

Super, die Dateigröße war tatsächlich noch auf 3 MB eingestellt, da kommt man hier nicht weit mit

Die Aktualisierung wird aber noch einige Zeit dauern. Wir haben gerade aktuell ca. 4000 Dateien in der Warteschlange.

Grins, hatte nicht ins Forum geschaut und war schon am Tippen einer PN an Dich das sich nichts aktualisert. Hab dann doch geschaut und siehe... 4000 Dateien. Krass.
Selbst bei einer schnellen Bearbeitung von 1 Minute sind wird das dann ja einige Tage dauern oder?

Das wird schon noch einige Zeit dauern, aber die Wartungsarbeiten schwächen den Ansturm etwas ab. Ich habe jetzt temporär im Parser das auswerten der Erfolge, Rezept und der Sammlung ausgestellt, damit läuft alles sehr schnell durch. Da dies Daten sind, die bei jedem Export Problemlos abgefragt werden können, aktiviere ich die wieder nach dem Ansturm. Die Statistiken hingegen müssen bei jedem durchlauf aktualisiert werden, da die ja nicht im Spiel einfach so in Summe abgefragt werden können. So läuft es aber deutlich schneller durch.

Sobald ich die Erfolge, Rezept und die Sammlung wieder aktiviere, werden die beim nächsten Import eines Charakters auf den neusten Stand gebracht. Ich denke so sollte jetzt die riesige Warteschlange relativ schnell abgearbeitet werden.

Keldor

Ich konnte heute den Importer erheblich beschleunigen. Ich habe die ganzen Daten in Transaktionen zusammengepackt und nun braucht er für eine Datei nicht mehr 30-70 Sekunden sondern nur noch 0.2-3 Sekunden.

Die Daten sollten nun also relativ schnell auf dem Portal auftauchen, nachdem ihr den Upload durchgeführt habt. Leider gab es im Parser, den ich übernommen habe, noch einen Fehler der dazu führte, dass Charaktere sowohl als EU wie auch NA Charakter hinzugefügt wurden. Die ungültigen Charaktere könnt ihr aber einfach aus eurem Profil löschen.

Als nächstes mache ich mich an die ganzen fehlenden Daten und Übersetzungen die mit den letzten DLCs/Kapiteln dazu kamen.Habe vorhin gesehen, dass z.B. noch das Schmuckhandwerk komplett fehlt.

Gruß
Keldor

Gustaverus

Danke, hat funktioniert und ist nun super schnell.
Ist der Wert 387.804 Charaktere aktuell? Weil dann wäre die DB ja ganz schön geschrumpft.

Also ESO Spieler: ich hoffe ihr ladet auch eure Chars hoch und verdränkt mich von Platz 22 bei den Errungenschaftspunkten.

Keldor

Ich habe einen Aufräum-Task eingebaut der Gildenmitglieder entfernt, die seit 30 Tagen oder länger nicht mehr aktualisiert wurden. Das sind aber nur die Einträge die in den Gildenlisten mit exportiert wurden. Also keine richtigen Charaktere mit Statistiken. Das wurde bisher noch nicht gemacht, daher ist die Anzahl der Charaktere so geschrumpft.

Mittlerweile sollten auch die Probleme mit den fehlenden Aktualisierungen behoben sein. Es gab SavedVariable Dateien die keine Zeilenumbrüche mehr hatten und damit kam der Parser nicht mehr klar

Es wird also langsam mit der Datenbank Es gibt aber noch genug zutun, viele deutsche Übersetzungen sind falsch oder gar nicht vorhanden und hier und da läuft was nicht so rund aber das wird schon.

Keldor

Für alle die sich mal wundern warum die Charakter-Daten nicht direkt aktualisiert werden habe ich mal eine Statusseite gebastelt. Hier wird der aktuelle Systemstatus angezeigt, es gibt z.B. beim Daten Parser eine Info wenn sehr viele Dateien in der Warteschlange sind und die Auswertung etwas länger als normal dauert.

Hier kommt ihr zur Statusseite:
https://status.eso-database.com

Gruß
Keldor

Keldor

Hallo zusammen,

hier auch noch mal die Info:

Wenn ihr derzeit das Problem habt, dass ihr mit dem Client keine Verbindung zum Server hergestellt bekommt habe ich nun einen Fix für dieses Problem bereitgestellt. Falls ihr von diesem Problem betroffen seid, müsst ihr die neue Client Version 2.1.0 herunterladen und installieren. Das funktioniert leider nicht über die Update Funktion des Clients, da ihr ja keine Verbindung zum Server herstellen könnt. Die neue Version müsst ihr euch selbst über die Downloadseite herunterladen und drüber installieren. Die neue Version wird hier zum Download angeboten: https://www.eso-database.com/de/daten-hinzufuegen/

Das Problem hing mit IPv6-Verbindungen und modernen TLSv2-Verbindungen zusammen, die der Server mittlerweile voraussetzt. Diese hatte die alte Client Version noch nicht unterstützt. Das Update sollte dieses Problem nun aber beheben.

Gruß
Keldor

Keldor

Ich habe heute die Errungenschaften auf den neusten Stand gebracht, diese waren doch sehr veraltet und die Kategorien waren teils nicht korrekt übersetzt. Wundert euch bitte nicht, falls ihr bei eurem Charakter keine abgeschlossenen Errungenschaften angezeigt bekommt. Ich musste die Tabelle leeren, da es viele Einträge nach dem Import nicht mehr gibt.

Sobald ihr eure Daten übertragen habt, sind die Erfolge auch wieder da.

Keldor

Keldor

Und noch mal ein Update. Die Sammlungen sind nun auch auf dem neusten Stand.

Keldor

Gamer1986PAN

Danke fürs Updaten. Jetzt kann ich auch den Client wieder laufen lassen, ohne ständig diese Fehlermeldungen in der Taskleiste zu haben...

wookiefriseur

Sehr schön, vielen Dank für die Updates.

Feature-Wunsch, falls im Java-Client noch nicht enthalten: Datenkomprimierung vor dem Upload.. da müssten 95+% rauszuholen sein

Keldor

Patros schrieb: »

Sehr schön, vielen Dank für die Updates.

Feature-Wunsch, falls im Java-Client noch nicht enthalten: Datenkomprimierung vor dem Upload.. da müssten 95+% rauszuholen sein

Das packe ich mir mal auf die Todo Liste aber eher für den neuen Java Client

Keldor

Keldor

Hallo zusammen,

es gibt mal wieder etwas neues
Vorweg kurz die Info: Es wurde das Addon in Version 3.x veröffentlicht welche schon fit für Elsweyr ist!

Außerdem habe ich die letzten Tage ein lange gewünschtes Feature umgesetzt: Analysezeiten von Traits im Charakterprofil.
Diese findet ihr in der Übersicht eurer Traits unterhalb des Fortschrittbalkens. Den Fortschritt könnt ihr in Echtzeit verfolgen.

Hier auch mal ein Beispiel für die Anzeige:

Keldor

Aktuell leidet der Server etwas unter dem Elsweyr Ansturm, da sowohl die ESODB als auch die Skillwerkstatt auf dem Server liegen. Daher werde ich die Projekte die nächsten Tage auf einen stärkeren Server umziehen. Das ist eh längst überfällig.

Dadurch kann es dann zu ein paar Ausfällen kommen, damit ihr Bescheid wisst

Keldor

Keldor schrieb: »

Aktuell leidet der Server etwas unter dem Elsweyr Ansturm, da sowohl die ESODB als auch die Skillwerkstatt auf dem Server liegen. Daher werde ich die Projekte die nächsten Tage auf einen stärkeren Server umziehen. Das ist eh längst überfällig.

Dadurch kann es dann zu ein paar Ausfällen kommen, damit ihr Bescheid wisst

Ein kleines Update:
Der Umzug ist jetzt beendet. Der neue Server hat jetzt noch gut Luft nach oben und es sollte auch alles wieder schnell laden. Gleiches gilt übrigens für die ESO-Skillwerkstatt. Ich werde die Tage auch noch mal die neuen Daten von Elsweyr in die Datenbank einspielen.

Viel Spaß mit den Projekten und natürlich mit Elsweyr!

Gruß
Keldor

Keldor

Der Verliesfortschritt ist nun im Charakterprofil verfügbar. Mit Hilfe des Verliesfortschritts erhaltet ihr eine Übersicht über den Abschluss der normalen sowie der Veteranenverliese. Die Verliese sind übersichtlich nach Kategorie (DLC) sortiert. Wenn ihr mit der Maus über einen grünen Haken fahrt, erhaltet ihr Informationen zum Zeitpunkt des Abschlusses.

Den Verliesfortschritt findet ihr in eurem Charakterprofil unter dem Reiter "Statistiken / Informationen".

Hier ein Beispiel des Features:

Conan08

Danke schön für diese Datenbank und die Updates. Ich nutze das Ganze auch seit ein paar Tagen. Jetzt wollte ich nachfragen, ob es normal ist, dass gewisse Statistiken nicht weiterzählen. Ich habe festgestellt, dass er bei mir nach 3 Tagen, bzw. seit 4 Tagen einfach aufgehört hat zu zählen, obwohl es weiter Updates gab und der Database Client weiter im Hintergrund lief.

Die Charakterinformationen sind korrekt und auf dem neusten Stand.
Die Bibliotheken, Sammlungen, Errungenschaften, Fertigkeitslinien, Handwerk sind auf dem neusten Stand.

Lediglich die Hälfte der Statistiken funktionieren nicht richtig.
Wo ich mir sicher bin, dass es nicht auf dem aktuellem Stand ist, bzw einige Tage zurück hängt ist bei:
Kampfstatistik, ERfahrungspunkte nach Quelle, Rechtssystem, Rekorde, Beutestatistik, Beutequalität, Truhen und Schlösser und Statistiken für echte Helden.

Woran liegt das? Ich würde es sehr nett finden, wenn ihr da nachschauen würdet, bzw. mir mitteilen würdet wo der Hase klemmt.

Keldor

Conan08 schrieb: »

Danke schön für diese Datenbank und die Updates. Ich nutze das Ganze auch seit ein paar Tagen. Jetzt wollte ich nachfragen, ob es normal ist, dass gewisse Statistiken nicht weiterzählen. Ich habe festgestellt, dass er bei mir nach 3 Tagen, bzw. seit 4 Tagen einfach aufgehört hat zu zählen, obwohl es weiter Updates gab und der Database Client weiter im Hintergrund lief.

Die Charakterinformationen sind korrekt und auf dem neusten Stand.
Die Bibliotheken, Sammlungen, Errungenschaften, Fertigkeitslinien, Handwerk sind auf dem neusten Stand.

Lediglich die Hälfte der Statistiken funktionieren nicht richtig.
Wo ich mir sicher bin, dass es nicht auf dem aktuellem Stand ist, bzw einige Tage zurück hängt ist bei:
Kampfstatistik, ERfahrungspunkte nach Quelle, Rechtssystem, Rekorde, Beutestatistik, Beutequalität, Truhen und Schlösser und Statistiken für echte Helden.

Woran liegt das? Ich würde es sehr nett finden, wenn ihr da nachschauen würdet, bzw. mir mitteilen würdet wo der Hase klemmt.

Du kannst mir ja mal per PN deine Charakternamen schicken und dann schauen wir mal, ob wir was finden können

Keldor

Hallo zusammen,

ein neues Update wurde veröffentlicht. Dieses Update bringt die Gildensuche auf die Seite.

Gildensuche
Die Gildensuche entspricht den Gilden Suchergebnissen aus dem Spiel. Die Daten werden für alle Gilden über das Addon exportiert und ermöglichen es euch auch von unterwegs nach einer passenden Gilde zu suchen. Die Gildensuche ist unter diesem Link erreichbar: https://www.eso-database.com/de/gildensuche/





Übersicht der Titel
Es wurde zudem vor einiger Zeit bereits eine Übersicht über alle Titel in den Sprachen Deutsch, Englisch und Französisch hinzugefügt. Diese findet ihr unter dem Link https://www.eso-database.com/de/titel/.

Gruß
Keldor

Dont_do_drugs

Kurze Frage, ich hoffe das derailt dann nicht. Hast du überprüft, dass alles korrekt exportiert wurde? Harrods ist keine PVE-Gildem sindern klar eine Handelsgilde.

Keldor

Dont_do_drugs schrieb: »

Kurze Frage, ich hoffe das derailt dann nicht. Hast du überprüft, dass alles korrekt exportiert wurde? Harrods ist keine PVE-Gildem sindern klar eine Handelsgilde.

Ich werde die Gilde mal im Spiel raussuchen, eigentlich sollte alles passen. Kann aber natürlich auch sein, das die Gilde selbst da was falsch eingestellt hat

Dont_do_drugs

Keldor schrieb: »

Dont_do_drugs schrieb: »

Kurze Frage, ich hoffe das derailt dann nicht. Hast du überprüft, dass alles korrekt exportiert wurde? Harrods ist keine PVE-Gildem sindern klar eine Handelsgilde.

Ich werde die Gilde mal im Spiel raussuchen, eigentlich sollte alles passen. Kann aber natürlich auch sein, das die Gilde selbst da was falsch eingestellt hat

Japp kann auch sein, ich hab grad keine Gelegenheit das zu überprüfen. Ansonsten GW zu den vielen Updates insgesamt und dem neu gewonnenen Flow im Bezug auf das Projekt generell.

Edit: Brauchst nicht mehr prüfen, eine Freundin hats grad rausgesucht. Die stehen wirklich unter Gruppen-PVE m(

Keldor

Dont_do_drugs schrieb: »

Keldor schrieb: »

Dont_do_drugs schrieb: »

Kurze Frage, ich hoffe das derailt dann nicht. Hast du überprüft, dass alles korrekt exportiert wurde? Harrods ist keine PVE-Gildem sindern klar eine Handelsgilde.

Ich werde die Gilde mal im Spiel raussuchen, eigentlich sollte alles passen. Kann aber natürlich auch sein, das die Gilde selbst da was falsch eingestellt hat

Japp kann auch sein, ich hab grad keine Gelegenheit das zu überprüfen. Ansonsten GW zu den vielen Updates insgesamt und dem neu gewonnenen Flow im Bezug auf das Projekt generell.

Edit: Brauchst nicht mehr prüfen, eine Freundin hats grad rausgesucht. Die stehen wirklich unter Gruppen-PVE m(

Danke dir für die Mühe

Keldor

Hallo zusammen,

da ich im Moment etwas mehr Zeit hatte, gibt es noch zwei lange gewünschte Features.

Questübersicht des Charakters
In euren Charakter Profil findet ihr nun eine Übersicht über alle Quests. So könnt ihr direkt einsehen, welche Quests ihr schon abgeschlossen habt. Beispiel: https://eso-database.com/de/charakter/keldorus/16997611/quests/




Erforschte Alchemie Eigenschaften
In euren Charakterprofil findet ihr nun unter dem Reiter Handwerk den Link "Reagenzien anzeigen" hinter dem Eintrag für Alchemie. Dort erhaltet ihr eine Übersicht über alle erforschten Eigenschaften der Reagenzien. Beispiel: https://eso-database.com/de/charakter/keldorus/16997611/handwerk/alchemie-reagenzien/546023/

Destruent

@Keldor werden bei der Questübersicht alle verfügbaren Quests einberechnet (dailys auch?), oder wird der max-Wert aus dem jeweiligen Achievement genutzt (wenn vorhanden)?