Zwei Ufer
GoIPpro arbeitet an zwei Standorten. Die Plattform wird in der Ukraine entwickelt. Portugal ist die zweite Linie: Hier trainieren wir unser eigenes Sprachmodell.
Warum ein eigenes Modell, wenn Cloud-Modelle schon Gespräche führen können? Die Cloud ist eine Etappe. Dort lassen sich gut Experimente fahren, Ideen prüfen und aus echten Gesprächen lernen. Aber eine Plattform, die Kunden eine private Umgebung verspricht, muss am Ende mit eigener Stimme sprechen — auf eigenem Modell, auf eigener Hardware. Darauf arbeiten wir hin.
Begonnen haben wir mit Portugiesisch. Europäischem, nicht brasilianischem — dem Portugiesisch, das man in Porto hört, nicht in São Paulo. Die Arbeit läuft seit über einem Monat, und wir sagen offen, wo es hakt: bei der Rechenleistung. Wir haben wenige GPUs, deshalb geht das Training langsam voran — jede Epoche dauert länger, als uns lieb ist.
Um schneller zu werden, haben wir mehrere Anträge bei großen Organisationen gestellt, die jungen Technologieunternehmen mit Rechenleistung helfen — zu günstigen Konditionen oder kostenlos. Antworten gibt es noch keine. Sobald sie da sind, berichten wir hier, wie auch immer sie ausfallen.
Und noch etwas. In diesem Monat hat sich viel angesammelt, das wir teilen möchten. Wo das Modell sich geirrt hat und warum. Was im Lehrbuch einfach aussieht und an echter Sprache zerbricht. Was wir versucht haben und was nicht funktioniert hat. Wir machen das noch nicht lange — und gerade deshalb sehen wir, was Erfahrene längst nicht mehr bemerken.
Deshalb bekommt das Journal ab dieser Ausgabe eine weitere Linie — ein Trainingstagebuch. Ohne Hochglanz: die Fehler des Modells, unsere Fehler, Zahlen, sobald es sie gibt. Wie alles andere hinter Glas.