Daten zeigen Probleme auf, das Design schafft Lösungen

Sie wollen mit Daten diagnostizieren und mit Design behandeln. Daten sind kein Tool, das Ihnen sagt, was Sie bauen sollen.

Sie sollten mit einer Art Datenanalyse beginnen, um zu fundieren, was Sie überhaupt testen sollten, und das ist ein wenig anders als bei Softwareentwicklung, wo Sie viel mehr Erwartungen daran haben, wie das System funktionieren wird. Bei LLMs gibt es eine viel größere Oberfläche. Es ist sehr stochastisch, also haben Sie hier eine andere Geschmacksrichtung.

Schreiben Sie einfach das Erste auf, was Ihnen falsch erscheint, den am weitesten stromaufwärts liegenden Fehler. Machen Sie sich keine Sorgen um alle Fehler, erfassen Sie einfach das Erste, was Ihnen falsch erscheint, und hören Sie dann auf und gehen Sie weiter.

In diesem Kontext bezieht sich der Begriff 'Spuren' auf Gesprächsprotokolle zwischen KI-Assistenten und Benutzern, die auf Fehler und Verbesserungsmöglichkeiten untersucht werden.

Schauen Sie sich die Spuren so lange an, bis Sie das Gefühl haben, dass Sie nichts Neues mehr dazulernen. Es gibt tatsächlich einen Begriff in der Datenanalyse und qualitativen Analyse, der als theoretische Sättigung bezeichnet wird.