"Evals" bezieht sich auf Bewertungssysteme, die verwendet werden, um die Leistung von KI-Modellen in Produktanwendungen zu testen und zu messen.
Um großartige KI-Produkte zu bauen, müssen Sie wirklich gut darin sein, Evaluierungen durchzuführen. Das ist die Aktivität mit der höchsten Rendite, an der Sie sich beteiligen können.
Hamel Husain & Shreya ShankarWhy AI evals are the hottest new skill for product builders
"Der gleiche Prozess" bezieht sich auf die Fehleranalyse - das systematische Überprüfen von KI-Anwendungsausgaben, um Probleme zu identifizieren. "Dinge annotieren" bedeutet, Datenbeispiele als richtig oder falsch zu kennzeichnen.
Ziehen Sie Ihre Produktkappe auf und schauen Sie, ob das wirklich gut ist. Dort liegt der Spaßteil. Sie schauen sich Daten an. Es ist, als würden Sie Dinge annotieren. Tatsächlich habe ich gestern die Daten eines Kunden angesehen, genau den gleichen Prozess. Es macht wirklich Spaß.
Hamel Husain & Shreya ShankarWhy AI evals are the hottest new skill for product builders