Lenny Distilled

L'analyse des erreurs est là où se produit la magie

Pratique → Sens du produit

Définissant

Les "évaluations" font référence aux systèmes d'évaluation utilisés pour tester et mesurer les performances des modèles d'IA dans les applications de produits.

Pour construire de grands produits d'IA, vous devez être très bon pour construire des évaluations. C'est l'activité avec le plus haut rendement sur investissement dans laquelle vous pouvez vous engager.
Hamel Husain & Shreya ShankarWhy AI evals are the hottest new skill for product builders
En faveur

« Cela » fait référence à la construction d'évaluations - des tests systématiques pour mesurer les performances et la qualité des applications d'IA.

Tous ceux qui font cela en deviennent immédiatement accros. Quand vous construisez une application d'IA, vous apprenez juste beaucoup.
Hamel Husain & Shreya ShankarWhy AI evals are the hottest new skill for product builders
En faveur

« Le même processus exact » fait référence à l'analyse des erreurs - l'examen systématique des résultats des applications d'IA pour identifier les problèmes. « Annoter des choses » signifie étiqueter des exemples de données comme corrects ou incorrects.

Mettez votre casquette de responsable produit et entrez dans, est-ce vraiment bon ? C'est là que se trouve la partie amusante. Vous regardez des données. C'est comme, d'accord, vous annotez des choses. En fait, je regardais les données d'un client hier, le même processus exact. C'est en fait très amusant.
Hamel Husain & Shreya ShankarWhy AI evals are the hottest new skill for product builders
En faveur
Mettez votre casquette de responsable produit et entrez dans, est-ce vraiment bon ? C'est là que se trouve la partie amusante.
Hamel Husain & Shreya ShankarWhy AI evals are the hottest new skill for product builders

The Missing Stamp

Every episode of Lenny's Podcast, distilled into the insights that matter and the quotes that make them stick.

LENNY WAS HERE__STAMP_DATE__

Lenny, if you're reading this, the stamp's ready when you are. 🧡🔥