アクションを伴わないメトリクスは単なるエンターテインメント

メトリクスの収集を単なるエンターテインメントと扱ってはいけません。それは「おお、これは面白い、新しい」と感じて何も行動しないためのものではありません。本当に役立つ情報とは、現実の世界での行動を変えるようなものです。

本当に役立つ情報とは、現実の世界での行動を変えるようなものです。そして、もし行動を変えないなら、それは単なるエンターテインメントに過ぎません。

これは、データの測定から得られたインサイトを指しており、単に何が起きたかを観察するだけでなく、なぜユーザーがその行動をとったのかを理解することの重要性について述べています。

この洞察が価値を生み出すのは、なぜこの人がこのようなことをしているのかがわかったときです。そうすれば、あなたは違った行動をするようになります。

「eval」はAIモデルのパフォーマンスを様々なメトリクスとユーザーセグメントで体系的にテストし、測定するための評価フレームワークを指しています。

評価の目的は製品開発を導くことです。評価によって、プログレスが良好な分野の機会を発見することができます。