seha incheonの正直なレビュー、シリコンバレーの開発者が教えるLLM評価ハーネスエンジニアリング 講座
受講レビュー 3
平均評価 5
コード数もファイル数も多いため、ただコピーしながら進めていく過程では、ついていくのが少し難しいと感じました。 それでも、内容が非常に有益で、生まれて初めて聞くテーマだったので、こうした欠点も受け入れられたのだと思います。 特に、評価を行うモデル自体も信頼できないため、そのモデルも評価しなければならないのですが、さらにまたモデルが評価するとなると、結局は信頼することが不可能になる、という観点で理解していくと、 モデル評価の結論は、「人間が苦労しなければならない」ということに帰結する内容だと思います。 - 実際、Metaでもモデルに課題を与えたり学習させたりするために、より多くの人を雇い、実際の人員をさらに多く投入したと認識していますが、その観点もここで反映されているように感じました。
1
こんにちは。良い評価をしてくださり、ありがとうございます！！ 何しろ評価方法はあまりにも多く、これらを一つひとつすべて扱うと、皆さんにとってハードルが高く感じられるかもしれないと思い、まずはどのような感覚で、どのような方向性を持つべきかという点を中心に取り上げてみました。 そのため、全体的なコードの構造よりも、このようなパターンや方法を学んでいっていただけると良いと思います！！ これからも、より有益な内容をお届けできるよう努めてまいります！！
1