-
Netflix、LLM評価器を人間の判断で継続監視する運用を解説
Netflixの技術チームは、生成AIの出力を採点するLLM評価器について、人手による基準設定、検証用データ整備、稼働後の監視、更新承認を組み合わせる運用方針を紹介した。評価器の品質低下を継続的に捉えることを重視する。
Netflixの技術チームは、生成AIの出力を採点するLLM評価器について、人手による基準設定、検証用データ整備、稼働後の監視、更新承認を組み合わせる運用方針を紹介した。評価器の品質低下を継続的に捉えることを重視する。