
年商20億円以上を稼ぐAIキャラチャットアプリ「Zeta」を運営する企業の記事「最も面白いLLMを見つける方法」が、大変有益でした👀
3つの評価方式を駆使して、モデルの最適化を行なっている。
(1)A / Bテスト
(2)Multi-Armed Bandit(MAB)
(3)独自のリーダーボード
いわゆるChatGPTやClaudeのような「解」を提供するAIではなく、「面白さ」を提供するAIの改善手法を赤裸々に話してくれています。
他の記事もかなり有益なので、AIキャラやユーザーフレンドリーなAIを開発している人は必ずwatchしたほうがいいです!
blog.scatterlab.co.kr/104253
日本語

















