NLP2025ワークショップ
LLM時代の
ことばの評価の現在と未来
ワークショップの開催趣旨
ワークショップの開催趣旨
大規模言語モデル(LLM)はことばの生成と評価の両面で活用が広がり,人間のことばの運用に大きく影響を与えることは間違いない.
LLM as a judge と呼ばれる評価への利用はことばの評価を目的に則して柔軟に行うための非常に有望なアプローチとして期待される一方で,LLMが苦手なことは正確な評価が難しいという問題もある.
本ワークショップでは,ことばの評価に関わる様々な知見や技術に関する発表を募るとともに,ことばの自動評価の問題を見つめ直すための shared task を開催し,人間・計算機を問わずことばの評価の現在の姿と今後の展望を幅広く議論することを狙う.
重要な日程
重要な日程
2024-11-22 ワークショップWebサイトの公開
2024-12初旬 【予定】 Shared Task情報の公開
2025-02中旬 【予定】 Shared Task結果提出締切、一般発表申込締切
2025-03-14 ワークショップ開催(全日)