[1H3-OS-40] OS-40

2:55 PM - 3:10 PM JST(5:55 AM - 6:10 AM UTC)

[1H3-OS-40-06] From Crowdsourcing to LLM-Sourcing

〇Jiyi Li¹ (1. Hokkaido University)

Keywords:

Crowdsourcing,LLM,Human-in-the-Loop AI

クラウドソーシングは、大規模なデータ収集および問題解決のために広く利用されてきたが、その成果はしばしばノイズや不整合を含むため、品質管理と結果集約が中核的な課題となっている。一方で、大規模言語モデル（LLM）は、生成、アノテーション、評価、推論において高い能力を示している。これらの進展は、クラウドソーシングとLLMの交差領域において新たなパラダイムを生み出している。この枠組みは、クラウドソーシングの原理に基づき、LLMによる生成・アノテーション・評価・推論を設計・最適化する「LLMソーシング」である。
多くのLLM研究は、両分野がいくつかの点で共通した原理に基づいているにもかかわらず、クラウドソーシングにおける長年の研究蓄積を十分に参照していない。
本研究の中心的主張は、LLMを「LLMワーカー」と見なせる状況においては、LLM研究は豊富なクラウドソーシング文献から知見を取り入れるべきであるという点にある。