研究案例
ChatGPT 与众包标注员的文本标注对比(Gilardi 等,PNAS 2023)
政治学者在推文与新闻标注任务(相关性、立场、主题、框架)上,比较零样本 ChatGPT 与 MTurk 众包标注员。
公开成果记录
论文报告在多数任务上 ChatGPT 的准确率高于众包标注员,且单条标注成本低得多。
使用前要了解
结论针对文中英文数据集与模型设置;扩大规模前请用自己的人工编码样本验证。
来源与核验
已核对来源 · 本站未实测
已核对公开摘要和书目信息。结果描述原作者的研究,不代表本站复现。
许可与复用
尚未记录许可。复用代码、模型或数据前请核对原始许可。
许可说明不代表完成了许可审计。开源不等于托管、模型调用免费,也不自动意味着可商用。