Py学习  »  chatgpt

ChatGPT:两个半月后的元分析

量化研究方法 • 10 月前 • 161 次点击  

文章转自:教育技术学自留地(文章版权归原作者所有,本文仅做学术分享)

无意间,读到这篇非常重要的文献。

作者是 Christoph Leiter、Ran Zhang、Yanran Chen、Jonas Belouadi、Daniil Larionov、Vivan Fresen 以及 Steffen Eger等七位,他们均来自比勒菲尔德大学(Bielefeld University)技术学院自然语言学习小组(NLLG)。

https://nl2g.github.io/

我们都知道,ChatGPT自去年11月发布之后,风靡全球,在5天之内注册用户超百万,短短两个月的时间里,吸引了超过1亿订阅者,并被认为是有史以来增长速度最快的消费者应用程序。

然而,在大量的媒体报道、使用感受、简单介绍、逸闻趣事、相关评论等描述性介绍之外,却很少有确凿证据。仅有的一些实证分析零散,缺乏汇总和归纳。

这篇七君子的题为《ChatGPT:两个半月后的元分析》(ChatGPT: A Meta-Analysis after 2.5 Months)可以说是填补了这方面的空白。

在这篇文章中,作者通过社交媒体Twitter,收集了超过30万条推文,以及来自 Arxiv 和 Semantic Scholar上的150多篇科学论文,

作者使用自然语言处理技术,自动分析社交媒体的帖子,例如情绪和情绪分类器以及机器翻译系统,对这些文本进行元分析,力图分析不同的参与者如何看待 ChatGPT?人们对于 ChatGPT的态度、观点和看法是否随着时间的推移而有所改变?以及在过去的两个半月的文献中,人们指出了 ChatGPT有哪些局限性和优势。

他们的研究结果表明,ChatGPT通常被认为是高质量的,在社交媒体中,积极情绪和快乐情绪占主导地位。

人们对于ChatGPT的感知自其出现以来略有下降,但是,随着快乐情绪的减少和(消极的)惊喜的增加,它在英语以外的语言中被认为更消极。

在最近的科学论文中,ChatGPT被描述为包括医学领域在内的各个领域的巨大机遇,但同时,它也被描述为道德方面的威胁,在教育方面受到褒贬不一的评价。

这个元分析对ChatGPT面世两个半月后的回顾、综合和分析,有助于为人们正确理解和认识ChatGPT以及其后续健康发展提供了数据和信息。

在文章的结尾,作者写道,

未来的工作应该调查更长时间的发展,考虑推文和论文的受欢迎程度(比如点赞和引用情况),调查情绪和情绪以外的更多维度,并研究社交媒体参与者的专业知识及其地理和人口分布。

最后,随着像 ChatGPT这样的语言模型不断发展,并获得更多功能,未来的研究可以评估它们对于社会的实际影响,包括他们加剧和减轻现有不平等和偏见的潜力。

特别值得一提的是,作者在文章中申明,他们在整个写作过程中自由使用 ChatGPT作为写作助手,令人印象深刻,也可以算是一篇ChatGPT助力科研的范例吧!

总而言之,这是一篇非常难得的文献计量学研究报告!

arXiv:2302.13795 [cs.CL] (or arXiv:2302.13795v1 [cs.CL] for this version) https://doi.org/10.48550/arXiv.2302.13795



Python社区是高质量的Python/Django开发社区
本文地址:http://www.python88.com/topic/155961
 
161 次点击