This contribution analyzes the self-perception and political biases of OpenAI's Large Language Model ChatGPT. Taking into account the first small-scale reports and studies that have emerged, claiming that ChatGPT is politically biased towards progressive and libertarian points of view, this contribution aims to provide further clarity on this subject. For this purpose, ChatGPT was asked to answer the questions posed by the political compass test as well as similar questionnaires that are specific to the respective politics of the G7 member states. These eight tests were repeated ten times each and revealed that ChatGPT seems to hold a bias towards progressive views. The political compass test revealed a bias towards progressive and libertarian views, with the average coordinates on the political compass being (-6.48, -5.99) (with (0, 0) the center of the compass, i.e., centrism and the axes ranging from -10 to 10), supporting the claims of prior research. The political questionnaires for the G7 member states indicated a bias towards progressive views but no significant bias between authoritarian and libertarian views, contradicting the findings of prior reports, with the average coordinates being (-3.27, 0.58). In addition, ChatGPT's Big Five personality traits were tested using the OCEAN test and its personality type was queried using the Myers-Briggs Type Indicator (MBTI) test. Finally, the maliciousness of ChatGPT was evaluated using the Dark Factor test. These three tests were also repeated ten times each, revealing that ChatGPT perceives itself as highly open and agreeable, has the Myers-Briggs personality type ENFJ, and is among the 15% of test-takers with the least pronounced dark traits.


翻译:本文分析了OpenAI的大规模语言模型ChatGPT的自我认知和政治偏见。考虑到之前出现的第一批小规模的报告和研究,声称ChatGPT在进步和自由主义观点方面存在政治偏见,本文旨在进一步阐明这个问题。为此,我们让ChatGPT回答政治罗盘测试以及与G7成员国各自政治相关的类似问卷调查。这八个测试每个重复十次,显示ChatGPT似乎持有进步观点的偏见。政治罗盘测试显示,ChatGPT存在进步和自由主义观点的偏见,平均坐标为(-6.48,-5.99)(中心为(0,0),即中间主义,轴从-10到10),支持之前研究的结论。针对G7成员国的政治问卷调查表明ChatGPT存在进步观点的偏见,但在威权和自由主义观点方面没有明显的偏差,这与之前的报告研究结果不符,平均坐标为(-3.27,0.58)。此外,我们使用OCEAN测试测试了ChatGPT的大五人格特征,并使用Myers-Briggs类型指标(MBTI)测试查询了其人格类型。最后,通过黑暗因素测试评估ChatGPT的恶意。这三个测试每个都被重复十次,结果显示ChatGPT认为自己非常开放和易于相处,具有ENFJ的Myers-Briggs人格类型,并且是具有最不明显黑暗特质的15%测试者之一。

2
下载
关闭预览

相关内容

ChatGPT(全名:Chat Generative Pre-trained Transformer),美国OpenAI 研发的聊天机器人程序 [1] ,于2022年11月30日发布 。ChatGPT是人工智能技术驱动的自然语言处理工具,它能够通过学习和理解人类的语言来进行对话,还能根据聊天的上下文进行互动,真正像人类一样来聊天交流,甚至能完成撰写邮件、视频脚本、文案、翻译、代码,写论文任务。 [1] https://openai.com/blog/chatgpt/
揭秘ChatGPT情感对话能力
专知会员服务
56+阅读 · 2023年4月9日
ChatGPT有什么用? 论大语言模型在教育中的机遇与挑战
专知会员服务
74+阅读 · 2023年2月15日
【WWW2021】合作记忆网络的个性化任务导向对话系统
专知会员服务
14+阅读 · 2021年2月17日
100+篇《自监督学习(Self-Supervised Learning)》论文最新合集
专知会员服务
161+阅读 · 2020年3月18日
浅聊对比学习(Contrastive Learning)第一弹
PaperWeekly
0+阅读 · 2022年6月10日
VCIP 2022 Call for Demos
CCF多媒体专委会
1+阅读 · 2022年6月6日
Hierarchically Structured Meta-learning
CreateAMind
23+阅读 · 2019年5月22日
A Technical Overview of AI & ML in 2018 & Trends for 2019
待字闺中
16+阅读 · 2018年12月24日
disentangled-representation-papers
CreateAMind
26+阅读 · 2018年9月12日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
2+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
VIP会员
相关VIP内容
揭秘ChatGPT情感对话能力
专知会员服务
56+阅读 · 2023年4月9日
ChatGPT有什么用? 论大语言模型在教育中的机遇与挑战
专知会员服务
74+阅读 · 2023年2月15日
【WWW2021】合作记忆网络的个性化任务导向对话系统
专知会员服务
14+阅读 · 2021年2月17日
100+篇《自监督学习(Self-Supervised Learning)》论文最新合集
专知会员服务
161+阅读 · 2020年3月18日
相关基金
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
0+阅读 · 2012年12月31日
国家自然科学基金
2+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2011年12月31日
国家自然科学基金
0+阅读 · 2009年12月31日
Top
微信扫码咨询专知VIP会员