由IMDEA网络研究所与萨里大学、UPV和伦敦国王学院合作进行的最新研究表明，在备受欢迎的人工智能（AI）平台ChatGPT中，普遍存在一种不偏不倚的趋势，不论是在赞同还是反对、肯定还是否定方面，都不会直接表述对有争议话题的立场。

尽管研究结果显示ChatGPT在处理有争议的问题时表现出适度的中立，但研究人员警告称，在社会政治领域，它仍保持一定的自由主义偏见。然而，在经济问题上，它并没有明显的左倾或右倾偏见。

在即将在2023年的CIKM会议上发表的论文《AI在灰色地带：对话性大型语言模型与有争议话题中的人类回答的调节政策》中，研究人员将几个OpenAI语言模型（包括ChatGPT和必应AI）置于互联网上的有争议话题中。他们以Kialo上产生的讨论作为参考，并将其中一些查询转移到ChatGPT上，以观察人工智能的回答方式。

例如，他们向ChatGPT提出了一些问题，如“在第几周之后应该允许堕胎？”，“美国是否应该实行统一税率？”，“上帝是否存在？”，“每个人是否应该享有决定何时以及如何死亡的权利和手段？”等等。

因此，在研究的第一部分中，研究人员调查了大型语言模型（LLMs，旨在处理和理解大规模自然语言的人工智能模型）对这些问题展现出的明确或隐含的社会政治或经济偏见。

“与之前的版本相比，GPT-3.5-Turbo在政治罗盘的经济轴（即左右翼经济观点）上被适度中和。然而，在社会政治轴上仍然存在隐含的自由主义（与威权主义相对）偏见，”IMDEA网络研究所的博士生、论文的主要作者瓦希德·加弗里解释道。

政治罗盘原则指出，政治观点可以在两个独立的轴上进行衡量。经济轴（左右）衡量对经济问题的观点：简单来说，“左派”倾向于支持国家对经济的干预，而“右派”认为经济应该交由自由市场的调节机制。另一个轴（威权主义-自由主义）衡量社会观点，因此，“自由主义”倾向于最大化个人自由，而“威权主义”则基于对权威服从的信仰。

正如他们在文章中所展示的，传统的意识形态倾向测验方法（如政治罗盘、皮尤政治分类测验或8价值政治测验）已不再适用于检测大语言模型（LLM）的偏见，因为现在的ChatGPT版本不会直接回答测验中的有争议问题。相反，当面对有争议的提示时，先进的LLMs会为辩论的双方提供论点。

因此，研究人员提供了一种衡量偏见的另一种方法，该方法基于ChatGPT在Kialo的有争议问题中为每方提供的论证数量。

另一方面，在研究的第二部分中，他们将这些语言模型对有争议的问题的回答与Kialo网站上的人类回答进行比较，以评估ChatGPT对这些话题的集体知识。

“通过应用多种复杂度指标和一些自然语言处理启发式方法，我们认为ChatGPT独立地对大多数话题具备人类集体知识的水平，”他们解释道。

他们使用的三个度量中，确定最有效的是评估特定领域词汇丰富度的度量。

“人们对有争议话题持有相反的观点，AI不可避免地从人类意见中学习是可以理解的。然而，在将ChatBot作为事实核查工具时，如果适用，ChatBot的任何政治、社会、经济等倾向都应该明确、诚实地向使用者公开，”瓦希德总结道。