这项研究由蒙大拿大学的研究人员进行,他们使用了托兰斯创造力测试(TTCT)来评估ChatGPT的表现,这是一种常用的创造力测试。他们向ChatGPT提出了八个问题,并记录了它的回答。他们还收集了24名蒙大拿大学学生的回答,并将它们与全国2700名参加TTCT的学生的回答进行了比较。所有的回答都由学术测试服务公司进行评分,该公司并不知道有AI回答参与评分。
研究结果显示,AI回答的创造力与参加测试的最有创造力的真人回答相当。事实上,ChatGPT的表现超过了全国大多数学生。IT之家注意到,这一发现让研究作者、蒙大拿大学商学院助理临床教授埃里克・古兹克感到惊讶,他称:“对我来说,创造力是关于用不同的方式做事情。我喜欢的创业定义之一是,成为一个创业者就是要有不同的思维方式。所以,AI可能会帮助我们将创造性思维
应用到商业和创新过程中,这对我来说非常有趣。”
TTCT包含两种不同的评估:一种是语言评估,一种是图形评估。两者都衡量发散性思维,即用于产生创意的思维过程。在语言评估中,测试者会提供
图片和/或语言提示,并要求以书面形式回答。例如,他们可能会展示一个事件的图片,并要求推测结果。或者他们可能会展示一个产品,并要求提出改进方法。他们的答案被用来评估三种心理特征:
流畅性:相关想法的数量
独创性:想法的不寻常程度
灵活性:不同类型想法的多样性
图形评估要求测试者用画图的方式回答问题。例如,他们可能会被要求完成一幅图画。
在这项研究中,ChatGPT在流畅性和独创性方面都达到了最高百分位数。在灵活性方面,它的得分下降到了97百分位数。
古兹克并不想夸大ChatGPT对经济的影响,但他确实认为其会成为创新的推动力。