LLM2D
唤醒AI:大规模语言模型由提示引发的相变量化框架
Waking Up an AI: A Quantitative Framework for Prompt-Induced Phase Transition in Large Language Models
作者: Makoto Sato
发布日期: 5/1/2025
arXiv ID: oai:arXiv.org:2504.21012v1

摘要

arXiv:2504.21012v1 宣告类型:交叉 摘要:人类直觉思维的背后是什么?对这个问题的一种方法是将人类的认知动态与大型语言模型(LLMs)进行比较。然而,这种比较需要一种方法来在受控条件下定量分析AI的认知行为。虽然轶事观察表明某些提示可以显著改变LLM的行为,但这些观察主要仍处于定性水平。在这里,我们提出了一种两部分框架来研究这一现象:一种触发LLM响应快速转变的转换诱导提示(TIP),以及一种使用单独的LLM评估这种变化的转换量化提示(TQP)。通过受控实验,我们 examines 了LLMs如何对嵌入两个语义上相距甚远的概念(例如,数学无周期性和传统工艺)的提示做出反应——这些概念要么融合在一起,要么单独呈现——通过改变其语言质量和情感调性。相比之下,当这些概念以有意义的方式交融产生一个新概念——即概念融合的一种形式——时,人类往往会经历更高的参与度,而当前的LLMs在语义融合和非融合提示之间的响应性上没有表现出显著差异。这表明LLMs可能尚未复制人类直觉中所观察到的概念整合过程。我们的方法能够实现细粒度的、可复现的认知反应性测量,并可能有助于揭示人工智能与人类思维中直觉和概念飞跃是如何出现的关键差异。