图文信息记忆整合的加工

【摘要】：个体将两个或多个独立但相关的信息结合起来自我衍生新知识的过程称作记忆整合,两个相关的信息称为主干事实1和主干事实2,新生成的知识可以称为整合事实,整合事实可以快速纳入个体的知识库并随着时间的推移长时间保持。作为积累语义的有效模型,记忆整合受到多方面因素的影响,表面相似性就是影响通过整合自我衍生和保持新知识的因素之一。以往的研究对于低表面相似性条件下记忆整合的表现结果存在不一致,有研究表明在实验室中低表面相似性的整合表现低于高表面相似性,也有研究发现,低表面相似性的整合表现与高表面相似性之间没有显著差异。图片和文本作为两种不同的形式,也体现了信息的表面相似性,而以往对于图文整合的研究多对同一信息的图文之间能否发生整合进行考察,对于个体能否成功将两个独立但有共同元素的图片信息和文本信息整合,是本研究探讨的内容之一。在生活和学习中多媒体的广泛应用,使得多种形式的信息同时出现的情况也并不少见,多数研究证明个体对于加入了图片的文本信息的学习效果要好于单独的文本学习,当单一的信息添加其他形式的信息时,是否会促进个体的记忆整合表现,是研究探讨的另一个内容。本研究通过两个实验来对图文信息的记忆整合表现及加工机制进行探究。研究一采用改编的图形整合范式,考察不同的图文信息呈现方式对记忆整合表现及其诱发的脑电波之间是否存在差异,初步探讨不同信息呈现方式对记忆整合表现的影响及加工过程;研究二中则把视角从不同的形式转向同时呈现图文信息的内容是否一致,来探究图文信息的一致性对记忆整合表现及其加工过程。研究一结果显示,主干事实1和主干事实2以文文或图图呈现的整合表现显著高于以文图和图文呈现的整合表现,文图呈现与图文呈现这两种方式的总体整合表现没有显著差异,但在文本测验和图片测验间存在显著差异;不同呈现方式诱发的脑电波也存在显著的差异,图图比图文诱发了更小的N400,文图与图文诱发的N400波幅没有差异,文文条件的N400波幅更大。研究二的结果显示,图文信息一致条件下的整合表现好于不一致条件下的整合表现,不一致条件的主干再认表现也更差;一致条件下诱发的N400波幅更小,同时还诱发了研究一未出现的P600成分。本研究主要得出以下结论:(1)不同形式的信息能够成功进行记忆整合,信息的呈现方式会对记忆整合的表现产生影响,但是对于主干事实1和主干事实2以不同形式呈现的信息,个体的整合表现不受呈现顺序的影响。个体对于图文信息的整合加工更符合多媒体学习认知理论的观点。个体对于图文或文图信息进行整合时,其过程可能发生在整合再认阶段。(2)图文信息一致呈现会促进个体的记忆整合水平。个体对于图文信息一致条件的整合需要的时间更长,发生在加工过程晚期。