神经电影学：用电影同步大脑

ResearchBlogging.org
    电影就是要抓住观众的思想。导演们都希望自己的电影可以让观众能够沉浸其中，吸引观众的注意，诱发观众达到想要的思想状态和情绪体验。制片过程中可以用很多手段来诱导观众的思维，比如用蒙太奇或联戏剪辑的手段。但用电影来操控观众思维的愿望却一直没有办法来直接验证。而目前渐渐兴起的神经电影学 (neurocinematics)，使得用神经活动来评价电影成为可能。

neurocinema1

    Hasson 在2004年在Science上发表的文章验证了用功能磁共振 (fmri)评价电影的可能性。他们的思路很简单却很巧妙，如果电影可以引起观众神经活动的起伏响应，哪么不同观众在看相同电影时的神经响应应该是相似的。因此，他们让被试躺在MRI机器中观看电影片段，而后采用了他们采用了试间相关 (ISC)的方法计算不同观众相同大脑区域神经活动的同步性。在没有在看电影时，不同观众的大脑活动显然都是无关的。但如果这些观众在看同一部电影，由电影诱发的神经活动就会显示出相似的模式。相应大脑区域的ISC值就会很高。如下图所示，大脑的视觉加工皮层，听觉加工皮层以及颞叶和顶叶等区域都会显示出很高的同步性。但负责高级认知加工的额叶皮层却很少同步。

neurocinema2

    上图所示的激活区域是合理的。在看电影时，视觉与听觉加工都会随着电影的进程而紧密响应，因此会同步。而一些负责特异性加工的专门区域，也会产生同步。比如颞叶和枕叶中负责面孔加工的梭状回面孔区 (FFA)会在电影中出现面孔时激活，而负责场景加工的海马旁回 (PPA)会在电影中出现场景时激活，而当电影中的角色使用工具时 (比如用手点烟或者开枪)，顶叶皮层将会同步激活。但是，每个人看电影都会有自己的理解，因此负责高级认知加工的的额叶皮层几乎没有同步活动。

neurocinema3

    不同观众神经活动的同步性可以被称为群体卷入性 (collective engagement)。考察不通电影引起的同步活动的区域的大小，可以在一定程度上反映电影对观众控制程度的大小。比如上图4部电影拍南端的比较结果，现希区柯克的《断魂枪声》片段引起了65%大脑区域的同步激活，莱翁的《黄金三镖客》片段引起了45%大脑区域的同步激活，而拉里・戴维的《抑制热情》片段只引起了18%的大脑区域的同步激活，最后是一段在纽约华盛顿广场公园拍摄的自然场景视频，只引起了5%的大脑区域的同步激活。

    同步性的高低在一定程度上反应艺术控制的成功性，可以用来评价不同剪辑的效果好坏。如果进一步在精细的时间维度上考察每个镜头引起的同步性的好坏，甚至可以对电影剪辑起到很大的指导作用。当然，同步性低的电影也未必不是好片，不同的导演会有不同的表达方式。不过像神经电影学这样客观而“科学”的方法，一定会起到越来越重要的作用。据说好莱坞已经在用神经电影学的方法制造电影了。

    PS: 在北京实验室时，LH 老师 Hasson 的评价很高。他是犹太人，博士毕业于以色列著名的Weizmann Institute of Science，目前在 Princeton 做助理教授。今年8月在北京举行的第7届国际认知科学大会上 (ICCS 2010)将举行神经电影学之夜，感兴趣的可以去围观。

Hasson, U. (2004). Intersubject Synchronization of Cortical Activity During Natural Vision Science, 303 (5664), 1634-1640 DOI: 10.1126/science.1089506

Hasson, U., Landesman, O., Knappmeyer, B., Vallines, I., Rubin, N., & Heeger, D. (2008). Neurocinematics: The Neuroscience of Film Projections, 2 (1), 1-26 DOI: 10.3167/proj.2008.020102

评论

发表评论

此博客中的热门博文

如何画出漂亮的图

图片
    题目其实是个标题党。我一直都在尝试各种方法把paper中图片做的更漂亮，但效果总是不理想。而读paper时经常能看到让人眼前一亮的图。比如最近Journal of neuroscience一篇关于视觉系统 随机共振 的研究。     所谓随机共振，就是当一个非线性系统在加入少量噪声时的工作效果要比完全没有噪声时好。人的神经系统就是个典型的非线性系统。上图是原文中的一个figure。要注意的是最上面的原始图像两个斜杠之间的细节。斜杠中的斜杠是阈下的，通常很难被知觉到，但如果加入适当的噪声，就可以清晰地看到斜杠中间的细节 (中图)。     初看到这幅图，我的感觉这是对随机共振效应的最好的演示。因为之前对随机共振的介绍都是理论或者语言描述，从来没有给过这样直观的演示。但说实话，很难看出如何只加入噪声就可以把第一幅图像变成第二幅图像的样子。我自己用MATLAB对原始图像加随机噪声，完全得不到这种效果。当然我自己的图像处理水平有限，电脑显示器也比较低级。不知道哪位高手可以实现。OR, 这其实只是个示意图？ Schwarzkopf, D., Silvanto, J., & Rees, G. (2011). Stochastic Resonance Effects Reveal the Neural Mechanisms of Transcranial Magnetic Stimulation Journal of Neuroscience, 31 (9), 3143-3147 DOI: 10.1523/JNEUROSCI.4863-10.2011
阅读全文

大脑的工作模式和休息模式

图片
[ 十五言 是个不错的地方。也许以后类似的文章都会现在那里发表，欢迎 关注 。] 大脑不休息 与人体其的他器官不同，大脑在人的一生中一直处在活动状态。从能量代谢的角度讲，肌肉在休息时的耗能几乎可以忽略不计，但在收缩运动时会消耗1000倍以上的能量。相反，大脑无论在工作还是休息时都要消耗大概身体总代谢量的20%。而在工作时的耗能水平只比休息时高5%。正是因为如此，休息时的大脑更应该被看成是一种独特的状态，而并不是简单的休息。圣路易斯华盛顿大学的Marcus Raichle等人在2001年时将这种状态 (resting-state)命名为默认模式 (default mode)，并将一些在休息状态时神经活动更高的区域组成的网络称为为默认网络 (default mode network)。这一网络中的区域的神经活动在人执行特定的任务的时候反而会下降，通常认为是负责产生自发的想法以及无目的的思考。 对于大脑的休息状态，另一个重要的发现要追溯到1995年。当时在威斯康辛医学院的Bharat Biswal等人发现在完全没有运动的休息状态，大脑左右两侧运动皮层的fMRI信号仍然会显示出很强的相关性。fMRI技术是一种无创的记录脑活动的方法，它通过测量脑血流中含氧血红蛋白和脱氧血红蛋白的比例间接地反映神经活动。这是一个非常重要的发现。因为之前虽然知道左右两侧的运动皮层在完成双手协调任务时会同时激活，但并没有人会想到人在没有动双手的时候负责控制两侧手的区域仍然会同步活动。这提示了一个大脑重要的属性。大脑中存在着自发的脑活动，而且这些自发脑活动不是杂乱无章的，而是有组织的。在接下来的一系列研究都发现，凡是已知的功能相关的脑区之间，在静息态时也都会显示出很强的相关。这一组组相互关联的区域就组成了不同的脑功能网络，比如视觉网络、运动网络和注意网络等等。这种使用静息态fMRI数据分析大脑功能网络的技术目前正日趋流行，而且是当前美国的人脑连接组项目(human connectome project)的基础技术之一。 既然休息时的脑活动已经能反映大脑的网络结构，那么，大脑活动时的状态又会有什么差别呢？大脑可以大致的分为两个系统：一个是之前提到的默认网络系统；另一个是负责各种具体任务的区域的集合，通常被称为任务正网络。这两个网络的神经活动是负相关的：一个网络的活动升高，另一个网络的活动...
阅读全文

复习考试可以改变大脑结构

图片
    高考刚过，现在又是广大大中小学生期末考试的时候了。考试是一件很痛苦的事，特别是在中国，人们总是把脑力劳动变成体力劳动。所谓体力劳动，就是重复的、机械的记忆大量无意义的内容。而我最近无意发现一篇论文，高强度的准备考试，竟然会改变学生的大脑结构。     这是一组德国科学家在2006年做的研究。研究设计很简单，就是拉来准备德国医学考试的学生分别在考前3个月、考试后1-2天以及考试后3个月进行大脑磁共振扫描。研究者扫描的并不是反映脑功能的BOLD图像，而只是反映大脑结构的T1像。对于MRI图像，研究者可以把每个被试的图像分割成灰质、白质和脑脊液，然后用形态学分析方法计算大脑中每个位置的灰质密度。这样研究者就可以比较这组被试在不同考试阶段的脑结构的变化。     下图左显示了被试在考试后灰质体积显著大于考试前的区域，主要分布在后部和外侧顶叶皮层。如右图所示，这些区域的灰质体积在3个月的复习后会显著增加，而在另外三个月没有复习的阶段灰质体积保持不变。这一结果有一点出乎意料，因为研究者的假设是高强度学习会改变与记忆有关的海马。不过也有证据表明后部顶叶皮层也与陈述性记忆有关。     三个月的复习就会改变大脑结构，这还是挺让人惊讶的。不知道这种结构的改变是否有极限。我想要研究这个问题，中国的高中生应该是最好的样本了。高中生的整个高中阶段就是为一个一个的期末考试以及最后的高考准备。那么高中生的大脑结构会在每次考试后达到顶点然后下降波动，还是会像登台阶一样一直上升，还是在某一时刻就达到了平台？不管做出什么样的结果，都还是蛮有趣的。     最后还有一个想法，就是应该研究一下读了PhD (博士)后大脑结构的变化。我猜测肯定能做出结果，这样就可以为永久性脑损伤 (Permanent Head Damage)假说提供证据支持了 :) Draganski, B., Gaser, C., Kempermann, G., Kuhn, H.G., Georg, H., Winkler, J., Büchel, C., & May, A (2006). Temporal and Spatial Dynami...
阅读全文