酷应用

AI看电影看哭了...MIT科学家正在教AI感受电影中的喜怒哀乐

百家作者：AI100 2017-12-12 05:28:55

翻译 | AI科技大本营（rgznai100）

参与 | 么广忠

虽然我们都知道人工智能（AI）特别火，但AI究竟能做什么了不起的事情呢？要是问AI能不能写出一本畅销的书，目前的答案是不能，显然AI目前还没有准备好，但是AI确实可以实现许多有趣的事情。最近，麻省理工学院媒体实验室（MIT’s Media Lab）的一支研究团队使用机器学习成功地教会了机器感知电影中的情感波动。

研究人员为了做这个项目，与麦肯锡（ McKinsey）进行合作，通过机器学习来分析Vimeo （美国一个知名视频网站）上成千上万的的视频，其中包括电影、电视节目和电影短片等。

该团队在星期一早上的一篇博客中写道：“我们开发了基于深度神经网络的机器学习模型，来观察视频电影、电视中的小片段，压缩在线特征，接下来估计其内容中的正面或负面情绪。”简单来说，这个深度学习模型做到了通过观看视频，熟悉视频中的内容，并感知其中的情感变化。

这种方法不仅关注电影的总体情节，还深入到更微妙的方面，包括人物的面部特写镜头。利用这些线索，该项目的机器学习算法能够识别视频中的正面和负面情绪，甚至可以绘制出每一个场景会引发的观众情绪反应——研究人员称之为“视觉帷幕”。

用一句话概括就是，这种模型可以感知视频中的情感波动。下面有个形象的小例子，如下图所示，利用此模型，对皮克斯出品的视频《Up》（Pixar's "Up:"）中开幕式进行分析，可以得出这段时间内，电影的主旨情感变化。

换句话说，通过分析电影的视觉元素，该算法可以检测到其中催人泪下的电影情节，而且可以感知视频中讲述的是怎样的一个故事，故事中的情绪是如何发展变化的。为了增加算法的威力，研究人员还记录人类志愿者对这些电影的真实反应，然后使用这些数据来改进他们的模型。

通过总结他们的AI分析得到的所有情感变化数据，研究人员发现大多数电影和短片都遵循着简单的情感模式。他们还研究了观众对Vimeo上的1500部短片的评论，来分析观众对不同情感模式的喜好--发现Vimeo的观众还是喜欢大团圆的结局。

研究者们认为，这个项目并没有太大的惊喜，但是人工智能可以用来分析电影的情感变化，并以此来预测观众的反应，这对好莱坞来说是很有意义的。

“随着讲故事的人越来越意识到人工智能（AI）的价值，随着人工智能工具越来越容易获得，我们可以看到视频创作的方式正在悄然地发生重大的改变，”他们写道。“现在，导演已经可以将情感捕捉集成到他们的作品中来掌控剧情中的情感变化；作家和创作者和机器一起工作已经成为可能，通过运用机器的能力，他们可以放大他们的情感推力，让他们的故事更加有吸引力，这一切都很激动人心”