人类群星闪耀时 | Facebook人工智能负责人Yann LeCun：让深度学习摆脱束缚

【编者按】最近AlphaGo对李世乭的世纪大战让深度学习再次备受关注。雷锋网也选取了一些AI相关文章进行推送，本文是作者Lee Gomes于2015年原载IEEE，由机器之心翻译，也是雷锋网对人工智能领域做出接触贡献的先行者们致敬的《人类群星闪耀时》的第二篇。。虽然是旧文，但是文中大量关于深度学习的探讨依旧值得我们再次翻阅。读完文章，你也许就能明白，为什么Facebook人工智能负责人Yann LeCun不喜欢人们把深度学习描述为“它像大脑一样工作”。

人工智能经历了几次低潮时期，这些灰暗时光被称作“AI寒冬”。这里说的不是那段时期，事实上，人工智能如今变得异常火热，以至于科技巨头谷歌、Facebook、苹果、百度和微软正在争抢该领域的领袖人物。当前人工智能之所以引起大家的兴奋，在很大程度上是源于“卷积神经网络”的研究进展。这项机器学习技术为计算机视觉、语音识别和自然语言处理带来了巨大的、激动人心的进步。你可能已经听过它另一个更加通俗友好的名字——深度学习。

几乎没有人比54岁的Yann LeCun更能与深度学习紧密地联系在一起。早在20世纪80年代末，LeCun就作为贝尔实验室的研究员开发出了卷积网络技术，并展示如何使用它来大幅度提高手写识别能力；目前美国许多手写支票依然是用他的方法在进行处理。上世纪末本世纪初，当神经网络失宠，LeCun是少数几名一直坚持研究的科学家之一。他于2003年成为纽约大学教授，并从此引领了深度学习的发展。

最近，深度学习及其相关领域已然成为最活跃的计算机研究领域之一。这就是LeCun在2013年底加入Facebook负责新成立的人工智能实验室的原因之一，尽管他依然保持着在纽约大学的职务。

LeCun出生在法国，保留了一些本国的“公共知识分子”角色所发挥的重要性。他的写作和演讲主要是集中在他的技术领域，当然，当涉及到其他领域，包括当今时事时，他也不会退让。

IEEE Spectrum的Lee Gomes与LeCun在他纽约的Facebook办公室里进行了一次深度谈话，共有九部分。

IEEE Spectrum：这些天我们看到了许多关于深度学习的新闻。在这些对深度学习的众多描述中，你最不喜欢哪一种？

Yann LeCun：我最不喜欢的描述是“它像大脑一样工作”，我不喜欢人们这样说的原因是，虽然深度学习从生命的生物机理中获得灵感，但它与大脑的实际工作原理差别非常非常巨大。将它与大脑进行类比给它赋予了一些神奇的光环，这种描述是危险的，这将导致天花乱坠的宣传，大家在要求一些不切实际的事情。人工智能之前经历了几次寒冬就是因为人们要求了一些人工智能无法给与的东西。

Spectrum：因此，如果你是一名关注深度学习的记者，而且像所有新闻记者所做的那样，只用八个单词去描述它，你会说什么？

LeCun：我需要考虑一下。我想将会是“学着描绘世界的机器”（machines that learn to represent the world）。可能另外一种描述是“端对端的机器学习”（end-to-end machine learning）。这种理念是：在一个能够学习的机器中，每一个组件、每一个阶段都能进行训练。

Spectrum：你的编辑可能不大喜欢这样。

LeCun：是的，公众将无法理解我所表达的意思。好吧，有另外一种方法。你可以把深度学习看作是，通过整合大量能够基于相同方式训练的模块和组件来构建拥有学习能力的机器，比如说模式识别系统等。因此，需要一个能够训练每个事物的单一原则。但这又超过了八个字。

Spectrum：有哪些事情是深度学习系统可以做，而机器学习无法做到的？

LeCun：这是个更好的问题。之前的系统，我想我们可以称之为“肤浅的学习系统”，会受系统能计算的函数的复杂度的限制。因此，如果你使用一个类似于“线性分类器”的肤浅学习算法来识别图像，你将需要从图像中提取出足够多的参数特征来提供给它。但手动设计一个特征提取器非常困难，而且很耗时。

或者使用一个更加灵活的分类器，比如说“支持向量机”或者两层神经网络，直接将图片的像素提供给它们。而问题是这不会提高物体识别的准确性。

Spectrum：这听起来不像是一个简单易懂的解释，或许这就是为什么那些记者会尝试着把深度学习描述成……

LeCun：像我们的大脑。

Spectrum：其中有一个问题是，机器学习是一个非专业人士极其难以接近的研究领域。一些经过教育的外行能够理解一些半技术性的计算问题，比如说谷歌使用的PageRank算法，但我敢打赌只有教授才能对线性分类器和向量机了若指掌，这是因为该领域从本质上就很复杂难懂吗？

LeCun：事实上，我认为机器学习的基础原理非常简单易懂。我曾经向高中的老师和学生解释过这一主题，并没有让其中的许多人觉得枯燥乏味。

模式识别系统就像一个黑盒子，背面装有摄像头，顶上有一个红灯和一个绿灯，前面装有一连串开关。比如说一种尝试着调节开关的学习算法，当一条狗出现在摄像头中时控制开关使红灯亮起；当一辆车出现在摄像头中时控制开关使绿灯亮起。为了训练该算法，你将一条狗放在机器面前，如果红灯亮起，什么都不做。如果光线模糊，扭动旋钮使灯变亮。如果绿灯亮起，扭动旋钮使灯光变暗；接下来换成汽车，扭动旋钮使红灯变暗或绿灯变亮。如果你进行多次尝试，并且保持每次都对旋钮进行逐渐微调，最终，机器每次都能得出正确答案。

有趣的是它能正确的区分开它从未见过的汽车和狗。窍门在于要计算出每次扭动旋钮的方向和幅度，而不是乱动一气。这包含对“梯度”的计算，旋钮的每次扭动代表着灯光的相应改变。

现在想象一下，有个盒子拥有5亿个旋钮、1000个灯泡，用1000万张图来训练它，这就是一个典型的深度学习系统。

Spectrum：我认为你用“肤浅的学习”这个词好像有些不太严谨；我不认为那些使用线性分类器的人会认为他们的工作很“肤浅”。之所以用“深度学习”这个表述难道就没有媒体宣传的因素在里面？因为这看起来好像它学到的东西很有深度，但实际上，“深度”仅仅是指这个系统的级数？

LeCun：是的，是有点儿滑稽，但这反映了真实情况：肤浅学习系统有一层或两层，而深度学习系统一般有5-20层。肤浅还是深度指的并不是学习行为本身，而是指被训练的结构。

Spectrum：Yann LeCun的标准简历里提到，在他们都对神经网络失去兴趣时，你依然坚持着探索神经网络的新方法。是什么使你能够无视世俗认知并一直坚持下去？

（编辑：应用网_丽江站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!