苹果的人工智能专家畅谈强化学习

本周二，苹果（Apple）人工智能研究部门的主任鲁斯兰·萨拉赫丁诺夫探讨了这项技术的部分局限性。不过，在这次《麻省理工科技评论》（MIT Technology Review）的会议上，对于他所在的神秘公司会如何将人工智能应用于Siri等产品，他回避了讨论。

去年10月加入苹果的萨拉赫丁诺夫表示，他对于人工智能中强化学习这个领域尤其有兴趣。利用这种方法，研究人员可以教电脑反复采取各种举动，找出最优的解决方案。例如，谷歌（Google）就用强化学习帮助其数据中心的计算机找到了最优的冷却和运转配置，从而提高了能源的利用效率。

萨拉赫丁诺夫还是卡内基梅隆大学（Carnegie Mellon）的助理教授。他说，这所大学最近在利用强化学习，训练计算机玩一款20世纪90年代的电子游戏《毁灭战士》（Doom）。计算机很快就学会了准确射击外星人，还发现回避动作可以躲开敌军的火力。然而，这些专业的《毁灭战士》计算机系统不太善于记忆迷宫场景等，这导致它们无法规划和设计策略。

萨拉赫丁诺夫的研究目标之一，就是开发能记住《毁灭战士》虚拟迷宫及几个特殊参照点，从而定位特定巨塔的人工智能软件。这款软件在游戏中会先查看火炬是红色还是绿色，因为火炬颜色的不同，意味着需要定位的巨塔颜色不同。

最后，软件学会了通过迷宫，抵达正确的巨塔。如果它走错了，也会原路返回迷宫找到正确的那个。萨拉赫丁诺夫表示，尤其值得注意的是，软件每次看到巨塔，都能回忆起开始看到的火炬颜色。

然而，他也表示，这种人工智能需要“长期的训练时间”，还要求强大的运算能力，因此很难大批量生产。他说：“目前来看，它还太脆弱了。”

萨拉赫丁诺夫另一个想要探索的领域，就是让人工智能软件更快地通过“少数案例和经历”进行学习。尽管他没有明说，不过他的想法应该能帮助苹果在“用更少时间做出更好产品”的竞争中取得优势。

一些人工智能的专家和分析师认为，苹果的人工智能技术比起谷歌或微软（Microsoft）等对手要逊色一筹。因为公司有着更严格的用户隐私条款，限制了能够用于训练计算机的数据量。如果苹果在训练计算机上使用了更少的数据，公司或许会在满足隐私要求的情况下，用媲美竞争对手的速度改进软件。