2020-01-17 10:44

人工智能系统的智商测试

导读华盛顿州立大学(Washington State University)的研究人员正在为人工智能(AI)系统创建有史以来第一个“智商测试”,该测试将根据系统学习和适应新未知环境的能力对系统进行评分。 电

华盛顿州立大学(Washington State University)的研究人员正在为人工智能(AI)系统创建有史以来第一个“智商测试”,该测试将根据系统学习和适应新未知环境的能力对系统进行评分。

电子工程与计算机科学学院的戴安·库克教授、惠-罗杰斯讲座教授和拉里·霍尔德教授从美国国防部高级研究计划局(DARPA)获得了100多万美元的拨款,用于创建一个测试人工智能系统“智能”的框架。

霍尔德说:“以前,在人工智能系统中测量智能的研究大多是理论性的。”“他们没有在新奇的、以前从未见过的环境中测量真实世界的表现,也没有考虑到任务的复杂性。”

霍尔德和库克将设计一个测试,根据人工智能系统所能解决问题的难度对其进行评分。创建方法来根据问题的难度进行排序将是研究的主要部分之一。

霍尔德说:“评分还将考虑系统的准确性、正确性、耗时以及所需的数据量。”

人工智能研究人员面临的主要挑战之一是创造出能像人类一样在陌生环境中学习的机器。最近在机器学习和人工智能方面的许多进展都是在狭窄的、专门的任务上,比如检测人脸和预测棒球比赛结果。


他说:“我们专注于测试和改进那些更通用的系统,比如可以帮助你完成许多日常任务的机器人助手。”

霍尔德和库克将关注的一个行为是,他们测试的机器能否很好地将他们从一个任务中学到的知识应用到一个新的、看不见的任务上。

霍尔德说:“比如,在下象棋之前,你可能想学跳棋,因为你可以很容易地把你的知识从一个转移到另一个。”

一名与霍尔德一起做暑期研究的本科生帮助他设计了一个评估环境,用于测试AI系统完成的任务,比如玩视频游戏、解决SAT考试问题和解魔方。

库克也是WSU适应性系统高级研究中心(CASAS)的主任,该中心的重点是创建智能家庭,使用机器人助手照顾老人,以及其他项目。这些机器人可以用来监控老年人的安全、健康、移动和社交生活。

霍尔德目前维护一个网站,主办AIQ挑战和排行榜。作为资助的一部分,霍尔德希望扩大可公开使用的软件接口,任何人都可以使用它来测试他们的人工智能系统,同时在这个过程中为研究人员提供更多的数据。