百度近日声称在ImageNet(最大图像识别数据库)的图像识别人工智能基准测试中击败了谷歌和微软。
但周二,ImageNet声称百度在测试过程中违反规定,百度已就“误导公众”道歉。
百度的举动凸显了人工智能领域竞争的高风险。
目前,全球顶尖科技公司都在竞相开发人工智能技术,包括让计算机识别图像、控制机器人、理解口语以及执行其他任务。
积累了巨大计算资源的互联网巨头面临着巨大的压力。
他们需要努力保持在声誉和潜在商业利益方面的领先地位。
除了百度、谷歌、微软之外,苹果、Facebook、IBM等科技巨头也在斥巨资招募大量人工智能研究人员,并且各有各的野心。
今年5月,百度声称在ImageNet测试中取得了全球最好成绩,图像识别错误率仅为4.58%,而微软为4.94%,谷歌为4.8%。
在这次测试中,人类识别 ImageNet 照片的错误率约为 5%。
然而,周二,ImageNet计算机科学家发表声明指出,百度在测试过程中存在违规行为,百度采取了密集的测试方法来提高性能。
根据规定,ImageNet只允许参与者每周两次向测试服务器提交测试结果。
然而,3月份5天内,百度提交结果40次。
ImageNet表示,过去六个月里,百度还使用30个不同的账户提交了大约100个测试结果。
在ImageNet测试中,AI扫描了包含数万张图像的数据库,并将它们分类为不同的类别。
大多数研究人员通常使用数据库中的图像子集来测试图像识别软件。
通过密集测试,百度工程师可以通过调整软件以熟悉这些图像中的信息来获得优势。
人工智能公司 Clarifai 首席执行官、ImageNet 竞赛前任获胜者 Matthew Zeiler 表示:“这种做法非常糟糕,这就是为什么参赛者被限制向独立服务器提交测试结果的原因。
如果知道测试内容,可以调整参数模型以获得更好的测试结果。
ImageNet已要求百度在明年停止提交ImageNet测试结果。
百度拒绝回答相关问题,但在ImageNet网站上发表声明称,百度科学家吴仁已为他所谓的“错误”道歉。
“我们已经在研究中添加了注释……我们将继续提供相关更新,”他写道。