百度在ImageNet图像识别测试中有违规行为


百度在ImageNet图像识别测试中有违规行为

百度上个月宣布,它在ImageNet的图像识别人工智能基准测试中取得了全球最好的结果,其图像识别错误率仅为4.58%,而微软是4.94%,Google是4.8%。现在,ImageNet发表声明指出百度在测试中有违规行为:百度的研究人员采用了密集测试的方法提高成绩。在2014年11月28日到2015年5月13日之间,百度异构计算团队的研究人员使用了至少30个账号向测试服务器递交了至少200次,其中3月15日到19日的五天时间内递交了超过40次,违反了每周最多2次递交的规定。ImageNet解释说,通过向测试服务器递交许多个略微不同的方案,百度能根据测试表现从一组相似的方案中挑选出最好的,获得虽然小但潜在巨大的优势;百度能直接根据测试数据对挑选出的方法进一步研究和发展,而不是将测试数据仅仅用于训练和检验。ImageNet指出,百度的测试结果与其他团队的测试结果无法直接比较。

评论

此博客中的热门博文

陈先生的抢救室|膜蛤文化流行背后的社会学意味

【河蟹档案】70后的痛:你硬时政策比你硬,政策软时你还软

Long live shadowsocks