AI技术的研究正在从2D走向更难的3D。12月3日,记者获悉,阿里技术团队研发出全新的3DAI算法,可以根据2D图片准确搜索到对应的3D模型,准确率大幅提升10%,可以减少3D打印成本、VR观影、场景导购等领域。临界点。研究成果已被AI顶级会议NeurIPS2020收录。尽管3D打印、VR等应用场景逐渐成熟,但以3D搜索为代表的3D智能技术仍处于早期研究阶段。例如,受限于2D图片颜色、纹理信息和3D模型形状信息的差异,传统AI方法模型匹配的准确率较低。过去几年,包括卡内基梅隆大学、麻省理工学院、斯坦福大学等顶尖机构都在该领域投入研究。(阿里巴巴的3DAI算法可以根据2D图片从海量数据集中准确找到匹配的3D模型。)根据国际顶级AI会议NeurIPS2020的官宣,阿里技术团队率先提出了3D搜索的新方法,即先让AI学习大量复杂的二维模型。图片样本,从而弱化纹理等干扰信息,让AI网络更专注于几何细节的学习,让AI更好地理解2D图片和3D模型的区别。实验结果表明,训练后的算法模型能够更高效地与3D模型数据集进行匹配,在不同数据集上的准确率提升了10%左右。比如一张家具照片,可以直接找到家具的3D模型。论文作者、阿里淘系技术算法专家傅欢表示,“3D搜索、3D重建、3D显示都是3D领域的基础技术,3D模型。”据悉,阿里技术团队在3D重建、3D搜索等技术领域取得多项突破,相关技术已应用于淘宝3D购物、平躺设计师等场景。今年3月,阿里巴巴与多位国际知名学者开源业界首个充满纹理细节的大型3D家具数据集(3D-FUTURE),吸引斯坦福大学、加州大学伯克利分校、清华大学、香港中文大学等高校参与。Apple和Facebook等公司进行学术和应用前沿研究。
