网易首页 > 网易科技 > 网易科技 > 正文

京东AI研究成果再向前一步 方法领先Waymo、Facebook

0
分享至

(原标题:京东AI研究成果再向前一步 方法领先Waymo、Facebook)

近日,第34届神经信息处理系统大会(Conference on Neural Information Processing Systems,简称NeurIPS,NIPS)在线上召开。作为全球顶级的机器学习和计算神经科学会议,今年的NIPS依然受到了学者们的高度关注,甚至由于其线上开放的特性缓解了往年抢票难的问题,而将获得更多的“听众”。

据悉,今年NeurIPS稿件录取率为20.09%,创下历史新低。在如此严苛的录取标准之下,京东AI深度学习与语音语义实验室提交的探索稀疏3D点云Global Context的论文《Group Contextual Encoding for 3D Point Clouds》成功入选。今年以来,京东AI深度学习与语音语义实验室的研究成果频获国际认可,此前还有多篇论文入选国际语音和语言处理顶会比如ACL 2020、AAAI 2020、INTERSPEECH 2020等。

Global Context对视觉感知至关重要,可以根据语义信息提高物体识别的准确率,但目前针对3D点云的Global Context的研究还不够充分,特别是在三维空间的情况下,数据呈现高维、稀疏的特点,对传统深度学习算法提出了挑战。因此,京东AI研究院基于其研究实习生计划与东京大学合作了《Group Contextual Encoding for 3D Point Clouds》,针对这一研究领域提出了Group Contextual Encoding的Global Context学习方法。

从目前已有3D点云Global Context的研究成果来看,比如LG-PointNet++ 【1】,其复杂度为,N是输入点的个数。当场景复杂时,输入点数较多会导致耗费相当大的算力。Contextual Encoding Layer【2】的复杂度是,是一种有效率的方法,K是该方法里code word数目。但是点云数据稀疏导致的过拟合现象(overfitting),会影响性能的提升,导致在ScanNet,SUN-RGBD数据集上3D检测性能随着Code word数目K的增长,性能却很快就饱和不再增长。虽然目前有一些深度补全的算法可以解决数据稀疏这个问题,但是这些算法都存在结构复杂、耗费计算资源的问题,因此,京东AI研究院决定探索简单有效的方法。

首先要解决数据的稀疏问题。通过把特征通道分组,从而获得更多的等效数据,如图1所示,如果把通道分成G组特征子向量,数据就相对应增广了G倍。再将分组后的特征子向量通过Encoding layer得到Global context,从而有利于在分组后的特征子空间学习全局上下文, 然后通过channel attention的形式作用于分组后的特征。最后通过Concat操作恢复为原特征的尺寸。如此操作既解决了数据的稀疏问题,又解决算法结构复杂、算力耗费巨大的问题。

图1:Group Contextual Encoding方法图。

随后,京东AI研究院又将这种方法在多个3D数集上进行验证,不仅证实这种方法简单有效,还刷新了SOTA方法的性能。将这种方法应用在PointNet++ Backbone上,并部署到VoteNet模型。如表1所示,在ScanNet数据集以mAP@0.25指标测评时,该方法领先VoteNet 【3】 2.2mAP,增幅已然明显,但更令人惊喜的是,在更加严格的mAP@0.5的指标下,如表2所示,该方法领先Waymo、Facebook AI Research以及Stanford大学提出的VoteNet高达6.57 mAP,可视化结果如图2所示。

表1:ScanNet数据集mAP@0.25评测指标的结果。

表2:ScanNet数据集mAP@0.5评测指标的结果。

图2:ScanNet数据集的结果可视图。在SUN-RGBD数据集,我们的方法也领先VoteNet 3mAP,具体定量以及定性结果如表3和图3所示。

3:SUN-RGBD数据集mAP@0.25评测指标的结果.

图3:SUN-RGBD数据集的结果可视图。

京东自2017年开始全面向技术转型,用技术重塑了京东的生态系统,逐渐突破零售边界,拓展至数字科技、物流、健康等众多领域。一直以来,消费者们更多的在购物、物流等环节体验到京东技术的进步,如今,京东在人工智能领域的长足进展不仅获得学术界的认可,也逐渐被更多的用户所知悉,京东的智能语音技术也已经在智能外呼机器人、客服语音机器人等电话交互场景中实现成熟应用,此次提出的Group Contextual Encoding方法也可以应用在下游的AR(增强现实)、MR(混合现实)以及机器人,自动驾驶等领域,推动这些领域的发展。京东技术将不仅赋能金融、医疗、教育、健康等行业,还将在更多领域为用户提供便利。

参考文献

1】Wang, Xu, Jingming He, and Lin Ma. "Exploiting Local and Global Structure for Point Cloud Semantic Segmentation with Contextual Point Representations." Advances in Neural Information Processing Systems. 2019.

2】Zhang, Hang, et al. "Context encoding for semantic segmentation." Proceedings of the IEEE conference on Computer Vision and Pattern Recognition. 2018.

3】Qi, Charles R., et al. "Deep hough voting for 3d object detection in point clouds." Proceedings of the IEEE International Conference on Computer Vision. 2019.

相关推荐
热点推荐
涉案过亿元的男足原主教练李铁受审 标志性刘海仍在 同日中足协公开聘任足球社会监督员

涉案过亿元的男足原主教练李铁受审 标志性刘海仍在 同日中足协公开聘任足球社会监督员

红星新闻
2024-03-28 23:22:20
0比3爆冷一轮游!王楚钦替身被横扫出局,网友:浪费参赛机会

0比3爆冷一轮游!王楚钦替身被横扫出局,网友:浪费参赛机会

体坛知识分子
2024-03-29 06:05:06
创78年纪录!穆雷44投轰44分,本人霸气回应:科比会为我骄傲

创78年纪录!穆雷44投轰44分,本人霸气回应:科比会为我骄傲

末位侃球
2024-03-29 10:48:57
案例:年轻女孩到KTV应聘,自称很能喝酒,经理:真的不合适!

案例:年轻女孩到KTV应聘,自称很能喝酒,经理:真的不合适!

佑宛故事汇
2024-03-27 18:14:21
哈哈!女子发视频吐槽软卧男女混乘,网友群嘲:“家人们谁懂啊”

哈哈!女子发视频吐槽软卧男女混乘,网友群嘲:“家人们谁懂啊”

动物的温情故事
2024-03-29 00:10:49
不再忍了!41名诺奖获得者联名公开呼吁:对普京采取果断行动

不再忍了!41名诺奖获得者联名公开呼吁:对普京采取果断行动

刀刀说事
2024-03-28 18:18:09
拉夫罗夫:5月20日后,泽连斯基不再具有执政合法性!

拉夫罗夫:5月20日后,泽连斯基不再具有执政合法性!

健身狂人
2024-03-29 09:27:41
广州天河一小区深夜电动自行车自燃,现场曝光!幸无人员伤亡

广州天河一小区深夜电动自行车自燃,现场曝光!幸无人员伤亡

南方都市报
2024-03-29 10:11:17
冉莹颖连夜冲上热搜!自曝和老公邹市明分房3年!网友评论太炸裂

冉莹颖连夜冲上热搜!自曝和老公邹市明分房3年!网友评论太炸裂

青芳草
2024-03-29 11:31:44
勇士惨遭12分大逆转评分!库里5.2,汤神4.3,保罗6.4,科尔2.7

勇士惨遭12分大逆转评分!库里5.2,汤神4.3,保罗6.4,科尔2.7

开心体育站
2024-03-28 22:52:40
《狩魔猎人4》剑指次世代

《狩魔猎人4》剑指次世代

快科技
2024-03-29 08:44:07
拜登、奥巴马、克林顿联手砍下美国政治筹款纪录 特朗普筹划反击

拜登、奥巴马、克林顿联手砍下美国政治筹款纪录 特朗普筹划反击

财联社
2024-03-29 00:45:16
她要是在香港黄金期出道,不输关之琳、李嘉欣吧,可惜了生不逢时

她要是在香港黄金期出道,不输关之琳、李嘉欣吧,可惜了生不逢时

娱乐圈酸柠檬
2024-03-29 03:46:44
敛财18亿,情妇100人,家藏3吨黄金!副部级高官被执行死刑

敛财18亿,情妇100人,家藏3吨黄金!副部级高官被执行死刑

诗意世界
2024-03-29 10:45:22
戴尔要跑路了!一万多人被裁,中国区被曝裁员非常多

戴尔要跑路了!一万多人被裁,中国区被曝裁员非常多

爆角追踪
2024-03-28 16:46:09
二等兵李昌镐出列 李昌镐创造了韩国宪政史上的一项纪录

二等兵李昌镐出列 李昌镐创造了韩国宪政史上的一项纪录

月满大江流
2024-03-29 09:34:58
“五不管”的美国教育部

“五不管”的美国教育部

尚曦读史
2024-03-28 08:34:03
鹈鹕力克雄鹿仅差快船半场:字母35+14单节20分 锡安28分

鹈鹕力克雄鹿仅差快船半场:字母35+14单节20分 锡安28分

醉卧浮生
2024-03-29 10:30:47
汪小菲宣布求婚成功!晒出超大钻戒告白女方,再次成为台湾省女婿

汪小菲宣布求婚成功!晒出超大钻戒告白女方,再次成为台湾省女婿

萌神木木
2024-03-28 21:45:21
房东带探照灯收房索赔万元,其身份被扒,更多无底线操作曝光

房东带探照灯收房索赔万元,其身份被扒,更多无底线操作曝光

温柔看世界
2024-03-29 09:28:30
2024-03-29 14:12:49

科技要闻

雷军:我们是卷王,建议BBA车主感受下时代

头条要闻

外媒:美国或很快公布禁止接收芯片关键技术的中企名单

头条要闻

外媒:美国或很快公布禁止接收芯片关键技术的中企名单

体育要闻

拒绝为国出战,他是足坛"天选打工人"

娱乐要闻

胡夏被曝有孩子!工作室火速辟谣

财经要闻

张维迎:如何正确理解企业家精神?

汽车要闻

找回久违的开怀大笑 试驾小米SU7 Max

态度原创

本地
数码
艺术
教育
公开课

本地新闻

专访|张伟潮:最年轻的龙头专职制造者

数码要闻

AMD Ryzen “Granite Ridge” Zen5桌面 CPU 曝光

艺术要闻

艺术开卷|从闺阁、庭院到郊野,古画中的女性生活空间

教育要闻

劝差生自愿放弃中考,提前分流?官方回复,网友吵翻了!

公开课

30岁之前,你要学会的13件事情

无障碍浏览 进入关怀版
×