网易首页 > 网易科技 > 网易科技 > 正文

AR行业的大事儿!脸书开源Detectron计算机视觉算法

0
分享至


本文系网易智能工作室(公众号smartman 163)出品。聚焦AI,读懂下一个大时代!

【网易智能讯 1月26日消息】Facebook本周宣布Detectron开放源代码正式向大众公开,该项目也是Facebook基于深度学习框架进行设计的关于计算机视觉对象检测算法平台。该公司表示,开放该项目的动机是加速计算机视觉研究,并且Facebook公司内部团队正在使用该代码进行各种应用测试,其中就包括针对增强现实技术的研究。

在我最近发表的一篇文章中,详细介绍了当今增强现实技术即将面临的三大挑战,在这其中我注意到计算机进行实时对象分类是我们最大的技术难区之一:

不仅仅只观察一个形状,让计算机利用视觉去理解“杯子”的物体含义是一个值得深究的问题。这就是为什么多年以来,我们在看到的增强现实技术演示中发现人们将基准标记附加到观察对象上,从而促进机器与观察物体之间更细致的跟踪和交互。

为什么难?我们要提到的第一个技术挑战是如何进行视觉分类。我们了解到,杯子有数千种形状,大小,颜色和纹理。有些杯子有特殊的属性,它们是为了特殊目的而制造的(如烧杯),这意味着它们在不同的地方和环境中有多种多样的用法。

让我们来想象关于如何写一个能帮助计算机理解所有我们在上面提到的这些概念的算法有多难,而且这只是为了能够在多个杯子中辨认出其中一个目标的杯子。我们还可以想想,关于写一个能够帮助电脑区分杯子和碗的代码是另一项需要完成的挑战。


我还谈到了为什么“深度学习”技术是实时对象分类问题的一个潜在的解决方案,它能够做到“培训”一台计算机来解释它所看到的,而不是用人工编程不断的一行行进行检测。 Facebook本周已经开发出了他们自创的对象检测算法,这可能会加速系统的开发,使系统能够进行实时对象分类,从而使增强现实技术真正得到广泛使用。

关于增强现实技术与我们周围物体实际相互作用的方式,在粗略地了解附近特定的场景之前并不用针对特定环境进行预先编程。例如,如果您戴着AR眼镜,并希望能够将烤箱温度投影到烤箱上方,然后还需要将冰箱中需要拿出来的食物的列表在AR眼镜中显示出来,则您的眼镜需要分辨烤箱和冰箱的样子。鉴于各种烤箱和冰箱以及它们生产地方的不同和放置位置的不同,这是一项极具挑战性的任务。

Facebook的人工智能研究团队最近一直在研究计算机视觉对象检测问题,并且它们正在尝试通过深度学习使计算机能够得出关于场景中存在什么物体的结论。在Facebook宣布基于Caffe2深度学习框架的对象检测算法开发的被称为Detectron的平台向大众开放后,现在任何人都可以在GitHub上利用该算法进行试验。 Facebook公司希望Detectron平台将使世界各地的计算机视觉研究人员能够尝试并不断改进最新的技术。

我们从项目的GitHub主页信息了解到,“Detectron的目标是为物体检测研究提供高质量,高性能的代码库。它的设计目的是通过灵活的方式来支持关于新颖技术的快速应用和评估的研究。”

该算法能通过检查视频输入信息,从而猜测离散对象来构成对应场景。诸如检测和识别人与物体相互作用(Gkioxari等)的研究项目已经使用了Detectron作为了解人类在环境中的行为的基础平台,该项目朝着帮助计算机充分理解我们正在做的事情的正确方向迈出了正确的步伐,从而使机器观察以后能够即时提供有价值的信息。

除了进行人工智能技术研究之外,Detectron也被Facebook内部广泛使用。该公司在Detectron宣布开放的消息中写道:“我们团队使用这个平台来培训各种应用的定制模型,其中包括增强现实技术和检查数据信息完整性的相关应用。”

具体哪些团队将使用Detectron应用增强现实技术并未公布,但是我们现在知道Oculus很可能会使用它,因为他的首席科学家Michael Abrash最近就增强现实技术将如何以及何时改变我们的生活发表了长篇演讲。

(选自:roadtovr编译:网易见外 参与:付曾)

关注网易智能公众号(smartman163),获取人工智能行业最新报告。

相关推荐
热点推荐
泰媒:两名泰国国脚接受采访时表示最喜欢BLACKPINK

泰媒:两名泰国国脚接受采访时表示最喜欢BLACKPINK

直播吧
2024-03-28 11:18:15
中国驻加拿大使馆:中方坚决反对加拿大等个别国家无端指责和抹黑

中国驻加拿大使馆:中方坚决反对加拿大等个别国家无端指责和抹黑

参考消息
2024-03-28 11:49:16
雪肤花貌杨幂

雪肤花貌杨幂

娱乐圈酸柠檬
2024-03-28 22:13:13
贝尔:徐杰和胡明轩挡拆后总第一时间找我 球队化学反应越来越好

贝尔:徐杰和胡明轩挡拆后总第一时间找我 球队化学反应越来越好

直播吧
2024-03-28 12:53:48
奉劝各队,下赛季离哈登远点

奉劝各队,下赛季离哈登远点

宝哥精彩赛事
2024-03-29 01:01:38
闹大了!南航女教授和男学生新进展,学校回应来了,警方已介入

闹大了!南航女教授和男学生新进展,学校回应来了,警方已介入

鬼谷子思维
2024-03-28 16:50:04
为何药店门口经常写着“万艾可已到货”?资深店员道出了实情

为何药店门口经常写着“万艾可已到货”?资深店员道出了实情

荷兰豆爱健康
2024-03-26 16:42:10
闹大了!俄罗斯外交部:凯特王妃的健康状况是英国王室造假的!

闹大了!俄罗斯外交部:凯特王妃的健康状况是英国王室造假的!

娱乐小可爱蛙
2024-03-27 19:42:29
雷军官宣小米 SU7 “霞光紫”版,“车漆加入特殊配方金属粉”

雷军官宣小米 SU7 “霞光紫”版,“车漆加入特殊配方金属粉”

IT之家
2024-03-28 17:47:30
开国大将持枪回村为父报仇,百余人死在枪口下,邓公得知拍手叫好

开国大将持枪回村为父报仇,百余人死在枪口下,邓公得知拍手叫好

文史新知
2024-03-28 14:34:50
俄议员:音乐厅警卫胆小怕事,拥有数十支军用手枪,却放弃抵抗!

俄议员:音乐厅警卫胆小怕事,拥有数十支军用手枪,却放弃抵抗!

杂谈哥闲谈
2024-03-26 23:50:22
俄罗斯决战在即,和中国究竟有无关系?我与专家的对话实录

俄罗斯决战在即,和中国究竟有无关系?我与专家的对话实录

兵国大事
2024-03-27 00:10:03
突发!普京贴身侍卫叛逃西方,披露的秘密让人吃惊

突发!普京贴身侍卫叛逃西方,披露的秘密让人吃惊

探索日记
2023-04-11 22:26:15
俄“大内侍卫”叛逃西方,自称陪普京出行180次,曝光大量机密

俄“大内侍卫”叛逃西方,自称陪普京出行180次,曝光大量机密

第一军情
2023-04-08 14:43:31
现在是3月28号夜晚,突然曝出1个重要消息,或将产生重大影响?

现在是3月28号夜晚,突然曝出1个重要消息,或将产生重大影响?

股市皆大事
2024-03-28 16:25:17
TVB又巨亏了,网友说照这亏钱速度两年后TVB将消失

TVB又巨亏了,网友说照这亏钱速度两年后TVB将消失

港叔
2024-03-28 10:42:56
全线崩盘,美方封锁以失败告终!荷兰与阿斯麦将再不敢怠慢华为

全线崩盘,美方封锁以失败告终!荷兰与阿斯麦将再不敢怠慢华为

说故事的阿袭
2024-03-28 16:08:16
57岁邬君梅定居美国!穿40元短袖生活拮据,无固定居所常年住房车

57岁邬君梅定居美国!穿40元短袖生活拮据,无固定居所常年住房车

小眉小眼
2024-03-27 09:27:33
饮品喝到一半发现干燥剂!蜜雪冰城回应:已关闭涉事门店

饮品喝到一半发现干燥剂!蜜雪冰城回应:已关闭涉事门店

南方都市报
2024-03-28 20:57:15
乌克兰总统与美国众议院议长通话 呼吁美众议院在援乌问题上统一立场

乌克兰总统与美国众议院议长通话 呼吁美众议院在援乌问题上统一立场

财联社
2024-03-29 01:20:35
2024-03-29 02:12:49

科技要闻

李斌李想何小鹏喊你买小米汽车

头条要闻

小米汽车7分钟大定破2万 网友:这价格真可以杀穿同行

头条要闻

小米汽车7分钟大定破2万 网友:这价格真可以杀穿同行

体育要闻

天空体育:沃克、斯通斯缺席今日曼城对阵阿森纳的赛前训练

娱乐要闻

莱昂纳多与25岁新女友互相投喂超恩爱

财经要闻

中国版QE要来?国内外机构观点罕见一致

汽车要闻

混动增程双模式 长安UNI-Z售11.79万起

态度原创

艺术
教育
房产
数码
公开课

艺术要闻

艺术开卷|从闺阁、庭院到郊野,古画中的女性生活空间

教育要闻

丰台首批拔尖创新人才培养基地校名单出炉!一文盘点北京7区基地校!

房产要闻

炸裂!新政出台,这里安居房货量近100万㎡,均价最低到6000+!

数码要闻

小米汽车SU7发布:Max零百2.78s 售价21.59万元起

公开课

30岁之前,你要学会的13件事情

无障碍浏览 进入关怀版
×