网易首页 > 网易科技 > 网易科技 > 正文

能在文本精准检测地址和号码,谷歌是怎么做到的

0
分享至

(原标题:Google explains how AI powers Android Pie’s Smart Linkify)

网易科技讯 8月10日消息,据国外媒体报道,谷歌本周发布了最新版的移送操作系统Android Pie,其中的亮点功能之一就是Smart Linkify。这是一个应用程序编程接口,可在文本中检测到地址、电话号码和其他类似信息并调用可点击链接。虽然这听起来很炫酷,但事实上一切都是人工智能在背后作用的结果。

“在文本中识别出电话号码和地址往往是一个难题,”谷歌人工智能软件工程师卢卡斯齐卡(Lukas Zilka)在一篇博客文章中写道。“这不仅是因为人们在编写文本时有很多变化,而且文本中的组合代表什么样的信息也经常是模棱两可(例如:’确认号码:857-555-3556’并不是一个电话号码,即使它采用了类似于电话号码的形式)。”

齐卡解释说,Smart Linkify是对现有Android Linkify API的改进,其底层由两个紧凑的、低延迟的前馈神经网络组成——由称为节点的简单处理单元层组成的机器学习算法——其中借用了前版移动操作西戎Android Oreo的智能文本选择功能。

这两个神经网络都依赖第三个模型生成的数据。该模型从网络中提取电话号码、地址、产品、地点和商业名称,并随机添加“文本上下文”和短语(例如“确认号码”和“ID”)。谷歌人工智能团队针对拉丁文字语言(英语、德语、波兰语和捷克语)使用一种算法,而针对日语、韩语、泰语、阿拉伯语和俄语等语种分别使用了完全不同的算法。

整个处理过程是这样的:要分析的文本被拆分为单词,然后从这些单词中生成所有可能的最大长度子序列。然后,系统中的第一个神经网络为每个子序列分配一个值(在0到1之间),表示它对自己的身份(例如给定的一串数字是密码还是电话号码)的置信度。

得分最低的子序列从列表中删除,然后第二个神经网络介入,按类型对子序列进行分类——即电话号码、地址或非实体信息。

“(网络)需要知道实体周围的上下文(除了实体本身的文本字符串之外)。在机器学习中,这是通过将这些部分表示为单独的特性来实现的。”齐卡表示,“实际上输入文本被拆分成几部分,分别馈送到神经网络。”

为此,单词被转换成n-gram模型(有时也称为N元模子,是大词汇连续语音识别中常用的一种语言模型),这种技术“将(词汇)表示为一定长度的所有字符子序列的集合”。而一个神经网络辨识这些单词是否以大写字母开头——这是邮政地址的一个显著特征。

在实践中,假设句子“约翰应该在周二打电话1- 800-9444-9494”这句话,Smart Linkify首先会将“John应该拨打”与“1- 800-9444-9494”分开,然后将“John应该拨打”和“1-800-944-9494”分类为非实体电话号码和电话号码,最后在网络浏览器或应用程序中通过这个电话号码创建一个可点击的链接。

在智能手机硬件的限制下,这种工作对人工智能团队来说是一个额外的挑战。他们通过量化(一种将连续范围的值转换为有限范围离散值的压缩技术)以及在系统两个神经网络之间共享某些数值表示等其他技术来解决这个问题。

在不久的将来,这个团队希望为日期和时间创建机器学习模型——尤其是识别文本中的非正式短语,如“下周四”或“三周后”。

“我们相信这种架构可以扩展到其他设备上的文本注释问题,我们期待看到新的用例,”齐卡写道。(晗冰)

相关推荐
热点推荐
证监会要求签署IPO承诺书!今日凌晨的四大消息正式发酵

证监会要求签署IPO承诺书!今日凌晨的四大消息正式发酵

逆潮流财商
2024-04-20 00:50:03
小米SU7车主买车5天后被辞退!知名车企回应:他大肆宣传小米SU7三个月,旷工去提车

小米SU7车主买车5天后被辞退!知名车企回应:他大肆宣传小米SU7三个月,旷工去提车

每日经济新闻
2024-04-17 12:54:09
美媒评华为Pura70系列开售:会给iPhone带来更大压力

美媒评华为Pura70系列开售:会给iPhone带来更大压力

手机中国
2024-04-18 14:40:31
开车时的不雅行为,摄像头拍的一清二楚,网友:不要这么迫不及待

开车时的不雅行为,摄像头拍的一清二楚,网友:不要这么迫不及待

芷夕说文
2024-01-08 08:54:41
证监会IPO最新通告!今日凌晨的三大利好正式袭来

证监会IPO最新通告!今日凌晨的三大利好正式袭来

逆潮流财经
2024-04-20 01:25:03
中国十大口感很好的高档香烟

中国十大口感很好的高档香烟

阿莱美食汇
2024-04-19 17:22:35
鸡汤灌多了,有的人真的就被骗了

鸡汤灌多了,有的人真的就被骗了

听风听你
2024-04-18 00:01:53
众议院规则委员会将援助乌克兰的议案提交全院表决

众议院规则委员会将援助乌克兰的议案提交全院表决

寰宇大观察
2024-04-19 16:28:13
唏嘘人世的十五个真相

唏嘘人世的十五个真相

读书人冯学荣
2024-04-17 10:10:41
这瓜……过去这么久,依然很恶心!

这瓜……过去这么久,依然很恶心!

听风听你
2024-04-17 11:28:33
老人居家4个月燃气费1.5万!成都及重庆燃气公司被查后,爆出猛料

老人居家4个月燃气费1.5万!成都及重庆燃气公司被查后,爆出猛料

飘飘视角
2024-04-18 14:49:30
在全球197个国家中,竟然没有一个愿意将主要粮食变为转基因品种

在全球197个国家中,竟然没有一个愿意将主要粮食变为转基因品种

搞笑的阿票
2024-04-19 22:41:07
1-14!国奥0胜算,遭韩国队碾压,成耀东苍白无力,恐提前出局

1-14!国奥0胜算,遭韩国队碾压,成耀东苍白无力,恐提前出局

小金体坛大视野
2024-04-19 11:32:51
晚间市场传来两大消息,国家队再度出手,两亿股民兴奋地睡不看了

晚间市场传来两大消息,国家队再度出手,两亿股民兴奋地睡不看了

彩云的夕阳
2024-04-19 16:55:18
熊孩子全网公开王者荣耀新作保密视频,爸妈要面临巨额赔款吗?

熊孩子全网公开王者荣耀新作保密视频,爸妈要面临巨额赔款吗?

叶子猪游戏网
2024-04-18 13:04:21
英伟达“钱途”黯淡?次级芯片中国市场遇冷,黄仁勋:奖金都发不出

英伟达“钱途”黯淡?次级芯片中国市场遇冷,黄仁勋:奖金都发不出

科技龙
2024-04-17 17:25:11
广东副秘书长自杀前发微信:羡慕……

广东副秘书长自杀前发微信:羡慕……

我是娱有理
2024-04-19 07:18:42
霍勒迪:通常家里来人我老婆会告诉我 但希尔突然就拿着球衣来了

霍勒迪:通常家里来人我老婆会告诉我 但希尔突然就拿着球衣来了

直播吧
2024-04-19 21:32:34
陕西包工头发现漂亮妻子出轨,在卧室装监控,情夫身份让他暴走

陕西包工头发现漂亮妻子出轨,在卧室装监控,情夫身份让他暴走

纪实录
2024-04-16 20:15:05
新一代宝马X3正式亮相,颜值提升明显,还有3.0T动力可选,能火?

新一代宝马X3正式亮相,颜值提升明显,还有3.0T动力可选,能火?

車解读
2024-04-18 17:38:49
2024-04-20 02:52:49

科技要闻

最沉默的李想,最便宜的理想

头条要闻

媒体:以色列对伊朗的反报复刀刀见血 要真的打痛伊朗

头条要闻

媒体:以色列对伊朗的反报复刀刀见血 要真的打痛伊朗

体育要闻

米切尔这次对线不会输了吧

娱乐要闻

北影节开幕之夜,内娱女星千娇百媚

财经要闻

新华资管香港的秘密:猛投地产或致巨亏

汽车要闻

风神L7预售 东风汽车北京车展阵容公布

态度原创

艺术
家居
游戏
旅游
军事航空

艺术要闻

最全展览单元剧透!北京最受瞩目艺术现场100青年艺术季终极解读

家居要闻

光影浮动 色块碰撞与线条起伏的情感呼应

诸葛亮北伐路上的头号克星郭淮,王者之心里换成姜维能不能拿下?

旅游要闻

西宁“下南关”:高原老街的烟火气

军事要闻

以军打击伊朗7处目标 伊拉克等地上空出现大量战机

无障碍浏览 进入关怀版
×