设为首页收藏本站

LUPA开源社区

 找回密码
 注册
文章 帖子 博客
LUPA开源社区 首页 IT综合资讯 查看内容

网易:布局AI是要给更多的程序员带来福利

2016-10-30 16:59| 发布者: joejoe0332| 查看: 595| 评论: 0|原作者: 网易科技|来自: 网易科技

摘要: 网易杭州研究院执行院长汪源在第七季“网易开物沙龙”上发表了关于人工智能发展的演讲,他认为,当前人工智能技术发展分为三个层次,第一个层次是底 层的平台层,包括深度学习平台。中间的层次是能力层,云计算、自 ...

网易杭州研究院执行院长汪源在第七季“网易开物沙龙”上发表了关于人工智能发展的演讲,他认为,当前人工智能技术发展分为三个层次,第一个层次是底 层的平台层,包括深度学习平台。中间的层次是能力层,云计算、自然语言处理、视觉处理等技术处于能力层中。第三个层次是应用层,人工智能各种落地的应用产 品在这一层次中。中间的能力层是当前人工智能公司主要的发力点。

对于人工智能在工程领域应用的看法,他认为所有的人工智能都是从语音识别, 到图像识别再到自然语言处理。在实际应用场景中,一个通用的处理技术,比如语音识别,在应用到特定场景里的时候,可能达不到较好的使用效果。在自然语言处 理方面,以客服机器人举例,基于传统知识库的客服机器人不是真正意义上的人工智能解决方案,只是通过问题来检索知识库。客服机器人要解决多轮对话的问题, 涉及到M的机制、A的机制,同时也要解决知识领域的一些问题,客服机器人实际上是知识库的动态学习,以上这些机制是为了提高知识库学习的效率。

汪源表示,图像识别的应用场景同文本识别的原理相似,传统方法在图片过滤应用中解决不了的问题,通过深度学习的方式可以坐到非常精准。以网易的图片鉴黄为例,之前需要一些鉴黄师手动筛选,现在依靠深度学习的算法能够做到99.8%的准确率。

最后,汪源称当前网易的近万名开发工程师需要用到机器学习、深度学习来解决很多问题,机器学习的能力需要民主化,让更多的工程师享受到这一技术成果带来的红利,同时语音识别、图像识别和智能创作等更多的领域需要应用深度学习。

附演讲实录:

汪源:刚才吴院长高瞻远瞩,然后讲了很多人工智能激动人心的前沿的一些课题。网易作为一家公司,而且比较侧重于注重技术跟业务相结合的这么一家公司的话,所以我讲的东西可能会比较落地,比较实际,没有特别高大上的一些话题,我们可能是去树立一些小目标,先解决一些小问题。

刚才韦院长说了一个很有挑战的问题,都叫吴飞,都是院长,人工智能能不能区分出是哪一个?我是因为最早做数据库的,数据库就在讲这个实体怎么去界定?我发现这个问题人工智能做到现在其实还是很难做的。

我今天介绍是15分钟时间,所以基本上不会涉及太多的技术的细节,只是想总体上给大家介绍一下网易在人工智能做的相关的工作,分成五六个部分。

第 一个是介绍一下杭州研究院的定位。研究院是06年成立,我刚好在成立的时候进入研究院。网易杭州研究院它是负责创新业务的孵化,同时也负责给整个公司提供 公共的基础平台的支撑。互联网企业里面网易有一个研究院,这个机制还是比较特殊的。对于我来讲我要为公司的业务提供非常多的一些刚才介绍的从比较高大上的 人工智能,到不高大上的质量保障都得做。质量保障我们也跟人工智能做了相应的很好的结合。

整个研究院主要负责构建的是我们称之为互联网的技术体系,七大技术体系里面其中一个就是多媒体以及人工智能方向,所以今天讲的主要是人工智能方向我们做的一些工作。

这 张图,这里可以囊括一下我们现在人工智能主要的工作,其实人工智能是一个非常基础的技术,所以我也很难梳理清楚我们到底整个研究院,特别网易公司到底用了 多少人工智能的技术是很难梳理的。总的来讲我们的人工智能的技术可能我们做的相关工作,我在这张图里面大概做了一个概括。这里面可以看到分成三个层次,第 一个层次在底层是平台层,包括深度学习的一个平台,中间这个层次是能力层,云的技术、自然语言处理的技术、智能头像处理的技术,第三个是应用层,应用在网 易云、游戏、有道翻译等产品里面,对公司来讲我们从三个层面,从品牌、能力最后到应用的场景,今天主要从中间的能力层展开来讲。

第一块是语 音技术。网易在语音技术上为了去解决超大规模的上万个小时的语音的训练的问题,所以我们在云这一块就把我们的深度学习的一个平台的技术带动出来了。这个是 我们最早在语音的时候所练出来的一个分布式的深度学习的框架的内容。我们大概是在13年的时候开始做语音识别,网易在现在所有的游戏、社交的易信这些产品 里面都是采用自己的自研的语音的技术。具体的应用场景,最主要的是在手游里面使用量非常大,每天的处理请求量达到五千万,根据公开的一个数据来看,这个量 达到苹果系统的1/3左右。这里面我想着重可以突出说一点的是语音识别我认为,这一点也是我们对人工智能在工程领域应用的一个核心的一个认识,所有的人工 智能这些能力从语音到图象到自然语音理解,其实它都没有办法提供一个非常通用的解决方案。所以在语音识别我们一开始用的是通用的,比如科大讯飞和百度,后 来觉得在游戏里面效果不太理想的,游戏里面涉及到太多跟游戏世界观相关的词汇,还有游戏里面特殊的一些词,那我不玩游戏我都不太清楚,后来我们在自研的过 程中针对游戏特定的世界观的经过优化获得比一个通用的云识别要高一两个点的效果。所以这个我觉得也是我们实际的场景里面会不断的去发展这样的问题,就是一 个通用的人工智能的能力它在应用到特定的场景里面的时候,可能是达不到一个很好的一个使用效果的。这是我们做的另外一件事情,发音评测的工作,主要应用在 我们有道翻译里面。

第二块是自然语言理解做的工作,这边做的一些,有一些例子,比如说是一个,对于自然语言理解,我们现在主要做的工作是用 在客服机器人的这么一个应用场景里面,这边举了一些客服机器人的案例。对一个客服机器人来讲,传统基于一个知识库提供一个,其实它不是一个人工智能的解决 方案,传统来讲,它是一个知识库的一个检索的问题。但是这个用户体验也是很差的,所以现在你如果要提供一个用户体验比较好的客服机器人,那它需要支持比较 智能的多轮对话的方式,人跟人之间的对话不是说直接就一问一答问题就解决了,它是需要这个机器人能够了解到这个领域的知识,我举个例子,比如我要打车,我 说我要打车到浙大紫金港校区,他应该知道浙大紫金港校区是有东门、南门的,他会追问请问你到哪个门,因为这是两个不同的点,这个其实就涉及到领域的知识。 我很难具体来讲怎么样从技术上、细节上做到这一点,总体来讲对于大家做客服机器人,首先要有一种方式解决多轮对话的问题,这里面可能会涉及到M的机制、A 的机制,同时也要解决领域知识的一些问题。这里面就需要用到亿比如说知识图谱的方式,怎么样还需要针对特定的一个行业去做定制。我们做的是像知识库的一个 动态学习,那这个机制是为了能够提高知识库学习的效率,但是并没有一个特别通用的方案说我让我的客服机器人一下能够无所不能,能够回答所有的问题,这是不 现实的。

这是我们的主要应用,涉及到核心的技术点就是知识图谱里面地图的识别,这样的典型的一些问答机器人的算法。

然后这个 是文本过滤,文本过滤今天我们组织方是网易科技频道,像我们的网易的新闻有一个很好的功能叫跟贴,跟贴其实就是用户发表评论,但是我们把它设计成盖楼的方 式,一楼二楼,一楼经常,自古二楼出傻逼什么之类的,这个评论都很傻的,但是这里面会涉及到非常多的内容是不太合适的,那我们这个技术也是用在新闻当中, 我们各种UGC的产品里面大量的用户评论它的用此举是不是有不恰当的地方,这里面有很多不同的方式来规避你简单的关健词过滤的这么一种技术,它可以把习大 大拆成什么什么,或者是把其它名字,就是各种组合方式,但是像这样的技术也是可以通过自然语言理解,通过深度学习的方式能够做到比较好的效果,但是用传统 的关健词匹配是不可能能够维护一个很好的很全的,不可能把这个枚举的很全。

第三块智能图象识别我们做的工作。智能图象识别它的主要应用场景 跟刚才说的文本的识别,文本的过滤是类似的,也是一样,我们有很多产品里面用户会晒很多图,这个图片是不是有不合适的内容,里面有爆恐的或者有不良的广告 或者色情的图像,传统的这种方式也解决不了,但是现在通过深度学习的方式也可以做到非常好的,非常精准的效果。

对于色情图片,对于图片鉴 黄,从06年我开始做研究院工作,06年我们的鉴黄师用什么来做的?在一个小黑屋养一堆鉴黄师,那时候量比较少,很辛苦也很幸福,那个时候如果用算法判 断,实际上是很困难的,比如用简单的一些肤色识别方式是很麻烦的。那这种匹配方式是能够精确的匹配,稍微做一些编辑你又被它逃掉了,而且你的库不可能非常 全面准确。所以它的准确率只有5%。第二个阶段通过肤色识别,准确率只能做到60%,基本上处于不可用的状态,还有40%是错误的,60减40就剩 20%,这个技术基本上没有用,直到第三代深度学习的做法才做到99.8%的这样一个非常高的准确率。这里提一下99.8%的准确率听起来非常高,但是实 际上也不能说你就不需要审核人员,还是需要。实际上在所有的内容里面,它是色情图片的概率还是很少的,就是我们大部分网民心理还是很健康的,不会发很多色 情图片,总共其实也就只有0.8%的图象是色情图片,一个算法99.8%,0.8%里面有0.2%会错,错误率25%,你觉得99.8%很高,实际上它在 绝大多数内容都是健康的情况下,它的误判率还是比较高的,所以我们还是会用机器加人工智能的方式避免误判,但是漏判是比较少的。这个技术我们现在提供对外 的服务叫网易易盾。

后面说一下我们未来想说的事情第一个进一步加强人工智能的深度学习的平台,因为我们现在发现在网易里面,鉴黄的服务,网 易易盾包括云客服的服务还有翻译还有音乐的推荐,新闻的这种推荐,新闻的一个智能自动摘要等等有非常多的应用都需要用到深入学习。我们感觉传统的很多算法 都不是深度学习的。然后每过一年都会发现很多算法都会被深度学习代替。比如我们现在做的一件事情,因为谷歌之前发了一篇说谷歌用深度学习做机器翻译,谷歌 用机器学习做机器翻译之后马上就把机器翻译的效果又往前推进了一大步,所以我们现在也在做基于深度学习的翻译,翻译效果比原来统计的翻译效果会好很多。对 于网易来讲现在有近万名的开发工程师,这里面有很多的工程师可能就需要用到机器学习,用到深度学习解决很多问题。我们必须把这个机器学习的能力我们称之为 民主化,让大家一些普通的工程师,前期比较优秀的工程师都能够使用这么一个工具,所以我们会去做一个深度学习的很便捷的一个机器学习的平台,这个对于网易 来讲是一个非常基础的一个工作。

第二个我们希望在语音识别,图象的识别,智能创作这些更多的领域来去深入的应用这个深度学习。

我今天的介绍就到这里,谢谢大家。

稿源:网易科技报道


酷毙

雷人

鲜花

鸡蛋

漂亮
  • 快毕业了,没工作经验,
    找份工作好难啊?
    赶紧去人才芯片公司磨练吧!!

最新评论

关于LUPA|人才芯片工程|人才招聘|LUPA认证|LUPA教育|LUPA开源社区 ( 浙B2-20090187 浙公网安备 33010602006705号   

返回顶部