摘要:深度学习首先发起于学术界,目前各大互联网巨头也纷纷投入研究,如的猫脸识别以及的深度学习团队。一家将深度学习用于情绪分析的公司说将词汇多带带分析的方法并不准确,必须将其放入到越来越大的结构中。
深度学习领域是计算机科学一个新兴领域,通俗说来就是构建像人脑一样处理数据的计算机程序。深度学习首先发起于学术界,目前各大互联网巨头也纷纷投入研究,如Google的猫脸识别以及Facebook的深度学习团队。
每天,数百万人在使用Twitter、Facebook和其它社交网络来就各类热点话题互相交流。大量的个人信息被汇集到这里,对于Google、Facebook、Amazon和Twitter等大型互联网公司来说,如果拥有较为实用的深度学习技术,这些数据就可以转化为财富。但是说起来容易做起来难,对这些数据的处理能力很大程度上取决于他们的计算机算法是否成熟。
近日,斯担福大学的研究生Richard Socher和Andrew Ng(Google深度学习项目工程师之一),以及一位语言学及人工智能领域的专家Chris Manning,共同研究开发了一个深度学习的新算法,这个算法被称为Neural Analysis of Sentiment,缩写为NaSent。NaSent算法从人脑中得到灵感,旨在改善当前书面语言的分析方法。
Socher介绍说NaSent的目的是开发一种可在无人监督的情况下运行的算法。“过去感知分析主要聚焦于模型,忽略了词序,而且依赖人工干预,并且只适用于简单的例子,永远不会达到人类的理解能力。因为词义会随语境变化,就算是语言专家也不能准确定义语言中感情的微妙之处。我们的深度学习模型就是为了解决这些问题”。
目前,应用最广的情绪分析是“词袋(bag of wodrds)”模型,并没有将词序列入考虑范围。词袋中的词汇被标记为正面或负面的,通过计数来评估整个句子或段落的含义是正面还是负面。
AlchemyAPI(一家将深度学习用于情绪分析的公司)CEO说将词汇多带带分析的方法并不准确,必须将其放入到越来越大的结构中。
Socher和他的团队从影评网站Rotten Tomatoes抽取了12000个句子,并将其粗略分割为214000个词组,每个词组被标记为负面、中立或正面(数字表示),计算机科学家称这些数字化的表述为“特征表示”,类似于人脑理解概念和定义的方式。
如何分析和组织这些被标记的数据才是NaSent算法的核心。以下通过对两个句子的分析来理解这个算法:
Unlike the surreal Leon, this movie is weird but likeable.
Unlike the surreal but likeable Leon, this movie is weird.
这两个句子中使用的词汇完全相同,“词袋”模型分析显然不会得到正确的结果。NaSent算法首先会为每个句子构造文法树,如下图所示:
在分析句子时,红色的节点代表这个词汇或短语带有负面情绪,例如“weird”虽然是一个负面词汇,但短语“is weird but likeable”被正确理解为正面情绪。
如上图所示“surreal but likeable Leon”是一个正面词组,但“this movie is weird”是负面的,整个句子得到的分析结果也是负面的。
相比之前模型80%的准确率,NaSent的准确率达到了85%。这个系统还没有授权给外部组织,但是据Socher说已经有几个初创公司联系他们表示对NaSent算法很感兴趣。
但遇到没有被统计的词汇或短语,这个系统就会失效。Socher和他的团队已经开始通过Twitter和网上的电影数据库,扩充系统的词汇库,他们还允许外部人员对这个词汇库进行扩充。短短几周内,就收到了14000份词汇库的提交。
欢迎加入本站公开兴趣群商业智能与数据分析群
兴趣范围包括各种让数据产生价值的办法,实际应用案例分享与讨论,分析工具,ETL工具,数据仓库,数据挖掘工具,报表系统等全方位知识
QQ群:81035754
文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。
转载请注明本文地址:https://www.ucloud.cn/yun/4360.html
摘要:今年月日收购了基于深度学习的计算机视觉创业公司。这项基于深度学习的计算机视觉技术已经开发完成,正在测试。深度学习的误区及产品化浪潮百度首席科学家表示目前围绕存在着某种程度的夸大,它不单出现于媒体的字里行间,也存在于一些研究者之中。 在过去的三十年,深度学习运动一度被认为是学术界的一个异类,但是现在, Geoff Hinton(如图1)和他的深度学习同事,包括纽约大学Yann LeCun和蒙特...
摘要:毫无疑问,现在深度学习是主流。所以科技巨头们包括百度等纷纷通过收购深度学习领域的初创公司来招揽人才。这项基于深度学习的计算机视觉技术已经开发完成,正在测试。 在过去的三十年,深度学习运动一度被认为是学术界的一个异类,但是现在, Geoff Hinton(如图1)和他的深度学习同事,包括纽约大学Yann LeCun和蒙特利尔大学的Yoshua Bengio,在互联网世界受到前所未有的关注...
摘要:京东更是已经实现深度学习的初步运用。目前深度学习推广的条件已经成熟。李成华表示,随着深度学习的发展和成熟,的机器学习算法将会被取代。京东研究深度学习的初衷客服对电商发展的重要性毋庸置疑。随后深度学习技术的风靡,加深了京东完善的想法。 说深度学习(Deep Learning)算法是当前人工智能皇冠上的明珠并不过分。通过深层神经网络(DNN)模型的运用,深度学习已成为目前最接近人脑的智能学习方法...
阅读 892·2021-11-22 13:54
阅读 2822·2021-09-28 09:36
阅读 2958·2019-08-30 15:55
阅读 1937·2019-08-30 15:44
阅读 528·2019-08-29 12:31
阅读 2545·2019-08-28 18:18
阅读 1181·2019-08-26 13:58
阅读 1292·2019-08-26 13:44