说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

利用Neo4j对电影评论进行深度学习情感分析

HTML文档下载 WORD文档下载 PDF文档下载
目前,国外一个电影网站允许用户提交关于他们针对某部电影是喜欢还是不喜欢相关信息的评论,随着这种类型评论的海量增加,依靠人工方法以及难以为继,情感分析技术被提到越来越重要的位置。

【编者按】随着互联网的发展,用户从以前的“读”网页转变为“写”网页,互联网上产生了大量的用户参与的,对于诸如人物、事件、产品等有价值的评论信息,而随着网络上评论信息爆炸式的增长,以人工的方法很难应付海量评论信息的收集和处理,情感分析技术随之产生,本文以电影影评为例,利用Neo4j对电影评论进行深度学习的情感分析。

一个电影评论网站允许用户提交关于他们针对某部电影是喜欢还是不喜欢相关信息的评论。充分挖掘这些评论继而生成有价值的元数据(针对相关内容的)将给我们提供一个难得的机会,它可以让我们以一个大众化的方式来理解用户对于这部电影的情感,这是一件很酷的事情。我们可以对主观内容做出一个客观的分析,这样可以使我们能够更好地理解产品和服务的趋势,可以为消费者做出更好的决策。

情感分析的数据模型

实现这些的主要障碍是我们的结构和转换数据。当前最先进的技术包括Naive BayesSupport Vector Machines以及Maximum Entropy。这些技术实施的挑战仍然是如何以最小的性能代价从文本中提取特征和结构化数据,这就是我决定要集中精力解决的问题。

我使用特征选择算法(详情点击这里),利用图形数据库Neo4j来解决数据转换和可用性的挑战,而最先进的自然语言解析算法的重点是关注句子结构,我决定为自然语言Grammar induction设计一个统计方法,主要是针对巨大文本语料库的概括,生成新特性,使用深度学习预测当下特性左边或右边的概率最高的新特性。

基于图形的NLP实例

我假设短语“one of the worst”作为一组文本的特征已经被提取。这个词提取的原因是这个短语有最大的统计学相关性,这意味着这个短语在父短语之后有最佳的匹配机会。使用Neo4j我们可以确定产生这一词的继承特性。


从根节点开始,它被加上“{0 } { 1 }”,路径里面” one of the worst将被解析为(the)->(ofthe)->(one of the)->(one of the worst)

这样的层次结构将会扩展为更多的可能性,如下图显示:


这种特征选择算法可以在不到一秒钟的时间从文本语料库中选择提取概率最大的相关特性和短语。这种技术对于情感分析具有非常重要意义的原因是这些模式节点可以连接到他们训练过的文本标签上,如下所示。


该算法的结果是任何自然语言文本可以在秒级解析,生成一个可用于任何分类算法的子图。这在很大程度上要归功于Neo4j图遍历。

开放源码演示

针对电影评论的例子,我选择了500个影评,包括正面和负面的标签,使用Graphify训练一个自然语言解析模型。在下一篇博文中,我将向你介绍展示如何做到比人类更好地电影评论分类,人类分类错误率为30%。

如果你想一睹为快,请点击Graphify Sentiment Analysis for Movie Reviews。

原文链接:Deep Learning Sentiment Analysis for Movie Reviews using Neo4j (编译/魏伟 审校/仲浩)

Mozilla联手黑莓推进Web安全技术,推出开源测试平台Minion 苹果如何培养SOHO一族高效工作 再造Ruby:CryENGINE 3.5游戏引擎特性详解 Eclipse基金会涉足物联网,M2M标准是否已获东风? SDN部署前必须考虑的7个事项 【云先锋 40】初创公司DataStax:专注于Cassandra,三年融资8370万美元 内容创作工具的革新:Facebook前CTO推文字处理应用Quip 微软为Android手机推出Office 仅面向Office 365用户开放使用 编程、创业、开源感悟——SDCC 2013讲师云风专访 原生广告:移动推广的热门新宠 隐私之战:金山手机毒霸宣布开放安全检测平台 世界人民的头上有张监控大网——Xkeyscore 美国“监控门”情报收集系统 X-Keyscore 技术揭秘 为啥REST如此重要? 并非PHP Frameworks而是WordPress让PHP更加流行! Twitter Bootstrap深受开发者喜爱的11大理由 假如3D打印机也有“撤销”键 大数据的游戏运营:不能起死回生,只能锦上添花 15个步骤创立技术公司,并收获千万用户(一) 红帽再发力 将MongoDB整合到Linux系统 ZestFinance:前谷歌CIO创立的机器学习+大数据分析公司 7月份浏览器份额:IE仍最受欢迎 Chrome成最大赢家 2013 Q2 Android手机出货量再创新高 iPhone三年来新低 如何一个人打造日PV百万的网站架构——SDCC 2013讲师曹力专访 【一周观察】动辄9位数以上的投资,云数据中心缺口巨大! 硬件创业到底有多火? 知名网站分享:PHP代替Perl,Redis置换MySQL,日处理过亿PV 涨姿势了:Unity CEO聊如何玩转开发者生态 移动周报:再造Ruby女神背后的开发故事 超算什么都弱爆了:模拟一秒人脑计算需要8.3万处理器40分钟 人才短缺不能只靠等 看分析人士给硅谷的3个方案 请教关于 98中 Personal web Server的问题 辽宁4:0狂胜广东,爽丫!SB广东解说员居然说中国足球没戏了~~~~~~~~~~ 用APPLET做一个上传的东西可以吗???? "我的问题"栏中,只剩下未解决的了,已给分的为何都不见了? 在CSDN和大富翁都没人会答的简单OLE问题,唉! 我是shijie819有问题?? 各位高人,看看代码,不能输入汉字只能输入英文,问题在那里? 如何将编好的n个模块连接到一个工程 请教!关于listbox的列属性? Applet为什么能在JBuiler5中调试,而不能在浏览器中显示 SOS!谁有语音卡编程的经验和资料,恳请指教!给分的! 谁有用VC++中ODBC API 编写数据库的例子? sql server 有沒有邏輯型字段!!! 电娃娃领分!!!!---goldsun发 猛禽进来拿分. 谁有画线的函数源码,参数为两点坐标? 如何将xml中的数据转换成动态的数据图形显示啊 有谁可以讲讲有关KV3000的A盘..... 没有问题 请问斑竹:是不是以前的得分时间长了会没有了? 小弟向大哥大姐们请教VB数据库问题! 考研问题请教!!!! 这个问题和apache配置有关吧! 哪里有比较稳定而且空间大、速度快的主页空间? 向高手请教!如何实现网络DDE ie的internet选项菜单项被锁定,如何解开(急,马上给分) 回答者有分 我需要JAVA-JDBC打开数据库的原码.................. 很想给datawindow 加上一个标题栏, 可加上后是灰色的 :( 可变成蓝色的吗? 关于ORACLE8.1.7中SQL *PLUS 不能显示中文的问题 ? C语言中好像有个with指示符吧?怎么用的? 网上有(深入浅出mfc)这本书可以下载吗?? 这个SQL或存储过程怎么写?(MSSQL7) 那位仁兄有进销存源代码(delphi版)及相关资料的,帮帮忙,往jian38625@sohu.com发 Exchange 2000 server 客户端问题 如何获取框架中打开的文件名? 寻找tomzou(老猫Tom ) 软件维护指南国家标准Gb(txt版)zip压缩,这里下载 下面的程序怎么不能执行?谢谢谢!!! 如何用VC++在windows中得到Floppy 的类型 网上有(深入浅出mfc)这本书吗?? 请大家帮忙 各位高手快指点迷津! 写过IDL的大虾请进 获取网页内容(急急急急急急急!) 变参函数问题 关于打印的问题 菜鸟问题:(->) 和 (.) 有什么区别,是不是调用指针对方法就用 -> ,调用对象的方法就用 . ? 怎样实现APPLET和SOCKET之间的通讯 求教! 谁有已破解的activeskin啊,小弟急用,给我一个好吗? 清明节作文500字别太好 真实点 谁能给我个作文《在追逐梦想的日子里》好点 用“谦让”或“进取”为话题写作文,有什么素材可以用?比如孔融让梨 怎样写科学小论文?(小学的){可以帮我写的话就帮我写吧}1000字必须得实验(关于科技的有实践性的简单的实验)如果光写个“你自己想一想就行了”这样的话的话就会举报. 科技征文1000字 ,还有一个科技论文800字 ,跪求. 《解读诸葛亮》的作文? 作文:我的理想我的理想是当个服装设计师或者主持人 作文:追逐梦想(要详细描写追逐梦想的过程)(600字左右) 詹天佑读后感300字不要太罗嗦,不要有詹天佑的介绍.在半小时之内给我. 我的理想作文,首尾呼应,运用搜集到的资料.快点,我急用,追加分 找一篇作文400字左右,叫追逐梦想的日子 关于诸葛亮的作文不能抄袭,字数过600! 关于我的理想作文 追逐梦想!100字作文 帮我找一篇读詹天佑有感600字 围绕着詹天佑爱国来写的作文 今天之内 爱国爱国!好的悬赏200 一篇初一的作文600字《爱,伴我成长》. 具体过程,思路,答案 一篇“诸葛亮,我想对你说”的作文 成长非常痛,非常爱 600字作文 在田野上追逐梦想 作文 800字 读詹天佑有感300字 作文《爱伴我成长》(600字以上) 要思路过程答案,谢谢. 读【詹天佑】有感300字应该很快的,要快点 求一篇题目为《成长》的800字作文 作文追逐梦想,600字明天要交的! 急求一篇关于自我介绍的英语作文 作文 以成长的故事为话题 800~ 及思路. 初一的作文:微笑让我成长 要求600字 1000字科技小论文怎么写详细的问题说明,有助于回答者给出准确的答案 求方法过程及答案. 关于成长的作文600字要初一水准的 作文 成长的脚印不要重复 爱国主义书籍读后感700字到800字 校园生活作文的素材 成长的脚印600字初中水平快.我急 关于爱国主义书籍的读后感. 关于校园的作文素材(初二) 急!求关于校园的作文素材,初二的,可以是写景的,也可以是写人的(高尚品德)...关于校园.急! 关于成长的脚印的作文,要500字的.最好还有事例的.我今天就要,没时间拉 爱国主义书籍以及读后感有哪些反映“共产党、民主独立、建设中国社会主义”的书籍?还有要有800字读后感欧 校园作文素材要发生在校园或者有关校园的作文素材大概200字左右 成长的脚印 作文求成长的脚印作文,教我怎么写,再给几篇范文.范文最好自己写. 成长的脚印作文600字 中华儿女报效祖国的文章和书籍的读后感! 找一篇爱国书籍的读后感一定要是书!字数是450字左右哦!今晚就要, 散文的写作格式和方法,1000字左右的! 读后感作文.书不限,500字左右.尽快,不要抄袭,我要参考开头,结尾. 雷锋在我心中的作文1500字 在追逐梦想的日子里 作文 写一篇关于诸葛亮的作文写一篇《千秋诸葛我评说》500字左右 别写的太好…… 第八单元关于艺术的作文 400-500字别太长了 寻求《在追逐梦想的日子里》作文的开头,结尾 诸葛亮的作文怎么写?/ 求一篇科技小论文,千万别太长400至500字就行. 作文 在追逐梦想的日子里600字 《祖国发展我成长》作文500字不能多于五百字 也不能抄袭 求一篇“雷锋在我心中”500字作文 中学生作文 在追逐梦想的日子里在追逐梦想的日子里700——800字 祖国的成长作文600字
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn