说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

利用Neo4j对电影评论进行深度学习情感分析

HTML文档下载 WORD文档下载 PDF文档下载
目前,国外一个电影网站允许用户提交关于他们针对某部电影是喜欢还是不喜欢相关信息的评论,随着这种类型评论的海量增加,依靠人工方法以及难以为继,情感分析技术被提到越来越重要的位置。

【编者按】随着互联网的发展,用户从以前的“读”网页转变为“写”网页,互联网上产生了大量的用户参与的,对于诸如人物、事件、产品等有价值的评论信息,而随着网络上评论信息爆炸式的增长,以人工的方法很难应付海量评论信息的收集和处理,情感分析技术随之产生,本文以电影影评为例,利用Neo4j对电影评论进行深度学习的情感分析。

一个电影评论网站允许用户提交关于他们针对某部电影是喜欢还是不喜欢相关信息的评论。充分挖掘这些评论继而生成有价值的元数据(针对相关内容的)将给我们提供一个难得的机会,它可以让我们以一个大众化的方式来理解用户对于这部电影的情感,这是一件很酷的事情。我们可以对主观内容做出一个客观的分析,这样可以使我们能够更好地理解产品和服务的趋势,可以为消费者做出更好的决策。

情感分析的数据模型

实现这些的主要障碍是我们的结构和转换数据。当前最先进的技术包括Naive BayesSupport Vector Machines以及Maximum Entropy。这些技术实施的挑战仍然是如何以最小的性能代价从文本中提取特征和结构化数据,这就是我决定要集中精力解决的问题。

我使用特征选择算法(详情点击这里),利用图形数据库Neo4j来解决数据转换和可用性的挑战,而最先进的自然语言解析算法的重点是关注句子结构,我决定为自然语言Grammar induction设计一个统计方法,主要是针对巨大文本语料库的概括,生成新特性,使用深度学习预测当下特性左边或右边的概率最高的新特性。

基于图形的NLP实例

我假设短语“one of the worst”作为一组文本的特征已经被提取。这个词提取的原因是这个短语有最大的统计学相关性,这意味着这个短语在父短语之后有最佳的匹配机会。使用Neo4j我们可以确定产生这一词的继承特性。


从根节点开始,它被加上“{0 } { 1 }”,路径里面” one of the worst将被解析为(the)->(ofthe)->(one of the)->(one of the worst)

这样的层次结构将会扩展为更多的可能性,如下图显示:


这种特征选择算法可以在不到一秒钟的时间从文本语料库中选择提取概率最大的相关特性和短语。这种技术对于情感分析具有非常重要意义的原因是这些模式节点可以连接到他们训练过的文本标签上,如下所示。


该算法的结果是任何自然语言文本可以在秒级解析,生成一个可用于任何分类算法的子图。这在很大程度上要归功于Neo4j图遍历。

开放源码演示

针对电影评论的例子,我选择了500个影评,包括正面和负面的标签,使用Graphify训练一个自然语言解析模型。在下一篇博文中,我将向你介绍展示如何做到比人类更好地电影评论分类,人类分类错误率为30%。

如果你想一睹为快,请点击Graphify Sentiment Analysis for Movie Reviews。

原文链接:Deep Learning Sentiment Analysis for Movie Reviews using Neo4j (编译/魏伟 审校/仲浩)

揭秘MongoDB最新Java驱动:更好的JVM支持,指日可期的异步 不仅只有IE Mozilla将于发布Win8平台Metro版Firefox 360搜索发布新产品“我的搜索” 引入网民评价和网站名片功能 AppScale:Google App Engine的开源实现 近期十大优秀jQuery插件推荐 通过语音识别来编程 速度远超键盘 BrowserStack:多系统跨浏览器兼容性测试工具API发布 更加开放?Path向13家应用开发商开放API 重金力邀开发者 联想智能桌面应用开发大赛开幕 SDCC 2013大会讲师名单议题出炉 8月20日五折票价最后一天 程序员困境:底层编码能力正逐步丧失 寓教于乐 给代码审查者的几点建议 裁员4千、总裁员人数超过7.5万,难掩思科锋芒 物联网离普罗大众还有多远? 悼念斯诺登使用的加密电邮服务——Lavabit架构解析 运营商上阵OTT “一笑泯恩仇”后路在何方 [企业开源系列]后起之秀Facebook凭什么挑战互联网霸主Google? 谷歌推出免费标签管理应用Tag Manager McAfee CTO Phyllis Schneck被任命为NPPD副部长 Bootstrap 3.0发布 更好地支持移动端和响应式开发 国内创业公司QingCloud的魄力:做一个世界级的IaaS服务 从毫秒到微妙,纯硬的闪存阵列IBM Flash System来了! 中科创达邹鹏程:黑客精神逐渐被人遗忘 有点让人感伤 通过讲故事的方式来设计优秀网站 “肮脏的”IT工作排行榜 Clank:带有SCSS的高效率移动应用原型框架 欧朋 CTO 罗志宇:谈Sphinx游戏引擎的前世今生 John Carmack大神亲手操刀,Oculus Rift SDK即将发布 从南极之争谈软件架构十个技巧,及成功团队具备的气质 Imation重拳出击,推出新型混合存储平台 张建华:FusionSphere不是简单的OpenStack发行版 紧急在线等待,求助!!!!! 我是新来的,很多都不懂!也没有朋友,有谁能和我做朋友么? 分手为什么只要一个人说了就算,为什么不能像离婚一样要双方同意,法院判决??? 关于从TImage继承创建自定义控件的问题? JRUN4怎么运行Servlet? 关于远程创建表,删除表的问题?请帮忙。 启动数据库时报 监听程序无法启动专用服务器进程???ORACLE 9.2.0.1.0 如何將指針作為參數傳遞。 请教vb自带的报表编程 在Sql语言中的取整函数是什么? 怎样将添加的记录到所有的现有记录后面? 如何装双系统?(在线等候) CSS一般要学多久才算掌握? 从事共享软件开发的进来谈谈做共享的辛酸好吗? 请教使用notifyicon遇到的问题 ActiveState.Visual.XSLT.for.VS.2003.v1.7.9.2475.WinNT2K无法安装。 如何合并两个dataset win98系统下ISAM问题 如何减小生成的EXE文件大小等? asp.net有没有模板 帮帮忙,呵呵!!!一个小问题!!!!! 用VB的兄弟姐妹们,来整个MSN如何? 关于dllhost占用系统资源的问题! 谁是雍亲王,出来说话!!! 在WSAD5.0里怎么添加类型为MYSQL的数据源 高手们,帮帮我噢(解决立刻给分) 全中国程序员联和起来。 如何在web的FORM1模式下画一条线段 界面贴图问题 为什么我用Server.MapPath(""),返回不了任何东东? 上手指路,高分相送 asp怎样连到SQL Server 2000?给100分,在线等 ASP.NET和SQL 哪位兄弟有用asp.net做的OA完整的例子...大家快来.. 关于dllhost占用系统资源的问题! Kylix是否和Delphi一样有RTF控件可以处理丰富文本? 小弟想考程序员!各位大哥指点一下嘛!有要考的交流一下嘛! 查询条件的问题?? 从事共享软件开发的进来谈谈做共享的辛酸好吗? TListView中某一SubItem怎末实时更新?在线等。。 http://www.000163.com/的空间能不能信得过? 请帮忙哟,在线急等 asp.net下如何用c#编写程序实现调用数据库中的多个表显示在datagrid 如何调用存储过程来删除表中的列名???? 给一个变量赋空值的问题 如何在DirectDraw显示Edit,输入文字?? 贴子回复次数大于跟给分次数是什么意思啊?让不让结啊?? 结交delphi爱好者! 请各位高手给我指点一下方向? 如何在Sybase数据库中获得刚插入的那条记录的主键? 怎样获得菜单项(menuitem)名? 寝不尸 居不客 告诉我们什么道理 不是翻译 英语翻译是记下这件事离开了,还是留下标记离开了呢我们以前老师讲的是记下事情离开了,可现在要中考了,那本篇目点击上写的是留下标记离开了啊,现在的老师说一切以篇目点击为准, 经过市场调查获得信息,生产一种绿色食品,若在市场上直接销售,每吨利润为0.1万元,经粗加工后销售每吨利润可达0.45万元,经精加工后销售每吨利润可达0.75万元.一家食品公司加工生产能力是 居客是什么意思? "娘西撇"在宁波话中是什么意思?急! 第一个回答而且对了必给采纳,第二道题的两个问号 “居人思客客思家”中的“居人”是什么意思? 好像是方言 武汉话调妖是什么意思? 求大神帮忙整理名人传中的内容名人传中,三个人物:贝多芬,米开朗琪罗,托尔斯泰.分别整理出:国籍,生卒年,身份,外貌特征,个人名言,代表作品,性格特征.越全越好, 良里个西撇的什么意思 英语翻译Install ducting in the ceiling than begins with a vent above the aisle behind each server row and connects back to the air handler's intake. 各位大神帮帮忙~~急!【在线等】 【名人传的一段描写【在长期休养的闲暇中,孤独而痛苦的他,颇为伤感,往事便不由得浮现在了眼前.经历了近几年的颓废而紧张疲惫的日子之后,能重温童年 翻译“君问可,非问臣之子也”只翻译这一句, 《庄子与惠子游于濠梁》的寓意是什么?这故事到底讲的是什么,不知道他在哲学上有什么意义. 羁绊是什么意思? 类似于这样的电路如何计算电路中的总电阻?电流方向是怎样的? 君问可,非问臣之仇也的也是什么意思 无经验限制是什么意思 《名人传》中的名言的感悟拜托各位大神《名人传》中的名言的感悟 要一个句子一个感悟 君问可,非问臣之仇也 意思 一块长方体木块,长5厘米,宽4厘米.高3厘米.把它削成一个最大的正方体后,体积比原来减少百分之几?谢谢你!但是答案是百分之45 四川话兮撇什么意思 像骨肉之情一样的词语 瑞士,瑞典的官方语言是什么? 四川话 不得撇 是虾米意思? 我是君,你是臣,君要臣死? [疴] 好撇啊,四川话什么意思啊? 有没有像"恩重如山''的词语至少4个 如何提高直通车关键词的质量得分? 细腻的腻在细腻里是什么意思 在直角梯形ABCD中,AD//BC,∠DCB=90°,AC⊥BD于点O,DC=2,BC=4,求AD的长,不用相似.怎么做? 疴养什么意思 聊人生什么意思 攀岩绳结有哪些?最好有图片的 爱成疴什么意思 甜腻什么意思啊?急急急. 登山绳坠落次数是什么意思,多大的坠落系数才算进总坠落次数里,怎么计算?一般攀岩动力绳长度是多少? 疴尿什么意思 不怎么聊了啥意思 黄海之滨什么意思 “广乃告其所以,客豁然意解,沈疴顿愈”是什么意思(不要什么谜语的,就要翻译!) 孙子兵法军争篇:军争是什么?军争争什么?为什么要军争?怎么样进行军争?军争到什么程度? 我国的“黄海之滨”是丹顶鹤的第二故乡.“黄海之滨”在哪里? 辛亥革命是成功的还是失败的?为什么?它的成功与失败都体现在哪里?请举出具体的例子. 甜腻是什么意思 黄海之滨指的是? 喝酒呢,客随主便的反义词 甜腻什么意思 黄海之滨的明珠猜一个城市并在百度中搜索. 我来到城市和我的外祖母(妈妈的妈妈)生活在一起、 句式不要太简单、 拒绝百度在线翻译或者谷歌在线翻译之类的谢谢 乖的甜腻一点是什么意思乜许.乖的甜腻一点. 孤单,就不那麽明显.这是全句.谁可以告诉下. 经过市场调查获取信息,生产一种绿色食品,经粗加工后销售每吨利润可达4500元 怀孕100天,B超检查胎儿不发育,只有四十多天大小.身体无不良反应,没有出现腹痛和出血现象.饮食各方面均正常,医生说再等上几天再过来检查一下,要是再不发育,有可能就是死胎,需要做引产. sickly sweet什么意思 是甜腻的么? 某地生产一种绿色食品,若在市场上直接销售,每吨利润为1000元,经粗加工后销售,每吨可获利润4500元经精加工后销售,每吨利润涨至7500元.当地一家公司收购这种食品140吨,该公司的生产力是:如 食不言,寝不语.席不正,不坐.寝不尸,居不容的意思 具体解释一下《孙子兵法》中的“迂直之计”.如题.非诚勿扰. 经过市场调查获取信息,生产一种绿色食品,若市场直接销售,每吨1000元,经粗加工后销售每吨利润可达4500元,经精加工后销售每吨利润可达7500元.一家食品公司加工生产能力是:如果进行粗加工, 日本警官爱用枪对准下属遭停职 称只为卜拉希米:日内瓦会议不能缺少叙反对派奥巴马出席投资美国峰会 承诺加强吸引日再上传英文版主张独岛主权视频 韩再德国成欧洲首个允许出生登记性别栏空白德国成为欧洲首个允许出生性别栏填写空会议记录爆奥巴马医改网站开通首天仅6法一酒店房间装透明天幕 住客仿佛置身韩政府再次敦促日方删除主张争议岛屿主日本东京民众提前两天排队等待购买新款调查报告称澳移民目的地开始从欧美转向日本学生12万粒杏仁膏立体再现法国印芬兰计划实施新禁烟法 拟禁居民在阳台日本议员“告御状”欲破天皇不干政禁忌韩被日本强征女劳工状告三菱获胜 获赔调查报告称澳移民目的地开始从欧美转向会议记录爆奥巴马医改网站开通首天仅6芬兰计划实施新禁烟法 拟禁居民在阳台斯诺登不会赴德就监听事件作证 可在俄重大内政外交事奥巴马一问三不知 遭讽韩国法务部否认对检方调查国情院干政案反家暴法草案:公安机关可代为申请人身三峡杨林堂鼓 高山峡谷的天籁之音华裔警察刘文健遇难一周年 纽约举行纪解放军86A步战车雪野疾驰 官兵伪装大雾笼罩扬州瘦西湖 美景似画如仙境胡键:国际关系理论的上海学派何以可能清华附中工地坍塌致10死案宣判:15深圳山体滑坡已致91人失联 新华网无铜掌柜:P2P理财平台中的假标如何鉴联邦配偶团聚移民申请者福音:工签试行所谓伊人,莫过于旧时光中的旗袍美人中医药法草案:中医诊所由许可管理改为人贩子是如何拐走孩子的?河南驻马店宿鸭湖宿雁 三万只大雁与人驻马店:气象国土联合加强地质灾害预警驻马店第二实验小学举行建校三十周年汇凤梨酥馅的做法铜掌柜:怎么通过理财赚到人生的第一桶日本猕猴依偎在篝火前取暖 啃红薯姿态天冷了,皮肤病就少了吗?智慧养老:下一个10万亿市场
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘