说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

MongoDB出新招,增加对Hive的支持

HTML文档下载 WORD文档下载 PDF文档下载
10gen宣布他们的Hadoop连接器将会在周二更新升级,并且宣称新的版本将是MongoDB自2012年4月发布以来最为重要的一次升级。

MongoDB的所有者10gen宣布其Hadoop连接器将会在本周二进行更新升级。新版本中将包括一些非常重要的新功能并且加入了对Hive(类似SQL框架和Hadoop的查询语言)的支持,它能够把本地MongoDB文件存储到Hadoop上,还能在MongoDB的同一的数据集合中运行增量的MapReduce作业。

公司的产品营销总监Kelly Stirman表示,MongoDB的Hadoop连接器已经上市了一段时间,而且被许多企业机构广泛的运用。不过周二的更新将会是MongoDB自2012年4月发布以来最为重要的一次升级。

也许大多数人并没有注意到,MongoDB和Hadoop在过去的几年已经变得非常的流行。Stirman表示,由于支持JSON类型文件,在很多Web和手机应用中,MongoDB都是被作为操作数据库,而Hadoop也是被很多公司选作大数据处理和分析平台。特别是在大型网络公司和世界500强企业,通常都并排部署了MongoDB和Hadoop。

MongoDB连接器现在已经非常的流行,因为它允许用户可以在数据库中预先处理MongoDB数据,而无需把数据发送到Hadoop中处理。在现有支持MapReduce 和Pig的基础上增加对Hive的支持,由于Hive中类似SQL的特性,使用MongoDB连接器来连接Hadoop数据,已经被很多企业广泛使用。

在Hadoop分布式文件系统上支持MongoDB本地BSON文件意味着用户可以备份他们的数据库资料到Hadoop中,同时用户也可以处理这些数据资料,这样就避免了在MongoDB集群上添加撤销负载。

Stirman把在MongoDB集合上运行增量MapReduce作业的能力称为近似 “浓缩进程”。 用户以前只能在数据库中一个新的集合上才可以运行MapReduce作业,但是MongoUpdateWriteable这种新的技术特性可以让用户在现有的集合上运行MapReduce作业。

数据库行业观察人士可能会质疑MongoDB的新特性,它是不是仅仅会改善MongoDB-Hadoop开发环境的现有功能,或者它是否能以某种方式来影响市场份额,这似乎是Stirman未来需要考虑的问题,至少目前已经考虑到那些使用Hadoop的公司了。Stirman指出10gen在营销上可能会遇到像Cassandra和HBase这样有竞争力的对手,不过目前而言, “从本质上来说,这三者(Cassandra、HBase以及MongoDB)相对于Hadoop,都是对等的。”

对等?也许吧——至少在某种程度上用户还是愿意扩展Hadoopde 的规模来弥补数据库扩展性的欠缺。当然,也有很多用户选择其他的NoSQL数据库产品而非MongoDB,这是源于所选的应用程序不同。 (文/孟祥杰 审校/王鹏)

相关链接:MongoDB: Now with Hive compatibility

 

专访IBM中国研究院院长沈晓卫博士:全新的物联网来了 《近匠》GYENNO CEO任康:用“勺子”敲开一片新市场 Horde3D——基于C++编写的3D渲染引擎 Maker Faire 2015在深圳正式开幕,关注创客生态系统 Arduino与Seeed Studio达成战略合作——专访Arduino联合创始人Massimo Banzi 免费开源的Bootstrap富文本编辑器bootstrap-wysiwyg使用方法 CCAI2015:首届中国人工智能大会将于7月26-27日在京举行 拥抱互联网+ 用友NC6助力集团企业蜕变数据驱动型公司 《近匠》融云,自主研发真正“不丢消息”的IM云服务 【CTO讲堂】听云CTO Wood:APM实现原理及对IT和产品运营的价值 从7个维度浅析虚拟现实Alpha年 Maker Faire上的微软:将技术与工具带给Maker才是关键 友盟2015年Q1移动互联网报告:车联网App崛起 多面编程语言Scala NEC高可用集群软件EXPRESSCLUSTER X3.3面向中国市场正式发布 【探秘ES6】系列专栏:模版字符串 专访图书作者祁宇:C++11让程序更简洁、更现代、更强大 滴滴打车CTO张博:生死战役,技术和时间赛跑 Qualcomm拥抱创客文化:如何基于DragonBoard 410c创造和创业? 【探秘ES6】系列专栏:剩余参数和默认参数 专访资深程序员庄晓立:我为什么要选择Rust? 主会讲师确认,2015中国人工智能大会火热报名中 容联·云通讯线下沙龙:IM 5.0助力App社交化 【CTO讲堂】全数据驱动产品优化,美国互联网公司A/B测试经验分享 《近匠》易快报:以报销做企业消费场景下的Slack 纷享销客D轮融资1亿美金,启动开放平台战略! 专访4秒源码商城CTO陈杰:扎根互联网的“不安的心” iOS UIView动画实践(一):揭开Animation的神秘面纱 【前端人生】Teambition前端工程师陈涌:非计算机专业,依托社区不断成长壮大 iOS UIView动画实践(二):Spring Animation与人机交互 基因组与数据整合:DNA应用开发正在临近 Servlet问题?(急等,立结) oleconnection 支不支持sybase的连接,不通过odbc如何连接Sybase高手请进!急啊!!! 关于return的问题 为何内存消耗在不断增长? 浏览器类型 求文件长度? 用DELPHI 开发过ORACLE数据库的高手帮忙,我现在遇到个问题, BCB消息机制问题, 关于MFC 请教:jar问题 零为什么不能做为除数。 菜单资源ID得问题 请问高手,实验室局域网内部下载速度很慢,会是什么原因造成的? 如何利用Datareport做出好看一点的报表? Grid的列怎么来调整? GDI+类使用new操作符问题 有人在吗? 请看看这一样个SQL语句 页面上有两个相连的表格时,中间的边框变得很粗,能否做到和一个表格的效果? 帮我写一个简单的和SERVER2000查询的例子50分相送!! 怎样将别人给我的数据库文件导到本地? 近日较忙,散分200 请问将脚本写在页面和写在J文件里有什么不同?我写在页面上一切正常,可是把脚本防在一个JS文件就报错 ===好几天,ADO 连接oracle数据库的问题.还搞定。大伙给看看 DBLookupComboBox的疑问 我是福建省福州的.程序员在哪儿报名呀?? 如何让录入页面的信息能自动保存~! 编写函数 有谁知道华工的计算机应用的复试考那几门?另外请问关于其他不公布复试科目的学校可以通过电话询问复试科目吗? 想不通,请教?(802.1x) 一个有关浏览器的问题,高手必进! 那位兄弟推荐一款文件夹加密的软件! 发布一套完整的网站系统,up就给分 怎么样能够把文件上传到服务器的任意目录下?? java同mysql连接不上: Server configuration denies access to data source 大家是如何看别人的源程序的呀~介绍一下自己的经验嘛~ 字符串A与B,找出A,B的最大公共子串? 我从TPanel继承一个控件,此控件能有OnMouseWheel事件吗?如果有,如何写? 新手的不解 谁能给个 ado 访问 mssql 最简单的代码例子? 关于Unicode的两个问题 sjsj(悠行者) 进来拿分。 100分送给大家!!! 用大数据库建立小数据库有没有好办法? 请问vc.net带的水晶报表能否用于vc6.0? 有没有vc开发水晶报表的例子? RedHat7.2可以为什么RedHat8.0就不行? 怎样在对话框的左上角加上自己的图标?替代掉VC自己带的那一个? 编写函数 ***急!!如何在DBGRID中不同的行显示不同的颜色*** 关于按钮的问题(急) 图形上载 天冷时,长安汽车开暖风是没有暖风,都是冷风? 溶酶体来源于什么细胞器?溶酶体来自什么细胞器?高尔基体分泌什么,然后与什么结合成一个细胞? 什么是掺稀土元素? 自动空调怎么刚开始开暖风有,跑个50公里就是自然风了 溶酶体可以消化细胞器碎片吗 化学问题:将氯化铵与过量氢氧化钙混合加热.最多可制得标准状态下氨气多少升?要过程 假设需求曲线为Q=100-2P分别计算价格P=1,25和49的价格弹性. 在下列细胞器中,质子泵在于 .A.高尔基体膜上 B.溶酶体膜上 C.过氧化物酶体膜上 D.内质网膜上 溶酶体是富含酸性水解酶的消化性细胞器,这种说法对吗? 蚯蚓身体的大小可以用测量什么的长度和什么的长度来表示 给定的某商品的需求曲线为QD=10-2P.求其点弹性为多少?怎样调整价格才能实现总收益增加? 梅雨造成的灾害梅雨会造成什么灾害啊?急用, 碳氨与盐酸反应生成什么?加热生成什么?什么气体会使湿润的红色石蕊试纸变蓝? 【急求】已知某商品需求曲线为D=100-2P,供给曲线为S=50+3P,请计算其均衡价格和均衡数量.如果政府对该商品实行支持价格政策,支持价格为20,将会出现多少产品过剩. 光合作用的直接产物中的糖是仅限于葡萄糖么? 内燃机同步练习题(1)做功冲程中气体做的功一台单缸四冲程柴油机活塞的横截面积为600cm ,活塞的行程是100mm,做功冲程的平均压强是 3.5 ×105Pa.,求:(2)若柴油机每分钟完成500个工作循环, 某商品市场需求函数为q=100-5p,假设供给曲线无线弹性,当价格从10上升到12时,社会福利损失为()要详解A 10 B 20 C 12 D 15 在光合作用的产物葡萄糖中,碳氢氧三种元素分别来自与?在光合作用的产物葡萄糖中,碳氢氧三种元素分别来自与?1 CO22 气孔的直接吸引3 水的分解4 叶绿素的分解请选择三个 内燃机的一个人工作循环有四个冲程,压缩冲程中( )能转过为( )能 设需求曲线的方程为Q=10-2P,求其点弹性为多少?怎样调整价格,可以使总收益增加? 西瓜的起源与传播 一个关于内燃机的常识题四冲程内燃机在不做功冲程时,活塞为什么还会运动呢? 蜗牛有视觉吗? 光合作用的 直接 产物中的糖是仅限于葡萄糖么?还是能直接产生多种糖? 衡量组织兴奋性高低的指标是 用酷组词 在敌人的( )面前,李大钊仍是那样安定,沉着. 光合作用 葡萄糖 计算 写出电极反应和电池反应 李大钊在敌人的法庭上坚定、沉着.(改写为感叹句) 10月10日生物追问17页:25,下列关于细胞器的描述正确的是 ① 酶体内含有多种水解酶,能分解衰老,损伤的细胞②动植物细胞都有两个互相垂直排列的中心粒③用高倍镜观察叶绿体可选用黑藻幼 蜗牛的质量有多大?先用天平测出一只蜗牛的质量为------------,再测出20只蜗牛的 市场供给曲线定义 溶酶体内含多种水解酶,能反饥饿衰老、损伤的细胞对吗?不是反饥饿 一只蜗牛的质量是多少? 蛋白质如何产生 经过哪些细胞器顺便问下 中心体做什么的 如何准确快速书写燃料电池反应式?主要是电极反应,不是总反应.还有就是在不同电解质下的反应,望知道这方面知识的帮忙总结一下. 1只蜗牛质量是多少 随身带点药 翻译成英语 石煤渣和煤矸石的区别 一只蜗牛的质量为? 赵州桥和卢沟桥的结构图与数据及特点快点 田径比赛计时员为起跑计时时,是看发令枪的烟雾而不是听枪声,为什么? 二十只蜗牛的质量是多少?谁知道20只蜗牛的质量!不要乱答! 秋天有哪些动物声音 溶酶体能合成多种水解酶吗如题 是不是核糖体合成蛋白质 那水解酶是核糖体合成完后运到溶酶体的? 汽车天然气瓶进了空气怎么办?少量空气影响使用吗?就是经常加气,管子里的一部分空气 需求曲线问题(需求曲线的弹性)明天要考微观了,需求曲线的弹性大于一,是一个笼统的说法,还是指需求曲线在某一区间内大于一,小于一.我知道弹性在需求曲线上是不断变化的,无论是弧弹 怎样写有机燃料电池反应式 蜗牛的质量有多大? 西瓜名称来历? 求乙醇直接氧化为乙酸的化学方程式 蜗牛有多大 黄西瓜是怎么由来的 已知KH和H2O反应生成H2和KOH,反应中1molKH( )已知KH和H2O反应生成H2和KOH,反应中1molKH( )A失去1mol电子 B得到1mol电子 C失去1mol电子 D没有电子得失此题为什么选A 请尽可能详细回答 世界上最大的蜗牛有多大啊 黑美人西瓜名字的来历? 已知氢化钾能与水发生如下反应:KH + H2O==KOH +H2↑已知氢化钾能与水水发生如下反应:KH + H2O==KOH +H2↑.现准确称量20克氢化钾放入230.5克水中,充分反应后,向所得溶液中逐滴加入溶质质量分数 白居易的诗 【急求】和溶酶体酶发生有关的细胞器为什么没有线粒体?在分泌小泡的运输过程中,线粒体不是要供能吗? kH和H2o反应生成H2和KOH反应中koH得失电子的数目是多少 国务院部署推进公司注册资本登记制度改《我是特种兵之火凤凰》演员拍摄搞笑花不留遗憾,5对老夫妻补拍婚纱照美对华钢铁产品发起贸易救济调查宁波市环境空气质量优良率在浙江省排名发改委官员:我国城市群交通存在三大问工业利润增势保持稳定但增长基础仍然脆廊坊数百学生不满校园管理聚集抗议 官俄媒:俄中简化边界海关检查体现两国高医改网站技术问题百出 奥巴马上教堂也上海自贸区基本运行制度创新框架已建立收入分配改革有望三中全会后推进 提低林毅夫:中国经济仍有20年年增长8%女大学生为照顾瘫痪母亲休学 喂饭端尿袁隆平赴武大演讲 因场地问题仅持喇叭三中全会将推“空前”改革首瞩目纽约华裔因“眼红”杀害表哥一家五口被奥巴马夫妇携女儿做礼拜 一家服装两风美媒:美是全球不多的超级大国 不得不16名沙特女性因驾车挨罚 引集体抗议新闻集团窃听丑闻将开审 或付出16亿兴中广场重磅出击 “激情大抽奖”深圳将与莫斯科大学合作办学车市掘金 女性市场微预告数字城管运行 分工合作是关键严禁项目“边勘查边施工”卖场资讯大家来点“赞”!富国汉盛基金将召开持有人大会银行收紧房贷 清远首套房利率普遍上浮支持香港循序渐进发展民主各地楼市华安科技动力跻身年内5强职业技能考核管理权下放“最牛飞机哥”为游戏礼包变身超级乘客用国际化营商环境抓住资本信心建议千灯湖升格“国家产业金融试验区”中国美林湖两大新品同步发放鱼一族足疗馆 三八节半价促销民间力量办国际大展将成趋势?加强顶层设计 创新社会治理
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘