说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

MongoDB出新招,增加对Hive的支持

HTML文档下载 WORD文档下载 PDF文档下载
10gen宣布他们的Hadoop连接器将会在周二更新升级,并且宣称新的版本将是MongoDB自2012年4月发布以来最为重要的一次升级。

MongoDB的所有者10gen宣布其Hadoop连接器将会在本周二进行更新升级。新版本中将包括一些非常重要的新功能并且加入了对Hive(类似SQL框架和Hadoop的查询语言)的支持,它能够把本地MongoDB文件存储到Hadoop上,还能在MongoDB的同一的数据集合中运行增量的MapReduce作业。

公司的产品营销总监Kelly Stirman表示,MongoDB的Hadoop连接器已经上市了一段时间,而且被许多企业机构广泛的运用。不过周二的更新将会是MongoDB自2012年4月发布以来最为重要的一次升级。

也许大多数人并没有注意到,MongoDB和Hadoop在过去的几年已经变得非常的流行。Stirman表示,由于支持JSON类型文件,在很多Web和手机应用中,MongoDB都是被作为操作数据库,而Hadoop也是被很多公司选作大数据处理和分析平台。特别是在大型网络公司和世界500强企业,通常都并排部署了MongoDB和Hadoop。

MongoDB连接器现在已经非常的流行,因为它允许用户可以在数据库中预先处理MongoDB数据,而无需把数据发送到Hadoop中处理。在现有支持MapReduce 和Pig的基础上增加对Hive的支持,由于Hive中类似SQL的特性,使用MongoDB连接器来连接Hadoop数据,已经被很多企业广泛使用。

在Hadoop分布式文件系统上支持MongoDB本地BSON文件意味着用户可以备份他们的数据库资料到Hadoop中,同时用户也可以处理这些数据资料,这样就避免了在MongoDB集群上添加撤销负载。

Stirman把在MongoDB集合上运行增量MapReduce作业的能力称为近似 “浓缩进程”。 用户以前只能在数据库中一个新的集合上才可以运行MapReduce作业,但是MongoUpdateWriteable这种新的技术特性可以让用户在现有的集合上运行MapReduce作业。

数据库行业观察人士可能会质疑MongoDB的新特性,它是不是仅仅会改善MongoDB-Hadoop开发环境的现有功能,或者它是否能以某种方式来影响市场份额,这似乎是Stirman未来需要考虑的问题,至少目前已经考虑到那些使用Hadoop的公司了。Stirman指出10gen在营销上可能会遇到像Cassandra和HBase这样有竞争力的对手,不过目前而言, “从本质上来说,这三者(Cassandra、HBase以及MongoDB)相对于Hadoop,都是对等的。”

对等?也许吧——至少在某种程度上用户还是愿意扩展Hadoopde 的规模来弥补数据库扩展性的欠缺。当然,也有很多用户选择其他的NoSQL数据库产品而非MongoDB,这是源于所选的应用程序不同。 (文/孟祥杰 审校/王鹏)

相关链接:MongoDB: Now with Hive compatibility

 

奏响年度最强音 第七届中国云计算大会日程全公布(表) 【CTO讲堂】请在还年轻的时候,尽量多踩些坑 以细分使用场景为突破点 探究墨迹天气的体验创新 熟练成就创造——MathWorks全球副总裁Richard Rovner、产品市场经理赵志宏专访 Objective-C编码规范:26个方面解决iOS开发问题 豌豆机器小组发布最新WRTnode2R,支持华为Liteos、QQ物联与AllJoyn [新书推荐]Node.js项目实践:构建可扩展的Web应用 【简讯】Perl 5.22.0 发布,大幅改进代码! 【征文】特别策划——群雄逐鹿共话新型数据库 针对DCloud侵权质疑,APICloud发布声明 《近匠》小鱼天气,中国风与细粒度空气质量检测 Xcode 7 beta发布,Swift 2.0带来哪些新变化? 【有奖征集】MDCC 2015演讲议题征集全面启动 Swift语言那些鲜为人知的特性 《开源者说》08期:聊聊Java那些事儿 专访唐成:从小工到专家,PostgreSQL的修炼之道 《瞬间之美》作者Robert Hoekman Jr:如何成长为UX领袖人物? TIOBE 2015年6月编程语言排行榜:Swift份额上升,Objective-C成自由落体 【CTO讲堂】Box首位华人核心工程师的回国创业之路 【探秘ES6】系列专栏:ES6简介 专访《Javascript设计模式与开发实践》作者曾探:爱编程 爱生活 【探秘ES6】系列专栏:迭代器和for-of循环 【CTO讲堂】UCloud联合创始人兼CTO莫显峰:如何成长为技术合伙人? 【探秘ES6】系列专栏:生成器 iKair转型传感器及SaaS厂商,发布Maxense平台与9款“云传感器” 免费jQuery幻灯片图片轮播插件Galleriffic的使用方法 专访IBM中国研究院院长沈晓卫博士:全新的物联网来了 《近匠》GYENNO CEO任康:用“勺子”敲开一片新市场 Horde3D——基于C++编写的3D渲染引擎 Maker Faire 2015在深圳正式开幕,关注创客生态系统 Arduino与Seeed Studio达成战略合作——专访Arduino联合创始人Massimo Banzi 如何在vc中播放rm格式的文件??? 那位大侠知道怎么创建并使用一个变量,每次只让一个进程访问???给个例子吧,大大大 大 delphi中怎么编写中断,获取外部设备传来的信息?急救!! 数值模拟与计算仿真,高手请帮忙! 请问:dos下图形放大算法或思路?还有.........(高手请进) 求教!!!!SOS!! --请问如何将一个BMP图形文件转成JPG图形文件,高分请教师--- 高分给出,win98的怪问题! 打印统计问题 请教 : html的javascript 中报错:document.Form1.client_name.value不是对象 VC++里面如何从文本文件中一行一行读取文件? 请问,如何用mail函数批量发送邮件.多谢. 各位请教一下,Jsp 的服务resin在win2000下是怎样配置的 各位兄弟: 有谁知道 侯杰 的 <多线程程序设计> 什么时候才能买到??? 哪里有VFP3.0下载? system.ini和win.ini的作用 怎样生成安装包,多谢! 如何在两个不同的应用程序之间拖动文本字符 请问,PTSTR 和 PSTR 有什么不同? 反对上海电信变相涨价的行为。我能不能告中国电信“违约”和“欺诈”呢。 求救!误删Office2000注册表! 生成.exe出错 在Excel中,如何让某些行不能滚动? 在--成都--程序员能拿多少--¥--???? 换了17寸纯平显示器,开心,放分. 错装PB7,不能无create datawindows的图标,全是XX,为什么? 请问怎样遍历一个页面中服务器端的所有对象? 能否跟我说说——自动控制方面——与delphi编程的基本常识?我一直想了解,但不知道我们编的程序如何去跟那些硬件搞在一起而且控制硬件呢? 程序出错 发现一个不错的网站!www.ffboy.com 兩個Recordset之間數据轉入和轉出問題???. 高手請進......(一定給分) 大家推荐一下 ,win2k 下的 XML 编辑器。 请问男女之间存不存在真正的友情? 请教一下,怎样打印 java applet绘出的图形?,要用java 编写 高手请进!!!关于数据库 很菜的问题!字符串转化的问题? 最近运行D盘时,出来"找不到该路径..."的对话框,是什么原因? 指针数组定义的问题 我想截获tcp包,问从何下手,大鸟们 快来帮忙 远程数据传输问题:不同地域,不同系统间的数据传送有什么好方法? 急!!!(原谅我的无知) DELPHI怎么联接Access数据库!!!BDE ADO都可以!!!! 求安装制作软件 请问进行OpenGL编程除了VC和C++BUILDER外,还有什么工具可用?????? 请教一下,怎样在jsp中捕获 java applet 的按钮事件 一道填空题,大家看一看呀 小弟对现公司特别反感,很想换个学习环境比较好一点的,但是公司又要叫我签下一年的合同,我真是难办。 关于扩展名为.DAT文件的问题。 himen.sys文件的作用? 给SQL2000存储过程批量加密? 如何定义一个和Excel内嵌函数一样的用户自定义函数? 科学家把环形山分为几类四类还是五类 中国一些节日的英文说法 细菌按形状可分为(),()和()? 高数,复合函数求导, 谁知道各类节日的英文说法全一点 细菌有哪几种形态? 月球上最大的环形山是( )A.贝利环形山 B.哥白尼型环形山 C.克拉维型环形山 各个节日的英语说法每个节日 铁细菌是什么形状的 月球上最大的环形山?最深的环形山?有辐射纹的环形山?最早登上月球的载人航天飞船与宇航员? 节日的说法Thanksgiving ,Halloween ,New Year'Eve ,Spring Festival 等节日前加什么介词? 细菌有()、()和()状等不同形状,有些细菌相连接成().但每个细菌都能()生活. 月球上环形山的特点 16.在爆破中,若导火线的燃烧速度为0.8cm/s,人跑步的速度为5m/s.(1)当导火线长度为40cm时,从点燃导火线到爆炸,人最多能跑多远?(2)若安全区离爆破点有300m,那么导火线最短取多少才安全?过 一个高数求导问题求大神解答!希望能写在纸上拍下来发给我会加分就是求括号里面的那个的导数就行了, 不用管左边的e 问一个高数中复合函数求导的问题划红线部分干嘛不用说明是对y还是x求导的呢,别人怎么知道啊? 隐函数求导现在就卡在一点上:例如x^2 + y^2 = 1,我看其中对y^2的求导是2yy',这是咋来的呢?2y后面为什么乘以y'或者为什么不是2y',我看有人说好像是链规则,这是? 常用的静态图象文件有几种格式?分别具有哪些特点? 库仑等于多少焦耳? 有这样子的花吗 求导,为什么 d(y^5)/dx 会等于 d(y^5)/dy · dy/dx 月球上的环形山有什么特点?你认为是怎样形成的?请设计一个实验对环形山及其特点的 花朵分为哪几种形态 高数,如何证明反函数二阶导d(1/y')/dx=-y''/(y')^2如题 月球上的环形山有什么特点 请问这几种分别是什么花(草)?请教一下这俩照片里从上到下分别是什么花? 是在同一个花坛照的 已知y=y(x)的导数y',y‘’存在,且y=y(x)的反函数为x=x(y),试用y',y''表示(d^2x)/dx^2 —(y'')/(y')^3 在50秒内,通过某导体的电荷量是10库仑,电流做工60焦耳,则通过该导体的电流是多少安培?导体两...在50秒内,通过某导体的电荷量是10库仑,电流做工60焦耳,则通过该导体的电流是多少安培?导体 推荐几种鲜花?送一个冷艳,知性的女生.想送的有品味一些.哪些花适合她的特点? 女人体型分为哪几种 月球上的环形山是怎样形成的? 亲戚送一个花篮,请问这几种是什么花? 旗袍款式分为哪几种 月球为什么有环形山? 一辆功率为45kw的汽车,以72KM/h的速度在平直公路上匀速行驶30km,求汽车受到的阻力是多大?汽车所做的功 轮廓标分为几种,我要详细的. 带月的诗句加上思想感情 月球上的环形山是怎么形成的? 一道高数题,分段函数求导,分段函数f(x) =[φ(x) - cos x]/x x=/=0a x=01.求常数a的值 ,使f(x) 在 x=0 处连续;2.求f'(x).这道题的1.lim(x->0)f(x) = lim(x->0) (φ(x) - cos x )/x =然後...为甚麼要一定要用洛必达法则?而 高数下册 隐函数求导法的一个问题第一条划线的部分是根据求导法则来做我理解.我疑问的是,第一步求偏导Z和X是看做不相干的的变量可是为什么第二次求偏导的时候,又要把Z看成是X的函数 电量的单位是库仑,为什么在电池上标的都是毫安? 乳房的形状分哪几种形状? 高数隐函数对数法求导问题.y=x^sinx为什么用对数求导法呢,若直接求导y'=sinx*x^(sinx-1)*cosx这样不对么?错在哪里?哪些情况下用对数求导更方便呢?附:用对数求导法 lny=sinx*lnx; 1/y*y'=cosx*lnx+sinx*1/x 库仑是什么单位 乳房的形状有几种?我的乳房看起来尖尖的,而我看有一些女人是圆圆的.为什么乳房形状会不一样呢?乳房的形状总共有几种? 高等数学中的隐函数求导公式那个叫雅克比公式的一大串怎么记啊? 高数函数求导问题现有一函数f(x),当x=0时其值为0,当x不为0时其值为为e^1/(-x*x),求f(x)在x=0处的导数.怎么求的? 乳房都有哪几种形状 高数问题(隐函数求导)高数书上有个例题求e^y + xy -e = 0d(e^y + xy -e)/dx = e^x·dy/dx +y +x·dy/dx --(1)(1)式是怎么得来的,谁能具体讲解下,其中:e^y + xy -e = 0为e的y次方加x乘以y减e等于0我想问e^y + xy - 为什么月亮上有许多环形山? 乳头的形状有几种 高等数学隐函数求导问题如图所示,有所疑惑, 月球环形山形成的原因是什么? 乳房什么形状好看 以中国科学家名字命名的月球环形山的科学家是谁? 一辆汽车正以36km/h的速度做匀速直线运动,已知发动机的功率是60kw,求这辆汽车所受的阻力是多少? 定积分求导如 ∫(上a下b)f(x)dx 求导 月亮上有许多大大小小的环形山,多数科学家认为环形山的成因是:A、地震B、火山爆发C、陨星撞击D、板块运动 高数多元函数求导其实是一个有点白的问题就是,什么时候用dy/dx,什么的时候用ay/ax?我觉得没什么差别啊,为什么书上一会用这个一会用那个~~ 细菌的样子
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn