说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

初创公司Citus Data将CitusDB扩展到Hadoop

HTML文档下载 WORD文档下载 PDF文档下载
初创公司CitusData进入高速发展的快车道。公司的旗舰产品就是分布式数据库系统CitusDB,它与全局式发布系统最大的不同就是可以在数据库任何一个节点上查找整个数据库信息,而不必老套的依靠数据中心点,大大地优化了查询数据的效率。

数据库初创公司Citus Data在本周二实现了Hadoop数据上的快速SQL查询,这并不算什么大事,因为它们还有更大的目标。Citus Data已超越Postgres将其高速、分析数据库CitusDB扩展到Hadoop上,接着可能扩张到MongoDB以及其它你已经想到的数据库产品。GigaOM的记者Derrick Harris认为,它是所有人都需要的唯一分析型数据库,它能够数据的查询,无论存储任何环境之中——关系型数据库、Hadoop、MongoDB、 Amazon S3或者还有其他的地方。

大数据已经打开了企业数据分析以及选择性数据存储的视野。那么这两项的结合往往意味着需要学习新的语言,使用多工具处理,而且在分析平台上还可能需要牺牲一部分性能。

Citus Data公司的旗舰产品就是CitusDB,它通常建立在PostgreSQL之上,第一代的目的就是为关系型数据设计像谷歌Dremel这种规模和速度的数据库。由于其中的一项功能“foreign data wrappers”,所以它能够在多种数据类型(像CSV, log以及JSON files,而且这些数据类型在原生的Postgres上是并不匹配的)上运行SQL。所以当CitusDB除了Postgres之外,还官方支持Hadoop文件分布式系统(HDFS),这就意味着绝不仅限于这些。

Matt Ocko是数据收集的负责人,也是Citus Data早期的投资者之一,他认为数据库从技术来来讲应该支持任何使用ODBC驱动的数据源,甚至能够直接从存储的数据中直接查询日志文件。事实上,Citus正在致力对MongoDB的支持——这种能力现在已经在测试版上了。Ocko强调了CitusDB像“网”一样的能力,它能够连接各种数据源,而不需要用户进行独立的查询,然后再手动地连接数据。他举了一个例子,使用CitusDB跨Postgres和Hadoop做join查询。

另外一点就是,CitusDB不仅具有良好的灵活性而且很快。Ocko说到CitusDB已经超越甲骨文Exadata machine上引以为豪的一个TPC-H基准测试(数据直接存储在硬盘上)。上文中提及的运行在亚马逊EC2云上的Postgres-Hadoop查询仅仅在几秒钟之内就完成了。

Citus的联合创始人Umur Cubukcu告诉Derrick,CitusDB之所以如此之快是因为它的架构:取代将数据在网络中传输,它将焦点聚集到数据位置的计算,并且在资源间具有强大的负载平衡能力。比如,需要一个很慢节点上储存的资源去完成完成一个任务,取代一味的等待它会去其它的节点上寻求相同的资源。

以Hadoop举例,MapReduce把计算带给了数据,但是每一个Job需要对整个数据集进行扫描。这就是早期的Hadoop上的SQL查询工具Hive现在仍然很慢的原因。曾经在Cloudera工作的Citus的软件工程师Carl Steinbach表示,CitusDB比Hive查询数据类型的速度快3到20倍。在一个典型的互动环境中,短查询的实际的速度可能还会更快。但是他同时指出,这些并不是Hive真正的设计目的所在。


然而,CitusDB真正的竞争对手是SQL-On-Hadoop的项目,产品还有很多初创公司。下个月“ Structure: Data”有一系列的话题为围绕于此展开,届时Aster Data,Platfora,Cloudera (Impala),Apache Drill,Drawn to Scale以及Hadapt都会展现各自的风采。

这些都是令人印象深刻的技术(至少在理论上,它们仍然处在发展阶段),Citus可能会不小心的忽视他们。但是除了可以查询多个数据源之外,Citus仍然还有自己独特的产品,这是其他的公司所不具备的。“当你在谈论一个企业级的数据库的时候”Steinbach表示,“那么谈论的内容绝对不仅仅是一个查询执行引擎。”(文/王鹏,审校/仲浩)

原文链接: CitusDB-today-SQL-on-Hadoop-tomorrow-the-world

独立游戏精神释放的舞台:IGF China 2013作品火热征集中 三款热门入门级在线编程教程对比 微软modern.IE:网站兼容性测试利器 Localytics:AngularJS代替Backbone 代码减少一半 史上增长最快的SaaS服务Optimizely:13亿访客,10万次测试 IDF上的云计算故事 移动周报:百万年薪、微信疑云,老罗小马本周很忙 一个创业失败者的自述:我是如何搞砸一款产品 收入百万美元:一个放弃上大学的程序员 Cocos2D配Box2D:逆天小白程序员作iOS游戏 招聘移动开发,老板必问的10个问题 黑客用智能手机劫持和控制民航飞机 几小时即可使互联网瘫痪的黑客 现已加入谷歌 Tsar开源:淘宝内部大量使用的系统监控工具 五款超实用的开源SVG工具 微信收费事件背后被广泛忽略的技术细节 UIDesigner 3.0架构设计总结 黑客怒了:政府花930万美金仅做一款App Email服务迎来“第二春” 未来将更加个性化 贯穿应用开发始终的八大陷阱 微评微软也推智能手表:是追求未来,还只是跟随? Firefox OS今年6月在5国首发 不含美国市场 8086/8088汇编指令手册 下一个被黑客攻击的对象—无线路由器 Windows Blue开始按钮或将回归,你怎么看? Evernote推孵化器 不占股权 基于C++和Lua的移动游戏引擎Leadwerks 3发布 苹果秘密测试iOS 7与iPhone 6 或将6月发布 酷6 CTO 陆坚:请先信任你的程序员 从电信联手i-Free,看运营商渠道的加速整合 “Animory”开发者分享HTML5游戏开发经验 如何用VC开发NT/2000下的服务程序? 在SQLPLUS下怎么删除表里的一些字段的空格? 散源代码(5)- N皇后问题回溯法文本动态图示 画饼图? 问一个关于变量作用域的问题? 能不能将word中的表格转换成表单中的表格,并保持格式不变???? VFP问题,为什么老显示文件正在使用 无限惊喜等着你!! 大家有没有这样的经历????? 谁有关于domino的一些资料,请告诉我!3ks 如何让组合框初始显示为某一指定的行??就像vb中使用listindex一样??? 散源代码(6)- 货郎担问题回溯法 散源代码(7)- 求解货郎担问题的分枝限界算法图形演示(v2) 请教windows xp 网络共享问题 你想有额外的收入吗? 如何在SQL Server中,让一个用户作另一个用的别名 谁有skinengine2.0的密码? vc++.net简单问题-必定送分 怎么分割? 紧急求助:(无以为报,奉送点值20分) 散源代码(8)- 动态规划算法计算网络的最长路线和最短路线 oracle 9i支持哪些jdbc驱动? 赚钱秘籍!!! 用ACCESS设计了一报表,在VB中如何调用? 求在CRichEditView中设置位图背景的代码?谢谢! 怎么在一个CStatic上用程序动态显示BMP图片 javabean+tomcat访问数据库,如何配置阿!大虾帮帮我吧!搞来稿去就不行! 我想在运行时把form里面的所有控件缩小一半(控件很多,不想一个一个设),该怎么办? c++builder6快出现了。散分!!!!!!!!!!!!!!!!!!! 如何在程序中插入 EXCEL表格 我是个菜鸟,我这个问题这么这么的简单,以经在CSDN上问了好多好多天,为什么就是没有人会帮我解决? 急,所以到谁圆问一下,.dwg的文件是什么格式,用什么打开,谢谢! 一段读串口的代码有问题,高手帮我看看 紧急求救!!!怎样用C++Builder在链接服务器中创建一个表呢?SOS 特惠虚拟主机:dtp.51.net! 想把一系统内存块拷贝到位于D3DPOOL_DEFAULT的Surface中,怎样做更快?谈谈你的经验吧 在msdn中我看了一下午关于枚举的可就是不明白他到底在什么情况或者处理什么情况的时候用? All-in-Wonder Radeon 是不是不支持 Real Producer???? 用ACCESS设计了一个报表,在VB中如何调用? 支持ASP、PHP高迅特价主机:(推荐)dtp.51.net 套接字问题再次提问 C#参考文档要的举手啊! 怎样做服务程序? (在系统后台运行) TComboBox的text能否设为只读? 站点属性中“应用程序保护”有三个选项,分别是---低,中,高。有什么区别吗?安全性有什么不同?为什么有的isapi程序必须设置成低才能正确执行啊? 怎样才能使Web页上的ACTIVEX控件自动下载注册? ADO 与 DATA MODUAL 怎样判断一个文本文件中的数据。 绝对的诚意邀请高手加盟 请问邮件服务器,如何用java实现,最好有源代码,谢谢了,急 急贴:>>>>>>>>>>>>>>>>>>>>>>>>>>这里有英语好的网络专家吗? 加工中心铣键槽问题,键槽宽度为8MM,10MM,12MM,深度5MM左右,用钨钢刀一刀铣还是分层铣好! 求2500--4000的变速车,美利达捷安特都行,不要自组,将配置(越详细越好,详细的我会提高悬赏)、价钱写下来 把一根用砂纸打磨过的铝丝浸入硫酸铜溶液中,过一会儿取出,观察,有什么现象发生?把一跟洁净的铜丝浸入硝酸银溶液中,过一会儿取出,观察,有什么现象发生? 304不锈钢加工直径16要保证孔的深度用什么刀(直径公差+0.02深度+-0.018)用加工中心加工,在直径68 上,0度180度270度各分布一个,中间是10.5的通孔 轿车变速器的齿轮一般用什么材料的 金属加工液,乳化油和水基切削液,防锈哪个好?金属加工液,市场上普通的乳化油和水基切削液,用的时候,防锈哪个好?我听说普通的乳化油一般可防锈7天以,普通的水基的一般防二天左右,是这样 内孔直径16 公差0至+0.05 深度266的深孔如何加工 不同颜色的物体反射不同颜色的光,那么光照在黑色的物体上反射什么光,照在白色物体上反射什么光?别生气.都是为了探讨啊.有反射黑光的说法吗?黑光是什么光?如果说黑色物体几乎不反射光 水基切削液可以防锈吗? 机加工:螺纹最钻孔深度我想知道相应螺纹能钻孔的最大深度?就是想知道,例如M5的螺纹孔在一般工艺情况下,能最大的钻孔深度是多少?有没有类似的一张表可以查到 另外希望能回答的更详细 白色物体能反射什么颜色的光 哪家公司能做防锈切削液配方分析厉害一点呀?最近我们公司自己生产防锈切削液卖得不好,有人说产品配方方面比例不对,想先找家专业公司做防锈切削液配方分析,哪里有? 真空镀膜,电镀,是不是一回事,有哪些塑料不能镀膜, 不同颜色的物体反射光颜色不同,反射光的能力也不同.判断题:1.煤不仅是燃料,还是多种工业的原料。( )2.平面镜成像是有光的反射形成的。( )3.一年四季变化是地球在公转过程中形成 推荐几个化学实验,说明用什么药品,怎样做 激光钻孔一般深度范围是多少?目前较深的可以达到多深?孔径多大?激光钻孔的深度和孔径有什么比列关系?和材料的关系呢?激光钻孔速度能达到多快? 我想问下铸铁件加工用的切削液,工作液应该是什么样的颜色?有这样一种情况,加工用的切削液刚配好是透明的,由于加工铸铁件颜色变的有点发黑,是不是正常的? 关于2个铝的化学实验1.铝和四氧化三铁反应的装置是个什么造型?难道是铝和四氧化三铁摆在坩埚里面然后底下用镁条烧?还是镁条直接加到铝和四氧化三铁里面引燃,KClO3放在哪里呢?2.为什么 这种履带液压钻井机它的行走速度是多少?钻孔深度、直径及钻杆直径分别是多少? 在钻削铸铁铁,碳钢,不锈钢时钻削速度以及切削液的比较,切削液的做用?跪求好心人帮下忙 铝的化学实验设计铝具有传热性,导电性的证明实验简称 如:燃烧·铝 金属表面反光问题我做实验拍摄柱状金属表面的小裂纹,但是有条反射的光亮线妨碍拍摄,应该怎么办? 有什么切削液防锈功能最好?用乳化油来做切削液,我都已经尽量做好防锈了,但是铣床工作台上和平口钳上还是出现了一些锈斑,停了半个小时没清理就出现锈迹,实在是无奈呀! 之前听人说用水 铝 实验 制取 怎样去除金属表面的胶我的工作用具上粘了好多的 胶 怎么也弄不掉啊 急死我了 什么切削液的防锈性能比较好? 二氧化碳的制取1、稀盐酸和石灰石的反应.怎么把石灰石、稀盐酸放到试管中?大约放多少稀盐酸?2、集二氧化碳检查气体是否集满时是否要拿导管出来?如果没有集满的话怎么办?大约要多久才 玻璃切削液的选用原则?求科普, 切削液靠什么防锈 切削用量对切削力和切削温度的影响规律有和异同? 请问,切削液加注可以取用方法? 切削液防锈吗 南京黑色金属防锈纸,哪有的卖? PC塑料材料电镀后能否超声波焊接? 怎样合理选用切削液 为什么铝丝浸入硫酸铜溶液中变色 膨胀螺丝和打孔最近搞装修和安装的工人都回家了,我平时动手也比较多,就是没装过大的膨胀螺丝,这次需要自己装一个M8的,钢的膨胀螺丝,冲击钻有的,以前没装过,所以问下有经验的网友,是否 金属加工中心如何用切削液呢?以及切削液的区别及选用标准? 将一根用砂纸打磨过的铝丝浸入硫酸铜溶液中,下列观察到的现象和结论正确的是1铝丝表面附着红色固体.2铝丝表面有大量气泡.3溶液的蓝色变浅.4溶液中一定有铝例子,硫酸根离子.6溶液质量 钻孔桩中钻孔的深度、直径、位置和孔形如何测量 为什么白色的衣服反光,黑色的衣服吸光?从物理的角度来分析!为什么白色物体能反射任何色光,黑色物体能吸收任何色光? 将铝丝浸入硫酸铜溶液中得到什么现象?溶液中减少离子的是,增加离子的是? 哪些塑料和金属可以电镀青古铜?谢谢 为什么黑色可以吸收几乎所有的光,黑板还会反光?越详越好,但别瞎闹. 现在的金属切削液有没有防锈的功能,哪家公司的金属切削液比较好? 深层搅拌桩直径0.5米,深度10米,钻孔用时是多少? 深色物体反光能力().吸收热的能力().浅色物体反光能力().吸收热的能力() 用家里的物品做化学实验写出实验用品,现象,化学反应式,结论 塑料添加什么电镀效果好 切削液的废液量该如何计算,废切削液应如何处置 在家里,用日常生活品,可以做哪些化学实验? 电镀到金属或塑料上的金属铬有没有磁性?镀铬一般为多厚? 玻璃切削液产生的废液该如何处理? 反应釜为何物?用铝做它有何优点?“反应釜”是一个什么东西?有道题上问用铝来制作它有何优点? 塑料产品电镀后为什么会弯 塑料产品电镀后两边有些歪曲,请问是什么原因啊 急加速撮车怎么办 铝的化合物有哪些?他们如何转换?(最好有方程式) 压铸铝合金ADC12的材料,采用CNC加工钻孔,直径在2~10mm的孔径精度能保证在什么公差范围? 汽车如何加速 在家做化学实验废气物如何处理没有重金属,就是有一些烧碱盐酸之类的,还有硫酸铜何氢氧化钙或者氢氧化钠配的溶液,我直接倒马桶里面了,我怕这样会造成污染,不知道怎么处理了我很头疼
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn