说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

初创公司Citus Data将CitusDB扩展到Hadoop

HTML文档下载 WORD文档下载 PDF文档下载
初创公司CitusData进入高速发展的快车道。公司的旗舰产品就是分布式数据库系统CitusDB,它与全局式发布系统最大的不同就是可以在数据库任何一个节点上查找整个数据库信息,而不必老套的依靠数据中心点,大大地优化了查询数据的效率。

数据库初创公司Citus Data在本周二实现了Hadoop数据上的快速SQL查询,这并不算什么大事,因为它们还有更大的目标。Citus Data已超越Postgres将其高速、分析数据库CitusDB扩展到Hadoop上,接着可能扩张到MongoDB以及其它你已经想到的数据库产品。GigaOM的记者Derrick Harris认为,它是所有人都需要的唯一分析型数据库,它能够数据的查询,无论存储任何环境之中——关系型数据库、Hadoop、MongoDB、 Amazon S3或者还有其他的地方。

大数据已经打开了企业数据分析以及选择性数据存储的视野。那么这两项的结合往往意味着需要学习新的语言,使用多工具处理,而且在分析平台上还可能需要牺牲一部分性能。

Citus Data公司的旗舰产品就是CitusDB,它通常建立在PostgreSQL之上,第一代的目的就是为关系型数据设计像谷歌Dremel这种规模和速度的数据库。由于其中的一项功能“foreign data wrappers”,所以它能够在多种数据类型(像CSV, log以及JSON files,而且这些数据类型在原生的Postgres上是并不匹配的)上运行SQL。所以当CitusDB除了Postgres之外,还官方支持Hadoop文件分布式系统(HDFS),这就意味着绝不仅限于这些。

Matt Ocko是数据收集的负责人,也是Citus Data早期的投资者之一,他认为数据库从技术来来讲应该支持任何使用ODBC驱动的数据源,甚至能够直接从存储的数据中直接查询日志文件。事实上,Citus正在致力对MongoDB的支持——这种能力现在已经在测试版上了。Ocko强调了CitusDB像“网”一样的能力,它能够连接各种数据源,而不需要用户进行独立的查询,然后再手动地连接数据。他举了一个例子,使用CitusDB跨Postgres和Hadoop做join查询。

另外一点就是,CitusDB不仅具有良好的灵活性而且很快。Ocko说到CitusDB已经超越甲骨文Exadata machine上引以为豪的一个TPC-H基准测试(数据直接存储在硬盘上)。上文中提及的运行在亚马逊EC2云上的Postgres-Hadoop查询仅仅在几秒钟之内就完成了。

Citus的联合创始人Umur Cubukcu告诉Derrick,CitusDB之所以如此之快是因为它的架构:取代将数据在网络中传输,它将焦点聚集到数据位置的计算,并且在资源间具有强大的负载平衡能力。比如,需要一个很慢节点上储存的资源去完成完成一个任务,取代一味的等待它会去其它的节点上寻求相同的资源。

以Hadoop举例,MapReduce把计算带给了数据,但是每一个Job需要对整个数据集进行扫描。这就是早期的Hadoop上的SQL查询工具Hive现在仍然很慢的原因。曾经在Cloudera工作的Citus的软件工程师Carl Steinbach表示,CitusDB比Hive查询数据类型的速度快3到20倍。在一个典型的互动环境中,短查询的实际的速度可能还会更快。但是他同时指出,这些并不是Hive真正的设计目的所在。


然而,CitusDB真正的竞争对手是SQL-On-Hadoop的项目,产品还有很多初创公司。下个月“ Structure: Data”有一系列的话题为围绕于此展开,届时Aster Data,Platfora,Cloudera (Impala),Apache Drill,Drawn to Scale以及Hadapt都会展现各自的风采。

这些都是令人印象深刻的技术(至少在理论上,它们仍然处在发展阶段),Citus可能会不小心的忽视他们。但是除了可以查询多个数据源之外,Citus仍然还有自己独特的产品,这是其他的公司所不具备的。“当你在谈论一个企业级的数据库的时候”Steinbach表示,“那么谈论的内容绝对不仅仅是一个查询执行引擎。”(文/王鹏,审校/仲浩)

原文链接: CitusDB-today-SQL-on-Hadoop-tomorrow-the-world

React Native实战(一):配置和起步 集聚MDCC 2015 免费展位第二波正式放出 【深入浅出Koa】入门知识,带你以现代化开发方式构建Web应用 升级到Node V4的七个理由 支持大量ES6特性 像写SQL一样编写Java数据应用 Swift 2.0实战:如何实现从非零下标遍历数组? 手把手教学:在iOS 8中使用Cocoapods 交互技术前沿与应用实战:MDCC虚拟现实专场议程揭晓 解密“攻城狮使用手册” 技术专家齐聚!MDCC 2015精彩日程全曝光 基于ActiveMQ的消息中间件系统 OneMM逻辑与物理架构设计详解 John Carmack大神亲操刀,为Oculus开发Netflix应用 React Native实战(二):Android的打包 独立游戏的成功秘诀:好设计才是王道 Swift 2.1的新变化 Apple TV实战:用TVML开发第一款tvOS应用 【SDCC讲师专访】阿里王晶昱:云时代的分布式数据库DRDS 硬件研发、嵌入式技术演进:MDCC IoT峰会日程揭晓 专访百度知道iOS团队负责人孙源:代码强迫症的死实践派 TIOBE 2015年10月编程语言排行榜:Ruby取代Objective-C进前十 【SDCC讲师专访】PingCAP联合创始人兼CEO刘奇:好的产品应开源,不闭门造车 【深入浅出Koa】常用工具分享 帮你降低编程难度 Relay: 全新的React数据获取框架 探索游戏开发面临的技术挑战——MDCC 2015游戏开发专场议程曝光 【SDCC讲师专访】易开发创始人潘俊勇:这些年我遇到的那些坑 【CTO讲堂】OpenStack行业实践和发展趋势探讨 万物互联,移动为先:MDCC 2015移动开发者大会盛大开幕! 【MDCC 2015】微软开发体验与平台事业合作部大中华区DX部门总经理Srikanth Raju:物联之上云+端 英雄会晚宴,Top开发者共聚“华山之巅” 【MDCC 2015】产品与设计专场(上):百度研究院、印象笔记等专家齐聚,以实例探讨如何打造好产品 【MDCC 2015】产品与设计专场(下):网易云音乐、在行、三节课、去哪儿网、野兽骑行大咖的产品之路 请问如何在Jb6中使用中文字体,比如说宋体 HTTP 和 FTP 一个黑客问题? SQL 急的!谢谢大家帮忙!关于interbase与c++builder5的连接。 请教高手! 哪里有免费下载<thinking in c++>等图书的? 那位大侠懂在 VC 中用汇编??? 有会命名管道操作的高手吗 请教高手! 异步传送的问题? 如何杀死某个进程呢? 苦行僧与灌木丛来领分 如何把一个string转换成int delphi与Access ADO连接的详细设置? 请问能否用C#实现进程的完全隐藏? 创天中文VC6.0的问题????? 有谁知道类似WINDOWS98那个星空的屏保是如何实现的? 请各位大虾提供一些JAVA开发工具的下载网址 在Web Service中传递图像字段数据回客户端的问题!请教大侠! 买过深入浅出MFC的朋友请进~~~~~~ 会Java的究竟难不难找工作啊? 有什么方法可以让自己的机子有假的ip呢? root 是不是可以无限制看其他用户的文件? 高手看了吐血的问题(WinXP下无法执行.asp脚本) 这段代码错在那?? 我安装了一个winXp和win98,如何卸载win98阿,谢谢。 如何在picture控件里方便的画出坐标系,要完整的,要是一条一条画太麻烦了 在ASP中如何产生一个类似CLSID的,不会重复的值? flash5里如何制作填充渐变为任一色到透明色填充? 关于SESSION的问题 ado里怎么压缩access数据库 100分在线 谁发扬一下共享精神,借我看看背单词软件的源代码!!谢谢了!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!! 急啊,有谁有读写客户端数据库的控件,希诺在吗 己经开发了一个sql server2000与ASP的系统,怎么把数据库移到别的机子上去运行! 关于quake 如何把同一内容,通过一个按钮,提交到不同的地方(仅用javascript或html) 请问谁有bea的jdbc driver for mssql的license 哪位朋友知道钱能的《C++程序设计题解》下载,小弟先谢了! 请问listview控件中怎样修改选定的iterm及subiterm? 图书馆管理系统,急!急!急!(pb8+sql2000) select一有变动,就将select的值传给textfield.如何实现? 学VC是不是同时看几本书啊? jb6中无法输入中文!另外光标的位置老有偏差,不会是smart功能吧?!! 偶去吃点东西,各位吃饭了? 关于程序安装过程中的一些问题,有经验的请进>>>>>>>>>>>>>>>>>> 一位心仪已久的女孩子过生日,我该送什么礼物才好呢?(100分) 关于流的问题, 模糊的问提.句柄,地址,ID的区别? 水晶报表(4.5)设计器,怎么打开一个mdb就说没有p2*.dll? 关于视频捕获函数回调的处理!!300分 要观日全食有感的作文 要字数在500到600之间 一定要在21号前完成 垃圾已经成为一个严重的环境问题,假如你是李华,请你给某英语杂志社的编辑写一封信反映这个情况,说明垃圾的危害以及处理方法.词数100左右,信的开头和结尾部分已经给出,但不计入总次数. 描写母爱的片段300左右 餐桌上的谜底阅读答案 ①小时候,每晚入黑的时候,我总要瞅准时机,站在自家门口,闻对门邻居餐桌上飘出的肉香.那时我家半个月才吃一次肉,我实在是太谗了.  ②每次,闻着邻居家飘出的 小华读一本书第一天读全书的6/1第二天比第一天多读12页这时读的页数与剩下页数的比是7:5再读多少页可以读 描写一个片段、关于母亲、要写出深深的母爱、要有真情实感(300字以上) 日全食的感受作文必须要500或500以上. 有关生日聚会的.假设你是李华,请根据以下提示,给英语报社的编辑写一封信,谈谈自己的观点.急,赞成:位同学提供交际机会,利于增进同学间的友谊,学习之余可以放松心情.反对:容易造成时 求关于母爱的片段,100字,有事例. 还有2个月考托福该如何复习?现在是70多分的水平能上100吗. 李磊读一本书第一天读的页数比第二天多1/3第二天读的页数相当于全书页数的1/7第一天读的页数相当于全书页的几分之几? 求5年级作文母爱450字 有具体事例 邻居 李和,赵牧 点点读一本故事书,第一天读了30页,从第二天起,每天读的页数都比前一天多4页,最后一天读了70页,刚好读完.那么,这本书一共有多少页? 《沿着你走过的路》作文 600字左右,开头结尾点题 观看日全食的读后感 观看国庆阅兵有感作文370字370字 要篇末点题的600字作文!注意要篇末点题! 考托福要复习多久 word中,要想按作文稿纸打印,怎样弄? 我怎么才能长大点题作文500字 作文 观看日全食帮我找一找, 如何在word中添加作文稿纸样的格子啊 一次意外的惊喜作文写什么好 只有一周要考托福了,目标70分,怎么复习? 我想用word制作一张作文格稿纸, 一次意外的惊喜作文 求爱国主义征文800字 不要写太好的 写一般的就可以了.. 关于爱国的作文 600——800字的 快 今天就要 最好是现写的 不要太假了 意外的惊喜的作文今天啊!急! 求“我是90后”(一定要突出爱国)800~1300字征文,一定要突出爱国! 感人的母爱故事200字 意外的惊喜 作文 急 很短的感人母爱小故事,50字以下啊! 打一份稿件,单独打甲需要8小时,乙需要6小时,如果先由乙单独打3小时,剩下的由甲单独打还要几小时才能完成? 小胖这个月的消费:学习用品占总消费45% 其他占总消费5% 衣服花费60元 零食占总消费20%1、小胖这个月共花去多少元?2、买“学习用品”、“零食”各用去多少元钱?3、买衣服用钱数占总 母爱短故事要50-100字的,来点感人的! 打一份稿件,甲单独打要四小时完成,乙单独打要六小时完成,如果甲先打三小时,再由乙接着打,还要几小时才能完成? 胖胖这个月买衣服花了30%,学习用品花了45%,零食花了20%,其他花了5%,胖胖这个月共花去多少元? 母爱50字小故事 某小贩从水果批发市场以每千克2.5元的价格批进100千克橙子. 已知小虎这个月买衣服用了六十元.他这个月共花了多少元钱?小虎买学习用品,零食各用了多少元钱? 邻居餐桌上的谜底一文:作者经历了一件什么事后明白了邻居餐桌上的秘密?把这件事概括地写下来. 有关于母爱的一件事100字 一道数学题:某小贩从水果市场以每千克1.5元的价格批进100千克的橙子他以每千克2.5元的价格把其中较大的70千克的橙子出售,又以每千克1.2元的价格把中等的20千克橙子出售了,剩下的10千克 阅读短文:餐桌上的谜底 从那些方面可以看出“我”羡慕别人家餐桌上有鱼 文中的吃苦有什么含义?你对吃苦有什么看法? 作文:老师,我想对你说的开头 打一稿件,甲独做需5小时,乙独做需8小时,如甲先打2小时,乙再合打,打完稿件还要几小时? 有关《旧餐桌上的美好时光》的阅读题文章多处埋下伏笔,请找出两处,并作简要分析 《老师我想对你说》作文结尾快 末尾点题好作文,开头点题好作文.800字.4篇. 急用《餐桌上的谜底》的阅读短文及答案 中学作文 欣赏 我想写老师但是不会写开头结尾在线等到凌晨2点为止欣赏在哪里==你能看清问题么我要写的是 欣赏 不是专门写老师 心中有支快乐的歌 作文(关于乐于助人的,开头要有景物描写,开头还要点题) 作文:观《7.22日全食》有感字数在400-550之间就OK啦! 假如你叫李华,是一位高中生.请你用英语给报社写一封信,反映如下情况和你的想法:1.教室是学生学习的地方,需要安静2.有些学生把手机带进教室,在课堂上经常听见手机铃声3.有的学生还在 运动会作文开头景物描写和结尾的景物描写 邻居餐桌上的谜底阅读短文 小学五年级学苑新报期中卷纸上的,4月17日晚上6点以前回答,1.写我小时候很馋,运用了什么描写方法?2.“邻居的餐桌上为什么总有鱼和肉?”面对我的提问,妈妈为什 小学数学丽丽看一本书第一天看了30页,第二天看了全书的1/3,第二天看的页数比第一天多40%,这本书多少页? 关于母爱的片段300字
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘