说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

“夫妻档”初创公司百万美元打造实时Hadoop系统

HTML文档下载 WORD文档下载 PDF文档下载
初创公司HStreaming近期筹得1百万美元,准备打造一个实时的Hadoop系统。面对满世界充斥的Hadoop批处理系统,该消息无疑是一个福音。有意思的是,这家公司仅仅靠三名成员就成功运营了两年,而且其中还有一对夫妇,老婆Jana Uhlig是CEO,老公Volkmar Uhlig是CTO。

总部位于旧金山的初创公司 HStreaming,近期接受了它的第一笔创业投资——来自阿特拉斯风险投资公司的100万美元,这笔资金将用于打造一个实时的Hadoop系统。这家仅仅有三个人的公司却已经运营了两年左右。

如果问及任何Hadoop的有关人士, Hadoop如何超越目前的批量处理平台,那么“实时”无疑是其中最主要的一个答案。事实上,这也是下个月“ Structure: Data”的一个讨论主题,企业希望Hadoop成为一个 可操作的数据库以及具有 各种类型的OLAP引擎。

目前,HStreaming公司尝试为他们的Hadoop环境添加一个实时的组件,当数据提交到系统,在存储到磁盘之前就会进行数据的处理,就像开源的技术 Storm和 Kafka。当然这不是一项简单的工作,Uhlig认为现在的开源版本只是处在初级阶段(就像Storm,能够完美的对触及到的数据块进行分类),但是在分析能力上还有不足。

另一个方面,HStreaming,已经建立了一个完整的系统,该系统能够利用实时的引擎来处理视频、服务器、传感器以及其他机器上生成的数据流。而且它也完全兼容Hadoop作为一个归档和批量处理系统。Uhlig也表示,它同时添加了很多现有的BI工具用于数据的分析。


更奇妙的是,对于Hadoop的用户来说,不需要进行任何的改变。HStreaming能够通过利用相同的MapReduce算法和用户已经编写好的Pig 脚本进行流处理。在实际的操作过程中,Uhlig表示,用户几天之内就可以从一个仅仅只能进行批处理的系统转移到该实时系统。

她表示,截至目前为止,公司目前的收益主要来源于政府(尤其是视频分析,HStreaming可以实时处理数以千计的摄像头图像),电信运营商以及广告。公司计划未来把目标放在公共基础设备和金融服务领域。

HStreaming看起来绝对具备这些技术实力。Uhlig是公司的CEO,而公司的CTO是Volkmar Uhlig(她老公),首席软件架构师是Jan Stoess,他们两人都拥有计算机科学博士学位。Volkmar还是L4微内核的首席架构师,他已经建立了一个高频的交易系统,曾经在IBM的TJ Watson研究中心工作了五年,期间正是研究流处理技术。(文/王鹏,审校/仲浩)

原文链接: Hstreaming-ready-to-show-the-world-its-real-time-Hadoop

Xcode 6 Beta 7发布:语法定、内库改,Swift何时完善? 干货来袭:由22个联邦机构分享的6482个数据集 Phablet出货量今年将超移动PC,明年再超平板 如何提高Web服务端并发效率的异步编程技术? 改改改!让应用通过审核出人头地的10个方法 正益无线CEO王国春:AppCan如何获得50万开发者青睐 在收购Xtreme Labs之后,Pivotal推出PaaS移动服务 .NET开发者必备的11款免费工具 .NET开发不可错过的25款高效工具 Docker最佳实践!尽在2014 Container技术大会 pflua:用Lua编写的高性能网络包过滤工具箱 掌上明珠张磊:如何设计手游付费体系 云游科技何千军:游戏开发和后端逻辑经验 《近匠》Highway1:孵化,不只是简单的帮助 嘉宾来了 MDCC 2014首批演讲嘉宾名单公布 前雅虎CTO:Hadoop扩展过程中的7个危险信号 【云先锋】星环TDH:性能大幅领先于开源Hadoop2的技术架构赏析 一周消息树:我想创业,但不懂技术怎么办? GitHub迁移数据库,借助MySQL大行其道! 实例亲授:教你如何创建AR应用 iOS七年,苹果都为开发者准备了哪些工具? TIOBE 2014年9月编程语言排行榜:Java、C++跌至历史最低点 如何甄别具有软实力的IT应聘者? 避免关注底层硬件,Nvidia将机器学习与GPU绑定 盘点MIT Demo Day上4个最有前途的创业点子 IDF 2014第一天纵览:智能设备唱主角 时尚化才是可穿戴的未来 ASP.NET之父Scott Guthrie:借技术之力铺平未来之路 两年测试,NSA或将让其数据中心洗上油浴 【云先锋】数云:另类淘宝创业,瞄准背后百万卖家的数据挖掘 Xcode 6 GM、6.1齐出,Swift终迎1.0版! 我眼中的Devops——倍道而进! 如何用pb65实现拨号功能,最好有例程,多谢!!!! 服务器端脚本和客户端脚本,优先使用谁?前辈指教 如何删去页眉的那条横线? 网络编程的迷惘 如何做好项目经理?要具备哪些条件?注意什么?根据人气我会重复开贴 关于多台电脑的串口通信,请高手执教!!!!!!不够可以在加!!!! 请问如何实现两个select的动态对应。 如何将文本框中的文字垂直居中显示? 诚聘vb.net软件开发人员 急:怎么查看oracle 的encoding参数? 关于多台电脑的串口通信,请高手执教!!!!!!不够可以在加!!!! 各位大侠,我想用VB实现多线程,如何做?小弟在线急等,QQ:19671554 关于多台电脑的串口通信,请高手执教!!!!!!不够可以在加!!!! 各位大侠,我想用VB实现多线程,如何做?小弟在线急等,QQ:19671554 SimpleObjectBroker问题 我的报表需要打印"接下页" 猜字游戏 小弟载了一个教程,里面的文件扩展名是pdf的,请问要用什么软件打开啊? 求教一个简单的问题。关于打包。 在线等。在线等 关于函数 ASP.NET中操作EXCEL,为何添加操作可象操作ACCESS一样没问题,而删除和更改操作却出错?100*n分for your answer 求助:如何调出linux下kppp源代码? www.clpclub.com是不是不能上了? 如何制作登陆窗口? 关于中大型网站如何应用软件工程的问题 求救高手,如何使双硬盘同步写 请问怎样在用户点击(s)后将用户点击的软件自动安装到用户(c)的机器上 请问如何用网站提供的搜索引擎,知道查找关键字,我用的是WebBrowser1,100分呀 tomacat的配置问题?急 学过严蔚敏的〈数据结构(C语言版)〉的请进! 开发过nokia上运行程序的朋友,请进来,本人遇到一个非常麻烦的问题,欢迎各位赐教. 如何从字符串中提取单词? 谁知道那里有longhorn下载??? 100分请教实现播放列表的思路? 有关图形化公交车线路的问题!! 关于网站软件工程的问题 我的sqlserver 2000 在安装的时竟然说什么不支持??? 免费ASP空间申请 有关用Firework作网页模板的问题-急! 大虾请指点~~!!~~ 如何固定游戏中的分辨率? 今天见到了蓝心MM,估计她是CSDN有史以来最PL的MM。 也来贴一篇!!!送给大学毕业几年的哥们!(转) 急:关于weblogic的控制台 ? 请问各位:哪里有好的javascript的教程? 小问题 请问在哪里可以找到监控局域网的网络流量的工具,不够再加? 免费ASP空间申请 白羊座的进来领分,水园里白羊座好像很少。。。。 ie无法编译jsp? 300分!求《程序员增值合订本》上册中的"完全掌握TCppWebBrowser控件"内容! 是不是只在离子化合物中化合价的本质才是组成化合物的原子得失电子的数目呢 造五个拟人句! 就是单独的溴的化学式 为什么溴不能和醛基加成而氢气可以? 配合物[Fe(NH3)3(H2O)F2]Cl 的名称是什么,求答案就行, Br酸(化学式)Br酸的化学式 离子的化合价是负的或正的.原子或一般化合物的都是为0的?.还是说加起来为零 Cl溶于H2O的离子方程式? 溴代丙酸化学式 To pass the driving test,Alice had a busy month__________driving the car.用practising还是 to practise为什么 M为第四周期元素,二价的M离子能同Cl- H2O NH3 形成MCl4 2-- ,M(H2O)6 2+,M(NH3)6 2+ 分别含有3,3,1个单M为第四周期元素,二价的M离子能同Cl- H2O NH3 形成MCl4 2-- ,M(H2O)6 2+,M(NH3)6 2+ 分别含有3,3,1个单电子,请回 氯化溴的化学式是什么? 离子反应条件和酸碱盐的一样?是不是只有酸碱盐反应才有离子反应 《詹天佑》中的第三段的排比句说明了什么 C和S组成的化合物是什么啊 是否含S的化合物大多呈酸性? N5所带电荷是什么 求(2x-1)/(x+1)≤2中x的取值范围. 语文六下詹天佑第四段用——画出排比句,读一读,你体会到了什么詹天佑不怕困难,也不怕嘲笑,毅然接受了任务,马上开始勘测线路.哪里要开山,哪里要架桥,哪里要把陡坡铲平,哪里要把弯度改 ()()h()()l.含有t的英文单词4个字母,t在第3个位置 在x+y=2中,1 】詹天佑第四自然段的排比句.马上就要.第四自然段排比句,并写出体会到了什么.急速】 求英语单词含有l,y,t,p,r,g的词组,顺序不限,只要一个词组中含有就行,是:L,Y,T,P,R,G 在等式a^x=1/2中,若x 小学6年级语文第五课詹天佑第四段的排比句是哪个. 已知Na2CO3的水溶液呈碱性,在一烧杯中盛21.4gNa2CO3和NaCL组成的固体混合物.向其中逐渐加溶质质量分数为百分之十的稀盐酸.放出气体的总质量与所滴入稀盐酸的质量关系曲线如图所示,请根据题 函数y=x-1分之2中的x取值范围 在直流电动机模型安装实验中,下列现象可能会发生的事( ) A:将电源和磁铁的两极同时对调,线圈转动方向不改变B:将电源和磁铁的两极同时对调,线圈会反方向转动.C:将电源两极对调线 A.B.C三种物质各15g,它们化合时只能生成新物质D30g.若增加A10g,反应物中只余C.根据上述条件,回答下列问题:(1)第一次反应结束后,B剩余——g.(2)反应中,A.B.C的质量比是——.(3)第二次反应结 化肥的污染有哪些? 含Q C的英文单词 比较唯美的 请把这道题目所涉及到的知识点以及解题思路大概的列举出来! 400米的水井能被污染吗 将连接电源两级的导线对调,同时把磁铁的两极对调的现象是什么 建筑空间可分为线性空间结构,核心型空间结构,分子型空间结构和网格型空间机构, 放热的反应加热会怎样如果是可逆反应,正反应放热,加热后正逆速率都增但逆速率增得多,所以反应逆向进行.但如果不是可逆反应,反应放热,加热后反应速率会如何变化 已知A,B,C,D,E是短周期中的5中元素,它们的原子序数依次增大.A在周期表中原子半径最小,B原子的最外层电子数是内层电子数的2倍,D元素与A元素同主族,E元素与C元素同主族,E的单质为黄色晶体,易 周期表前20号元素中有A、B、C、D、E5种元素.已知它们都不是稀有气体元素,且原子半径依次减小,其中A和E同族,A和C、B与E原子的电子层数都相差2,A、B原子的最外层电子数之比为1:4.这五种元素 8.求正解,谢 已知A,B,C,D,E是短周期中的5中元素,它们的原子序数依次增大.A在周期表中原子半径最小,B原子的最外层电子数是内层电子数的2倍,D元素与A元素同主族,E元素与C元素同主族,E的单质为黄色晶体,易 嗯、如题、L开头的英文单词、中间要有S、F或Y的要有中文意思哈~ 请问一些酸碱和某些物质的反应问题,以及现象,还有理由.在以下溶液中加大理石碎片 写出反映现象 比较反应快慢 以及理由0.01M HCL0.1 M HCL0.5M HCL0.5M H2SO40.5M CH3COOH0.5M HNO3在以下溶液中加镁带 写 语文练习册上有一道题是 张雪衫写的中国 让仿写 “在我心目中,你是.你是.你是.” 某温度下,纯水中的c(H+)=2×10—7mol/L则此时c(OH-)=___ __;若温度不变,滴入稀硫酸使c(H+)=5×10—6mol/L,则c(OH-)=________,由水电离出c(H+)为 ;若温度不变,滴入氯化铵溶液使溶液中c(H+)=5×10—6mol/L,则溶液 写十五个拟人句 smt 回流焊曲线图怎么看求解?图中的TCs 、最高上升斜率、最高下降斜率以及该单元的数值和百分比分别代表什么?p.w. 带l和f的英文单词有哪些 加热反应时吸热还是放热?权威点的答案啊. smt温度曲线现使用长沙create的回流焊炉 在使用过程中 温度曲线设定不合理造成 烧板 但是换了一块板后 不知是由于板的材质还是改变焊接时间的问题 没有烧损痕迹 但是换了块新板 依然有 有没有哪个单词里包含F L Y这三个字母的?除了fly flying以外 比如说**f***l*y 下图是一些常见物质之间的转化关系,A为红色金属,F为不溶于酸的白色沉淀,B,C是两种强酸,B,G为同一种物质求A~ T,E,L,T,H,F,W 这几个英母可以组成什么单词是试卷印错了,还是,我自己找不到阿 后天就开学了,我还剩一整本练习册和书上五页练习题,还有希望吗? 溶于酸的沉淀溶只溶于强酸吗? 英语关于几楼的单词,它是t ( ) ( ) l ( ) ( ) ( ) ( )这是什么单词?关于第几层楼或者第几名!备注:是剑桥英语2下随课练第16页的第7题。 两地相距15千米,甲.乙二人从两地同时出发,相向而行,经过3/5小时后相遇.甲每小时行4千米,乙每小时行多少千米?最好是有算式,再加上自己对这道题的见解, 某溶液由水电离出的c(OH-)=10^-14mol/L,此溶液可以是中性吗? [Co(NH3)(H2O)CL]CL的名称,配位体数,中心离子,配位数,和配位原子? 水调歌头 练习册上的一道题(1) 词的上半部分写作者在"天上" "人间"的徘徊,矛盾,下半部分写 甚么甚么 ,以 积极乐观的旷达情怀结尾.(2) 说说你对"但愿人长久,千里共婵娟"一句的理解. 厦门大学大一大二挂科,但大三成绩很好,可以申请奖学金吗? [Crcl2(h2o)4]cl的中心离子,配体,配位数,配离子电荷数是多少?外界平衡离子是?名称是? 希望有英语教学经验的老师能推荐本练习册本人已经工作,以前的基础就不好现在自学新概念记忆力没以前好,看完书过眼就忘.除了音标 其它基本是从头学起,好多语法和短语也都不记得了,现 韩国要求日本删除主张独岛主权视频中东难民潮考验世界智慧巴沙尔下台又能怎么样?沙特拒绝“非常”背后有小心思 安理会伊朗宣布对死刑中奇迹生还的囚犯免再行菲总统再次称菲政府不会就人质事件致歉韩亚空难最后一名留医伤者出院 曾经历民调称八成俄罗斯人认为俄腐败程度高美国“监控门”又酿新风波 德法意等国奥巴马与默克尔通电话亲口否认窃听其手中国接受联合国人权审查 美应先审视自“神医”胡万林再涉命案 腐而不朽屡屡“神医”胡万林出狱操旧业致一名大学生杭文一路超市门口救护车上一位姑娘产下杭州大伯清晨出门脑中风 急忙送医却找美容骗局有新招 银筷子夹虫子骗了两个崔永元赴美国调查“转基因”食品安全政伦敦唐人街罢市 抗议英警方“歧视性执奥巴马与默克尔通电话 否认情报机构窃辛格访华获“不寻常待遇” 两国握手世潘基文称叙化武核销进展顺利意媒:中超假球数据来自博彩监控 足协社区开药,到位了吗?日本食品陷信任危机拼土豪抢裸钻 骆驼双十一送Iphon巴以互指责 克里忙撮合P2P信贷理财模式获市场追捧《汉字听写大会》冠亚军颠倒土豪金向京查小欣探讨艺术生活备战湖人魔兽放话虐“队友”:要打出统钢筋凸起 绊倒路人戈尔荣膺卓越职场 研究所“全球最佳跨一字马隔离带穆沙拉夫获释莫斯科纪念红场阅兵72周年植入广告没付费 拍摄方起诉追款汉庭员工冒名签单私自结账纳豆锁定年终第一五车车轮 一夜被盗原铁道部贪腐案贪官妻子、情妇将陆续受
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘