说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

“夫妻档”初创公司百万美元打造实时Hadoop系统

HTML文档下载 WORD文档下载 PDF文档下载
初创公司HStreaming近期筹得1百万美元,准备打造一个实时的Hadoop系统。面对满世界充斥的Hadoop批处理系统,该消息无疑是一个福音。有意思的是,这家公司仅仅靠三名成员就成功运营了两年,而且其中还有一对夫妇,老婆Jana Uhlig是CEO,老公Volkmar Uhlig是CTO。

总部位于旧金山的初创公司 HStreaming,近期接受了它的第一笔创业投资——来自阿特拉斯风险投资公司的100万美元,这笔资金将用于打造一个实时的Hadoop系统。这家仅仅有三个人的公司却已经运营了两年左右。

如果问及任何Hadoop的有关人士, Hadoop如何超越目前的批量处理平台,那么“实时”无疑是其中最主要的一个答案。事实上,这也是下个月“ Structure: Data”的一个讨论主题,企业希望Hadoop成为一个 可操作的数据库以及具有 各种类型的OLAP引擎。

目前,HStreaming公司尝试为他们的Hadoop环境添加一个实时的组件,当数据提交到系统,在存储到磁盘之前就会进行数据的处理,就像开源的技术 Storm和 Kafka。当然这不是一项简单的工作,Uhlig认为现在的开源版本只是处在初级阶段(就像Storm,能够完美的对触及到的数据块进行分类),但是在分析能力上还有不足。

另一个方面,HStreaming,已经建立了一个完整的系统,该系统能够利用实时的引擎来处理视频、服务器、传感器以及其他机器上生成的数据流。而且它也完全兼容Hadoop作为一个归档和批量处理系统。Uhlig也表示,它同时添加了很多现有的BI工具用于数据的分析。


更奇妙的是,对于Hadoop的用户来说,不需要进行任何的改变。HStreaming能够通过利用相同的MapReduce算法和用户已经编写好的Pig 脚本进行流处理。在实际的操作过程中,Uhlig表示,用户几天之内就可以从一个仅仅只能进行批处理的系统转移到该实时系统。

她表示,截至目前为止,公司目前的收益主要来源于政府(尤其是视频分析,HStreaming可以实时处理数以千计的摄像头图像),电信运营商以及广告。公司计划未来把目标放在公共基础设备和金融服务领域。

HStreaming看起来绝对具备这些技术实力。Uhlig是公司的CEO,而公司的CTO是Volkmar Uhlig(她老公),首席软件架构师是Jan Stoess,他们两人都拥有计算机科学博士学位。Volkmar还是L4微内核的首席架构师,他已经建立了一个高频的交易系统,曾经在IBM的TJ Watson研究中心工作了五年,期间正是研究流处理技术。(文/王鹏,审校/仲浩)

原文链接: Hstreaming-ready-to-show-the-world-its-real-time-Hadoop

编程语言API,你最青睐哪一款? 推动新输入方式发展:英特尔为感知计算设1亿美元基金 AWS到底有多大?目前看来有158000台服务器 C语言实现树的动态查找 第五届中国云计算大会于北京隆重举行 改变企业移动化:新Google地图API支持用户定制 诺基亚旗舰手机EOS真机图曝光 配备“巨型”摄像头 走进豆瓣:豆瓣的技术架构与团队文化分享 加速Web开发的10款HTML5工具 微软式微?AMD、英特尔等开始疏远Windows 语音技术现状:四千万突破语音产业的技术壁垒? 万维网联盟W3C推荐Web性能API 微软郑子颖:Windows Azure如何支持开源系统和软件? EMC 叶成辉:软件定义数据中心实现统一、开放的管理 百度云主任架构师 侯震宇:云终端开启数字生活 中国工程院院士 倪光南:中国云计算在全世界份额远超3% 信息图:未来的企业移动培训应用与技术 “2013年度中国优秀开源项目征集”活动最后三天 为什么开发者倾向于使用杂乱无章的免费工具 EMC合作伙伴销售经理杜术清:实现云的三种途径 开发者想走向海外:你融入老外的圈子了吗? 前微软工程师:美国监控和直接访问服务器?这不太可能 代码、TDD速查表 如何选择前端架构:服务器端HTML vs. JS部件 vs.单页Web应用 世界上最高深的Android特洛伊病毒 招聘iOS开发,老板必问的5个问题 护航科技吴伟湘:IT离线安全体检服务将带来颠覆 百度王继平:移动互联网时代云平台思路 “第八届开源中国开源世界高峰论坛”火热开启 微软发布SQL Server 2014预览版,展示内存数据库技术 帮助软件开发者提高效率的10个小窍门 如何在word 中链接excel 表格后,不让它随源文件更改而变,但有时又要改变其中数据,怎么做 一个代理服务器问题 一个长久以来悬而未决的问题!! 谁有x.25协议包的格式? 在视图上建立快照日志碰到的问题? 求助:怎么用XSL制作网页菜单? 100分求助如何用DirectShow技术创建ASF格式的文件 数字的从大到小排列问题 300分求多线程解决哲学家进餐问题的源码 关于datalist 武汉的朋友帮忙啊! 严打! 我是新手,谁能告诉我如何新建类? 各位GGJJ,帮帮忙!如果每点击一次button建立一个线程,建立多个不同的线程,怎样实现? 请问那位windows98高手可以帮帮忙忙 各位GGJJ,帮帮忙!如果每点击一次button建立一个线程,建立多个不同的线程,怎样实现? 关于XML中NODE的类型的问题(特急!!!) 大家来帮小弟以下啊,!!! 如果我把一个TAdoQuery变量送到子函数中? 谁能告诉我Bjarne Stroustrup应该怎么读? 说了半天到底谁的是正确的?在100分。delete p 是删去p指针,还是它指到的内容,*p。还是删去什么?free(p) 呢? 大家好,我有一个问题问一下你们很急的。我在线等待!!! 我要去上海找工作(java) 在线提问:各位朋友帮忙啊!很急啊! 关于通过telnet修改2000的用户密码问题 请问有无现存的四舍五入函数?(in vc) 请指教有关bde和9i的问题 帮助!谢谢! 着急!!!!!!!!!!!!!!! 关于CHM文件的菜鸟问题 各位帮帮忙,我的程序重要用定时器,怎么做呀? 为什么没法看贴子? 如何在PB8。0上创建可执行文件,,,,,,(请详细一点) 关于TStrings怎样去取值? 如何编程更改IP? 谁来帮帮我!!!!! 生成密码字典,有什么好主意呢?说说好么? 有关c++中何时分配内存的问题 急救!! 请教:有关列表框 谁有win98操作培训讲义,给我发一份到—— win2000下如何对并口进行操作? 请教IBM Open Class Libraries的问题 小弟高分求“Linux 0.02版”的源代码! 理解csdn,以后再不发政治问题的贴了。我的名字也马上改。 什么是流???(笑话) 讨论.net平台上的软件开发,请教高手 书和方法! 斑竹不要删这个帖子,别人给我做了一个FLASH网站,我放50分给他的:) 为什么看不到 关于拷贝函数 关于高压钠灯和高压钠灯镇流器的问题我的一个客户要了一批70W的高压钠灯,但是他要的高压钠灯镇流器却是110W,如果这样搭配使用的话,是不是会缩短高压钠灯的使用寿命,而且会伤害镇流器 弹簧测力计的下端吊一球,示数为10N,球一半浸入水中,弹簧测力计示数为8N,这时小球所受浮力为2N,求体积.急若金属球全部浸没在水中,弹簧测力计的示数为多少? 1.一只空玻璃杯的质量为300克,装满水后的总质量为700克,若将200克的颗粒状的沙子缓慢的浸没到玻璃杯中,称得玻璃杯的总质量为820克,且玻璃杯的容积为400cm^3.求:沙子的密度.2.空心的金属球 高压钠灯上的镇流器的出现端电压是高压的吗?我是维修路灯的,我听我的同事讲用电笔去量会被触到,是真的吗?被他们说的我都不敢去修了,请懂的师傅多多指教.谢谢了 硅太阳能电池是否利用了原电池原理 如图所示,在光滑的水平板的中央有一光滑小孔,一根不可伸长的轻绳穿过小孔.绳的两端分别拴有一小球C如图所示,在光滑的水平板的中央有一光滑的小孔,一根不可伸长的轻绳穿过小孔.绳 高压钠灯电子镇流器的功率因素一般能达到多少? 蓄电池 串联 并联 容量串联电池容量不变,电压累加.例:一组两只12V*100AH的电池,串联后电压为24V,容量为100AH并联的电压保持不变.容量累加.例;一组两只12V100AH点电池,并联后电压仍为12V.容量按 如图所示,在固定光滑水平板上有一光滑小孔O,一根轻绳穿过小孔一端连接质量m=1kg的小球A,另一端连接质量M=4kg的物体B.当A球沿半径r=0.1m的圆周做匀速圆周运动时,要使物体B不离开地面,A球做圆 我有一个5.5V 110mh的太阳能电池板,要给5V 1000mh的手机充电,可以直接充吗?多长时间能充满?如果不能充,才能使用? 电池串联容量问题电池串联容量为什么不增加?电池容量的mah到底表示什么?电流A不是指若果在1s内通过导体横截面的电荷量是1C,导体中的电流就是1A吗?那1ah就是3600c的电荷了,那两个电池串联 一块长方体水泥板,长4分米,宽3分米,厚1分米,它的表面积是多少平方米? 要实现全面建设小康社会的目标,青少年应怎样做? 盒子上标注的电源条件:太阳能电池5v200mA 聚合物电池3.7V 1000mA DC12 能用手机万能冲充电吗/? 两块12V10AH蓄电池串联后容量是多少? 500克的香蕉是几根?如题 怎么求实际GDP增长率 关于电池串联后的容量 请查看帖子 http://tieba.baidu.com/f?kz=1137287613 因为图片上传不了 帖子里>点击图片>大窗口模式>可查看大图> 造成锂离子电池短路,断路,低压低容,内阻大,等不良情况的原因都有哪些? 木块质量为8kg,放在有摩擦的水平面上,在2N的水平拉力作用下,从静止开始做匀加速直线运动,经5s后位移为2.5m 周公解梦大全查询 梦见两条蛇有一条被我打死了是什么意思昨晚我梦见两条大蛇,一条是蓝花纹,一条是银花纹.刚开始两条蛇在围着一个圆圈嬉闹,我发现了正要转身离开,突然银花纹的蛇向我 锂电池内阻低了会怎么样 质量为3kg的物体,在12N水平拉力的作用下,在光滑的水平面上总静止开始运动,运动时间为5s求;5s内拉力做的功和5s内的平均功率! 动物的什么行为是先天性行为 一条香蕉大概有多少克?香蕉皮不计! 动物的先天性行为包括哪些行为?这些行为有哪些例子?请举例. 蓄电池并联和串联这是两个12伏20安的电瓶,我这样弄是并联还是串联? 是否还是12伏20安?电瓶前边我自己弄的插头能否充电? 用普通电动车充电器行么?要是不行 用什么充电? 锂离子电池鼓壳和高内阻什么原因 动物先天性行为的例子和动物学习性行为的例子有哪些? 蓄电池串联并联容量为什么同样电压同样电流的蓄电池串联与并联后的容量不同,串联与并联,负载的用电电流都是每个蓄电池的1/2,其结果为何不同 500克的香蕉是几根?拜托了各位 谢谢 电池是直流电还是交流电 物体m用线通过光滑的水平板上的小孔与砝码M相连,并且正在做匀速圆周运动,如果减小M的质量,则物体的线速度v的大小变化情况? 如何测锂电池内阻大小电池好像不同电量内阻大小不一样,要是一样为何充电的时候电压低的时候充电电流大,快到4.2V的时候电流比较小 英语翻译韩国带来的,英文看不懂牌子是 Baekhyangskin essencelift creammilk lotion还有一个小瓶上写的是 vase skin essence&lotion 电池串联 容量不变吗? 水平地面上质量为10Kg的物体,在40N的水平拉力作用下,由静止开始做匀加速直线运动,5s末将此力撤去,若动摩擦因数0.3,求总位移 太阳能电池为什么只能选用晶硅做材料呢? 请问哪位高手知道变压器是怎么把交流电转化为直流电的?我要原理,说对给悬赏. 从改革到现在中国GDP平均实际增长率和名义增长率分别是多少 英语翻译GARNIER skin naturals ultralift 1 peeling solution ultralift 2 creme corrector de rugas anti-wrinkle cream cuidado corrector arrugas SHISEIDO Bio-Performance Advanced Super Revitalizer N Super Revitaliseur Absolu N上边两个都是卡尼 2节电池并联容量会怎么样?串联后是不是容量不变? 水平拉力F=100N,10kg的物体在水平地面上,位移16m时,速度达16m/s,2.5s后撤消拉力,撤后,经11s的位移是多少? 硅太阳能电池原理为什莫 太阳能可以转化成电能 为什么要把交流电转变成直流电?现在的家电产品都是靠把220V电压交流电转换成直流电,在经过滤波、降压一系列工作使得家电产品正常工作!为什么不直接用交流电呢?本人是新人,暂没积分!没 国内生产总值指数和GDP增长率有什么区别吗? 非硅晶太阳能电池板的寿命,比起单硅晶的优缺点 急!从变压器的漏电保护器上引出的零线接地为什么不跳闸从变压器的漏电保护器上引出的零线接地为什么不跳闸.我们用的零线是无包皮铝线(3个火线是有包皮的铝线),现在线上有很多树枝 一木块以某一初速度在粗糙水平地面上做匀减速直线运动,最后停下来,若此木块在最初5S内通过的路程与最后5S内通过的路程之比11:5,此木块共运动多长时间? 直流电怎么变成交流电 地线和零线混接漏电保护器为什么会跳闸有时调有时不挑 一批香蕉 卖掉一百四十千克后 原来的香蕉的质量是剩下香蕉的五倍 香蕉原来有多少千克 直流电是怎样变成交流电? 接地工作原理以及漏电保护器的工作原理?为什么接地以后,当是通过金属外壳流入大地,而不是人体触碰了以后流入大地? 关于高压钠灯高压钠灯的灯管,镇流器,电子触发器各自的作用,各自坏了会出现什么情况?怎么其判断好坏?镇流器上标的175W意思只能接175W的灯泡吗?接70W会烧吗?70W镇流器接175W灯泡又会怎样? 怎样将交流电变成直流电(原理),及用到的配件? 为什么漏电保护器的工作零线不能重复接地,我现在没有明白为什么,是不是如果重复接地,就算漏电,漏电保护器跳了,火线和接地会形成回路,照样能有电 高压钠灯的工作电路系统 在高压钠灯的工作电路中除了灯泡外,还必须按内触发高压钠灯或外触发高压钠灯分别高压钠灯的工作电路系统 在高压钠灯的工作电路中除了灯泡外,还必须按内触发 一物体重为10N,当一半体积浸入水中时,弹簧测力计示数为8N.求浸入一半体积时,所受的浮力?求浸入一半体积时,所受的浮力?求物体体积?物体密度?全部浸入时物体所受的浮力 漏电保护器接电网时为什么系统零线不得重复接地?漏电保护器用于接地电网时,系统零线不得重复接地,避免产生误动作,这里说的系统零线是什么意思?为什么说不能重复接地?(我电工基础比
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘