说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

“夫妻档”初创公司百万美元打造实时Hadoop系统

HTML文档下载 WORD文档下载 PDF文档下载
初创公司HStreaming近期筹得1百万美元,准备打造一个实时的Hadoop系统。面对满世界充斥的Hadoop批处理系统,该消息无疑是一个福音。有意思的是,这家公司仅仅靠三名成员就成功运营了两年,而且其中还有一对夫妇,老婆Jana Uhlig是CEO,老公Volkmar Uhlig是CTO。

总部位于旧金山的初创公司 HStreaming,近期接受了它的第一笔创业投资——来自阿特拉斯风险投资公司的100万美元,这笔资金将用于打造一个实时的Hadoop系统。这家仅仅有三个人的公司却已经运营了两年左右。

如果问及任何Hadoop的有关人士, Hadoop如何超越目前的批量处理平台,那么“实时”无疑是其中最主要的一个答案。事实上,这也是下个月“ Structure: Data”的一个讨论主题,企业希望Hadoop成为一个 可操作的数据库以及具有 各种类型的OLAP引擎。

目前,HStreaming公司尝试为他们的Hadoop环境添加一个实时的组件,当数据提交到系统,在存储到磁盘之前就会进行数据的处理,就像开源的技术 Storm和 Kafka。当然这不是一项简单的工作,Uhlig认为现在的开源版本只是处在初级阶段(就像Storm,能够完美的对触及到的数据块进行分类),但是在分析能力上还有不足。

另一个方面,HStreaming,已经建立了一个完整的系统,该系统能够利用实时的引擎来处理视频、服务器、传感器以及其他机器上生成的数据流。而且它也完全兼容Hadoop作为一个归档和批量处理系统。Uhlig也表示,它同时添加了很多现有的BI工具用于数据的分析。


更奇妙的是,对于Hadoop的用户来说,不需要进行任何的改变。HStreaming能够通过利用相同的MapReduce算法和用户已经编写好的Pig 脚本进行流处理。在实际的操作过程中,Uhlig表示,用户几天之内就可以从一个仅仅只能进行批处理的系统转移到该实时系统。

她表示,截至目前为止,公司目前的收益主要来源于政府(尤其是视频分析,HStreaming可以实时处理数以千计的摄像头图像),电信运营商以及广告。公司计划未来把目标放在公共基础设备和金融服务领域。

HStreaming看起来绝对具备这些技术实力。Uhlig是公司的CEO,而公司的CTO是Volkmar Uhlig(她老公),首席软件架构师是Jan Stoess,他们两人都拥有计算机科学博士学位。Volkmar还是L4微内核的首席架构师,他已经建立了一个高频的交易系统,曾经在IBM的TJ Watson研究中心工作了五年,期间正是研究流处理技术。(文/王鹏,审校/仲浩)

原文链接: Hstreaming-ready-to-show-the-world-its-real-time-Hadoop

程序员界“香饽饽”、大神级别人物集体亮相——SDCC 2015编程语言专场议题曝光 【CTO沙龙】CDN在共享经济下的创新应用 深入浅出Fetch API 带你入解应用场景及适用问题 SDCC 2015讲师专访精彩集锦(二):途牛网、饿了么、快的等大牛都来了 百度、饿了么、美团专家齐聚SDCC2015,剖析前端开发核心技术 【SDCC讲师专访】百度乔刚:前端可视化难点分析及探索实践 【CTO讲堂】Growth Hacking背后,数据分析平台的架构调整 BAT、巨杉、南大、柏睿等齐聚SDCC—新一代数据库专场议题曝光! 《近匠》BeeCloud创始人黄君贤:三行代码集成支付的技术实现 【SDCC讲师专访】AdMaster技术副总裁卢亿雷:分布式数据库挑战与分析 tvOS真的代表了应用的未来吗? 使用Fetch API和ES6生成器构建异步API Android应用性能优化实践 华云数据:OpenStack的技术践行之路 【SDCC讲师专访】腾讯潘安群:腾讯云金融级数据库TDSQL分析 高颜值、高品质——安全技术论坛议题曝光! 移动应用开发者正饱受折磨 在Android平台上加载本地库的危险性 《近匠》程序员客栈,程序员背后的经纪人 【CTO讲堂】浅析工业级物联网项目的快速开发 云适配陈本峰:平台型企业级浏览器是未来办公移动化的核心 警报:XcodeGhost已扩散至第三方框架 我们眼中的应用另一端是什么? 【SDCC讲师专访】百度马如悦:不写代码的架构师不是好架构师 企业级应用避免臃肿混乱的6大黄金法则 SDCC 2015讲师专访精彩集锦:程序员界“香饽饽”、大神级人物都在! 从技术经理的角度算一算,如何可以多快好省的做个App(一) 【SDCC讲师专访】Java泛型作者Gilad Bracha:优秀的程序员应该未雨绸缪 【CTO讲堂】微服务架构在云端的应用 SDCC 2015创业项目路演火爆征集:寻找中国好项目 被遗忘的设计模式——详解Swift语言中的Null Object Pattern 输入光标的移动问题 菜鸟请教:请问如何打包成jar和jad文件? 关于Oracle存储大量二进制数据的问题, 有武汉的朋友么! 加我qq 7095682 看完《美丽人生》 帮帮我 一条菜虫问一个很菜的问题? 当数据库中没有图片时候该怎么办 关于时间掩码? 问题挺多的?请不吝赐教!都是小问题! Turbo c一定要安装在win98下吗 如何修改存储器参数,我的表会越来越大,原来用默认参数 看了下面的帖子后我自己的一点感受 我怎样定位我的涉及DataReader的表格? 如何制做半透明窗体,上面的控件也要能控制是否透明。 我要转行了,也许CODEING只是爱好,要把它做为职业,惨,,, 请问大家能不能推荐一本关于PHOTOSHOP 7.0 DREAMWEAVE MX 的书籍 一个简单的图像序列化存储 EDIT1.TEXT从用户接受的内容如何放进ARR 设计数据库时这样的情况应该如何处理 CFileFind::FindFile()的查找路径是怎么确定的? 很菜的问题 关于red hat9的小问题 不知是程序写多了还是失恋的缘故!我头上有一块地方不长头发了,医生说是斑秃!不知程序员里有斑秃的吗? 一IT美女的悲惨遭遇◎! .net2003的编译器如何为类添加消息映射啊???? JAVA的文本编辑,实现修改和排版 Jmai发送邮件问题? 高分求c++ test 我成功配置了一备用数据库,与主库连上了,可是主库坏了,我怎么打不开备用库啊? (SDK)怎样用SendMessage函数反选一个checkButton control(checked->unchecked)呢? 求救,为什么关于VB的帮助的事例看不到? 有拒绝爱情的吗?我还在念大学 做一个不是很大的网站,是用类好,还是用模块的好? 如何对本地机的共享文件夹设置密码 一个讨厌的QQ木马网站如何防治,最好有人能黑了它! 谁写得有能随机生成数字和字母的函数,借来用用? 快速排序的问题。求救 使用 CDatabase 读写 excel 文件的问题。 水园的朋友们,你们好!!!学校的网页!!! how can I show the correct word? 我的机出现了网络重名~~改IP也没用 庐山印象(ZT)----让我想起我小学写的作文哦!看了会起鸡皮疙瘩的! 请问谁有avphone控件3。0的破解版 学校的网页!!!! 500分! 求win2k下探测和阻塞ping的源码. 有关CASL的一个菜问题,请各位帮忙看一下 关于window.confirm的问题,简单问题解决后既散分 请问doc,pdf等文件在iframe中的显示 怎样给datagird的列定义标题? 怎样判断一个文件是否存在呀? 烧伤病人如何输血? 16MM的滴灌带需要多大的水压力才能保证前后出水一样? 发展喷灌滴灌技术有利于解决什么问题 拜神的香有毒吗?可不可以用来驱蚊? 电热驱蚊片有毒吗? 驱蚊液有毒?直接喷在皮肤上行吗?另外有没有腐蚀性?我用的是六神的 驱蚊手环有毒吗 光明中学物理课外小组到黄河边上调查黄河水黄的原因,发现黄河水含沙量很高,他们取了10L黄河水,用台称称得质量为10.18kg,请帮他们计算出黄河水含沙的质量的百分比.p沙=20.×10^3kg/m^3 要讲解 等腰梯形ABCD中,AD‖BC,周长为20CM,AD=AB=DC=2分之一BC,求1角BAC,角B度数.2,求梯形的对角线长.3,求梯的面积 有一个大面积烧伤的人,烧伤面有大量体液渗出,需要输血,在输血时最好输?a血浆 b.全血c.浓缩的血小板悬液 d.浓缩的红细胞悬液(需要解释) 用个词来形容消防这个职业,用一句话来描述消防. \"大黄鸭\"中国之旅进入倒计时 成奥斯卡影后赞与查尔斯王子跳舞比“亲热世界最高大的狗在美国去世 身高可比肩日媒调查:出轨女性的异常行为表现冰岛蝉联全球男女最平等国家 中国再排日本一女子被控在网吧卫生间生下男婴后潘晓婷赢得第十个世界冠军:十全十美太上海实施油品升级全面完成沪五汽油置换中年男子躲商场男厕偷拍男人 事败后迅曼城出线在望图雷遭球迷种族歧视 俱乐范佩西或因与主帅不和被雪藏 赛前对话Vive la 小狮王汉兰达斩获IHSS“顶级安全+”不能抱着“贱命一条”的态度混市场吴建豪主讲婚前禁欲, 一套一套汽车神秘访客调查结果出炉好奇宝宝双子很擅长捉弄人你能想象一只硬朗的熊猫是什么样子吗?安以轩代言, 温良妹子看过来客场赢不了浦项 鲁能回主场能取胜么中山刮出“争分夺秒”5万再赢千元加奖汽车之家 “4·15马上有车购车节”网游之圆满升级攻略初汉我的美女极品保镖超级鉴定师魔兽之无尽的战斗官黑超凡入圣重生之家国天下重生之兽叱全球网游之横行大唐地下城魔王养成日志贵州旅游九宫山旅游靖港旅游千山旅游乐亭旅游太白山旅游梵净山旅游延吉旅游白帝城旅游狼牙山旅游哈素海旅游
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘