说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

【BDTC讲师】Tachyon作者:大数据存储以及处理框架经验分享

HTML文档下载 WORD文档下载 PDF文档下载
12月5-6日召开的2013中国大数据技术大会,两位来自UC Berkeley计算机系AMPLab的讲师将会带来分享,其中Tachyon系统和Spark Streaming系统作者李浩源将会探讨有关大数据存储以及处理框架方面的研发成果和心得。

两位来自UC Berkeley计算机系AMPLab的讲师——UC Berkeley计算机教授、AMPLab共同创始人Ion Stoica和Tachyon系统及Spark Streaming系统作者李浩源,将会在12月5-6日召开的2013中国大数据技术大会上带来分享。大会前期,我们陆续采访了AMPLab的几位核心成员,包括Ion Stoica、辛湜和李浩源,关于李浩源的采访实录如下:

CSDN:首先请介绍一下您自己

李浩源:我是UC Berkeley计算机系AMPLab的博士生,专注于计算机系统和大数据的研究,师从Dr. Scott Shenker和Dr. Ion Stoica两位教授。AMPLab正在开发一个大数据的处理平台叫做Berkeley Data Analytics Stack (BDAS),我是其中Tachyon系统和Spark Streaming系统的作者,也是Apache Spark系统的founding committer。

在伯克利开始博士研究之前,曾在Google和Conviva从事大数据处理挖掘的研发工作,所研发的PFP大数据挖掘算法已被Apache Mahout采用。我分别在北京大学和康奈尔(Cornell)大学获得计算机专业学士学位和硕士学位。

CSDN:请简要介绍下Tachyon项目以及Tachyon适用的应用场景

李浩源:Tachyon是一个高效的分布式存储系统。目前发布的为整体项目的部分功能(缓存部分),此部分功能在一次写、多次读的环境下为系统的性能带来最大的提升。

CSDN:Tachyon目前的发展状况(比如实际应用的商业项目和贡献者等方面)是怎样的?未来的研究方向是什么?是否会考虑像Spark一样商业化?

李浩源:Tachyon是今天4月份开源的,到11月为止已有近20位贡献者,分别来自10家不同机构,其中包括Yahoo、Intel、Adobe等。对于未来的研究方向,一个比较重要的点是更好的与生态系统相结合。AMPLab的Mesos和Spark都已经商业化了,这是一种趋势,但Tachyon目前是否商业化还有诸多因素需要考虑。

CSDN:您目前主要从事哪方面的研究?

李浩源:专业方向为计算机系统和大数据的研究,具体专注于BDAS平台的建设,特别是Tachyon及其相关系统的研发与算法研究。

CSDN:您曾经获得过很多荣誉,尤其是在刚刚过去的SOSP2013上,您参与的两个项目都入选了,您认为自己拥有哪些特质使您在计算机界获得这么多荣誉?对于后辈您有哪些建议?

李浩源:这都是团队的成果,对我来说更是一种鼓励。也谈不上对后辈的建议,可以分享一点从同事和老师们那儿学到的东西,就是明确目标、刻苦工作。

CSDN:能否简要介绍下本次大数据技术大会上,您将给听众带来哪些分享?

李浩源:本次大会上将和大家探讨一些有关大数据存储以及处理框架方面的研发成果和心得。

欢迎关注 @CSDN云计算微博,了解更多云信息。 

第七届中国大数据技术大会(Big Data Technology Conference 2013,BDTC 2013)将于2013年12月5日-6日在北京世纪金源大酒店召开。Spark核心设计者、Databricks创始人兼CEO Ion Stoica,Apache HBase项目管理委员会主席Michael Stack、百度大数据首席架构师林仕鼎、华为公司诺亚方舟实验室主任杨强、Apache Tez commiter Bikas Saha大数据技术专家领衔,来自腾讯、阿里巴巴、Hortonworks、LinkedIn、小米、Intel等50余位工程师带来近60场干货分享,更有《中国智能交通与大数据技术峰会》专场感受智能交通如何改变生活。 

阿里将推AMOS智能机 斥资10亿鼓励开发App AMPLab开发重构的Hadoop版本Tachyon:吞吐量要比HDFS高300多倍 一名理科生的创业路 十大界面原型与布局工具 Google产品经理Kenneth Norton:如何与工程师共事 如何创建自适应系统来增强用户体验 Jolla下月展示首款Sailfish手机 将重点发展中国区 海外1GB大容量游戏,国内渠道如何分发? 真正的能源大户是WiFi网络 数据中心只是“伪军” CloudFlare创始人传奇人生:7岁编程,法学博士,获哈佛商学院最高荣誉 2013云计算深入实践 jQuery 2.0发布 不再支持IE 6/7/8 Google再发力,更新Dart M4! 【多图】鼠标、光驱等13个即将消失的PC技术 直击OpenStack美国峰会:分享五大经验收获 Project Savanna:让Hadoop运行在OpenStack之上 看Go桌面技术副总,如何解读Facebook Home 增长最快的游戏公司Supercell 你学得会? 移动周报:为什么我们出不了IT神童? AWS、VMware和OpenStack谁是赢家? 消息称苹果正在寻找新任CEO取代库克 请别人云亦云 PC仍然重要且活得很好 比预想晚几年!IBM x86服务器或终将卖给联想 App推广的节操呢? iMessage垃圾短信产业链暗访 Apkudo CEO访谈:免费为Android开发者提供测试 Web API核查表:设计、测试、发布API时需思考的43件事 开源Android构建工具Buck 速度超Ant两倍 从史上八大MySQL事故中学到的经验 OpenStack Heat向应用市场更近一步 初创公司Ionic Security:云安全必须与时俱进 谷歌董事长:一年后消费者才能用上Goolge Glass 急急急,我好急,有没有办法先把记录集处理一下在绑顶到datagrid 请问为什么这一段XML代码运行不了???为什么???帮帮忙??多谢!! 请教有关手机方面的问题 连编好的可执行文件不能用 帮帮忙啊 哪儿有免费的jsp空间并且有数据库支持的?谢谢 客户机的WinSock控件采用TCP协议,如何使用预设的固定的端口? sos!Help me! 有谁知道怎样用Capwnd控件(用于捕获视频的控件)?? 请帮我看看,谢了 请问如何控制imagecombo控件的下拉高度呢? 能告诉我什么是回调函数吗?注册的系统回调函数中引入的参数能在别的地方得到吗? 在RicheEdit里的字体颜色都是黑色,能变成其他颜色吗? 请问在视中如何使主框架的某个菜单项变为不可用(代码如下,错在什么地方,如何改?)! 请教VFP中GRID的显示和取值问题 请教一些有关用ROSE进行UML设计的问题 高薪寻找合作者:医院信息管理系统 求救!!!!为什么必须多按reset键才可以启动?? 請教: WideString如何存入數據庫image字段? 如何判断一个字符串是数字串?要源码(无内容) 登陆某些网站后浏览器的默认主页不能更改,怎么办???谢谢 请教简单的API函数的问题 ! 简单问题,怎么样得到下拉列表的选项?????最好有简单的原码 主  题:高薪寻找合作者:医院信息管理系统 上海机械电脑有限公司??? 小弟刚刚开始自学pb有好多问题想请教各位老大 HW待遇到底咋样??? 谁在CB里面用过游标? 关于网络协议软件的开发问题,编译成什么形式? 我是个新手,请教Linux下面C编程,该怎么入手,该看些什么样的书?来则有分!!!! 高分求源代码!又谁做过票据打印的软件!帮忙给点源代码! 如何执行insert 语句效率最高 数据窗口相同记录的判断??? 关于网络协议问题 求救,怎么判断试用版的试用天数? 关于IE的问题,help~~~ 请各位老大帮忙啊 请问如何串行化一个COLORREF变量,急---谢谢! 急,急,急,数据库更新的问题 win98下的DrawText api函数与Win200Server下的有什么不用呢? 评选水园“十大杰出青年”,请大家踊跃推荐(自荐)参评! 这个(Oracle)存储过程错在那?很简单,各位大虾看一下,一定给分!!谢谢啦!!!!! 好久不来了,有个问题请高手指点! 怎样设置SQL2000的某一字段为自动类型 熟悉GDI函数的朋友请进 如何屏蔽源代码 哪位大侠行行好,把我的密码屏蔽掉,只要不需输密码,分数一定不会少。 如何用PB制作DLL,请各位大师请教! 如何得到地址薄群組的具体用戶列表? 这里有谁用过mame编译器mingw,能否说说它的用法。先谢~~,up有分 铜铝合金散热器好还是铝合金那个好? 生物学与人类的关系及生物学的发展对社会的影响相关论文.不要太复杂,我是初一的,质量好的追加全部积分~! 生活离不开阳光? 怎样理解“靠山吃山,靠水吃水”的含义?举例说明.(提示:人类的生活离不开动物、植物)科学上面的快 人类生活离不开生物的多样性,举例说明人类与生物的关系.要求动,植物各举例三个. 如何加快环氧树脂AB胶的固化时间?固化时间如何控制? 铝合金拉丝、铝合金面板,铝合金散热器哪家的比较好? 三坐标测量位置度应注意什么?轮廓度应怎么踩点? 环氧树脂胶为何出现假固化现象? 简要介绍下人类历史上三次能源革命 是能源革命 能源 人类的衣食住行离不开化学,请你举出相关的例子.衣:食:住:行: 用三坐标如何测量附图的面轮廓度. 迄今为止人类历史已经历了几次信息技术革命急用!越快越好,谢谢 徕卡测绘系统 待遇 轮廓度测量方法? 人类历史上经历了什么信息革命 测量平面坐标系统有哪些 水晶AB胶和水晶滴胶区别在哪里? 人类历史经历了哪五次信息革命 胶水和油漆请问哪种胶水或油漆可以把多张牛皮纸,像制作复合板那样,一层层地粘贴起来,使之具有一定的硬(刚)度,变成纸合板.大概需要粘两个平方米. 三坐标测量轮廓度时公差怎么分?如轮廓度为0.064mm,是±0.032mm这样分吗? 水准仪测量 不锈钢和油漆用什么胶水 水晶滴胶可不可以用AB胶代替没有水晶滴胶,能不能用AB胶代替 电子水准仪如何测量四等水准关键是条码水准尺,没黑红面.一般用什么样表格填写 生物的确太重要了,人们的生活处处离不开生物.请距离说明生物对人类的衣,食,住,行的重要性各举三个例是具体不是距离啊 生物生存离不开周围的() 棉花机可以弹羊毛衫和废旧衣服不? 图纸标注面轮廓度0.5,是否就是该平面高点和低点的差值是0.5mm? 生物生存离不开周围的什么?a.动物,植物   b.微生物   c.环境  d.气候条件 羊毛衫扎人怎么办?怎么处理羊毛衫扎人? 线轮廓度有无基准的区别 生物生存离不开什么要从(动植物) (环境) (气候条件).中选一个. 纽扣常用高分子材料 平面度和变形度的区别比如一个胶件.需要测量这个胶件的变形度,能不能测量平面度就行了? 生物的生活离不开什么和什么 棉花是高分子化合物么 pvc粘pvc用什么胶水效果好?能够手工做,效果需刷成一条线不能有毛边异位等现象,只要能够平滑好刷粘力要达标! 机械设计中同时标注平行度和平面度时,平行度应该大于平面度吗 植物与人类的衣食住行必须和植物有关 用来粘PVC胶件的慢干胶水有那些? 平面度标注的意思 水平仪测量的计算水平仪精度0.02/1000,桥板长度200mm,测量对象为1000mm,共测量5次,每次读数0、+3、+1、+3、-2求工件直线度误差五个点的高度已经明白了,但是直线度0.008mm是如何确定的呢? 举出4个以上的具体事例谈一谈人类的生存为什么离不开生物 做磁路用的AB胶用哪种化学药水能够清洗 水准仪可以测量些什么有两个空 请各举两列说明,人类的衣\食\住\行都离不开生物.衣:食:住:行:p35 手上的环氧树脂AB胶水用什么洗最好?除了酒精和丙酮,还有没有可以用来清洗的?最好方便点的 且不伤手的.【弟弟每天都要接触环氧胶水 每天都要清洗 有没有什么护手霜好一点】 棉花,蚕丝主要成分分别是什么 道路测量计算公式? 螺旋测微器如何测量?如题:如何用螺旋测微器测量?如何读数? 如何用水准仪测量长度,请指教, 求环宽的面计公式 千分尺测量问题请问我如果要测试的是大约一张纸那么薄的金属片..24张金属片..最最薄的可能只有复写纸那么薄,厚的也不过一毫米..千分尺能搞定吗?金属片厚度都不同.不是叠放.是单独测量. 为什么说人类离不开植物的光合作用? 如何测量液晶显示器尺寸,详细的计算公式是怎么写的! 举例说明我们的生活离不开光? 笔记本散热器是亚克力的好还是铝合金材质的好!我的笔记本太烫想买个散热器,但不知道那种材质的用了好,麻烦懂的帮帮忙,顺便说下市场大概的价格是多少,感激不尽! 以‘生物与生活’为题写一篇生物论文 有没有什么植物或生物生存不需要阳光?如果有,请把那种生物介绍尽量详细一点,感激不尽!
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn