说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

【BDTC讲师】Tachyon作者:大数据存储以及处理框架经验分享

HTML文档下载 WORD文档下载 PDF文档下载
12月5-6日召开的2013中国大数据技术大会,两位来自UC Berkeley计算机系AMPLab的讲师将会带来分享,其中Tachyon系统和Spark Streaming系统作者李浩源将会探讨有关大数据存储以及处理框架方面的研发成果和心得。

两位来自UC Berkeley计算机系AMPLab的讲师——UC Berkeley计算机教授、AMPLab共同创始人Ion Stoica和Tachyon系统及Spark Streaming系统作者李浩源,将会在12月5-6日召开的2013中国大数据技术大会上带来分享。大会前期,我们陆续采访了AMPLab的几位核心成员,包括Ion Stoica、辛湜和李浩源,关于李浩源的采访实录如下:

CSDN:首先请介绍一下您自己

李浩源:我是UC Berkeley计算机系AMPLab的博士生,专注于计算机系统和大数据的研究,师从Dr. Scott Shenker和Dr. Ion Stoica两位教授。AMPLab正在开发一个大数据的处理平台叫做Berkeley Data Analytics Stack (BDAS),我是其中Tachyon系统和Spark Streaming系统的作者,也是Apache Spark系统的founding committer。

在伯克利开始博士研究之前,曾在Google和Conviva从事大数据处理挖掘的研发工作,所研发的PFP大数据挖掘算法已被Apache Mahout采用。我分别在北京大学和康奈尔(Cornell)大学获得计算机专业学士学位和硕士学位。

CSDN:请简要介绍下Tachyon项目以及Tachyon适用的应用场景

李浩源:Tachyon是一个高效的分布式存储系统。目前发布的为整体项目的部分功能(缓存部分),此部分功能在一次写、多次读的环境下为系统的性能带来最大的提升。

CSDN:Tachyon目前的发展状况(比如实际应用的商业项目和贡献者等方面)是怎样的?未来的研究方向是什么?是否会考虑像Spark一样商业化?

李浩源:Tachyon是今天4月份开源的,到11月为止已有近20位贡献者,分别来自10家不同机构,其中包括Yahoo、Intel、Adobe等。对于未来的研究方向,一个比较重要的点是更好的与生态系统相结合。AMPLab的Mesos和Spark都已经商业化了,这是一种趋势,但Tachyon目前是否商业化还有诸多因素需要考虑。

CSDN:您目前主要从事哪方面的研究?

李浩源:专业方向为计算机系统和大数据的研究,具体专注于BDAS平台的建设,特别是Tachyon及其相关系统的研发与算法研究。

CSDN:您曾经获得过很多荣誉,尤其是在刚刚过去的SOSP2013上,您参与的两个项目都入选了,您认为自己拥有哪些特质使您在计算机界获得这么多荣誉?对于后辈您有哪些建议?

李浩源:这都是团队的成果,对我来说更是一种鼓励。也谈不上对后辈的建议,可以分享一点从同事和老师们那儿学到的东西,就是明确目标、刻苦工作。

CSDN:能否简要介绍下本次大数据技术大会上,您将给听众带来哪些分享?

李浩源:本次大会上将和大家探讨一些有关大数据存储以及处理框架方面的研发成果和心得。

欢迎关注 @CSDN云计算微博,了解更多云信息。 

第七届中国大数据技术大会(Big Data Technology Conference 2013,BDTC 2013)将于2013年12月5日-6日在北京世纪金源大酒店召开。Spark核心设计者、Databricks创始人兼CEO Ion Stoica,Apache HBase项目管理委员会主席Michael Stack、百度大数据首席架构师林仕鼎、华为公司诺亚方舟实验室主任杨强、Apache Tez commiter Bikas Saha大数据技术专家领衔,来自腾讯、阿里巴巴、Hortonworks、LinkedIn、小米、Intel等50余位工程师带来近60场干货分享,更有《中国智能交通与大数据技术峰会》专场感受智能交通如何改变生活。 

HTML5发展慢热 开发者热情不减 NimbleBit孪生兄弟创始人:最后悔没有专注和扩大品牌 将对Windows形成挑战:谷歌在Chrome OS中默认支持Office 微软的企业社交大动作:Yammer发布移动SDK 谷歌开源Gumbo:纯C语言实现的HTML5解析库 AMD发布APPML源码,构建clMath库 【观察】3个月,每天增加52台,又一家云企业跻身十万台服务器俱乐部 感受华为IT业务的实力 小米雷军:我为什么做红米? GitHub上线Trending功能,帮你轻松找到有潜力的开源项目 如私人秘书:谷歌搜索将变得更加个性化 微软将于10月17日正式发布Windows 8.1 Google推出在线教育C2C平台Helpouts 技术人员组团参加SDCC 2013的十个理由 继BAT之后 第四大巨头是谁 如果传统IT部门真的消亡,你该何去何从? 闪存突袭,混合储存是否已步入黄昏 Cloudera发布Hadoop开源组件Sentry:提供细粒度基于角色的安全控制 我从其他Shell脚本中学到了什么? 10个调试和排错的小建议 机器学习的时代来临,人类应该做点什么? 云端测试破1500万 Testin已为开发者省2亿 智能腕表inWatch:已发售近3600台 Bingo!微软证实Windows 8.1将捆绑安装Skype IBM宣布收购以色列网络安全公司Trusteer 约10亿美元 如何才能运作好一个开源项目? 为什么JavaScript有能力成为未来企业级编程语言? Red Hat CEO:拥抱开源 拥抱克隆 小米手机-HAXLR8on硬件黑客马拉松 开团了! 移动周报:雷军做红米的N个理由 Pangea Software CEO:08年App Store游戏降价大战的真相 在IE中,打开某个页面,会连接到www.lop.com页面 关于islower(ch),isdigit(ch) 疑问 BQQ的服务器端有没有保存用户的聊天记录的? 如何获得程序方向键输入?多谢! 求助有关IFS-HOOK 高手请入!!急救!求msflexgrid 的打印源码????? 如何在list中显示文件夹 哪里可以看到Obejct类clone的实现方法? 系统的FOUND.00*文件夹里放的FILE000*是什么文件?可以删除吗?刚装系统时没有这些文件的阿 给分啊 今日郁闷之至……散分! 来来来,大伙们一起来衷心祝愿xxmm (晓箫)的老爸老妈顺利赴美参加晓箫的毕业典礼!! Dev-Cpp 使用 NetAPI32.lib 的问题 急寻严蔚敏,吴伟民版《数据结构习题集》c语言版的答案,请问哪有啊 高手们给我一个超级简单的HOOK API的例子好吗?求你们了。 错在哪里 好郁闷啊~ 谁有站内关键字模糊查询的代码?紧急求救、在线等待!!!! 字符串转化为数组的问题 讨论<<标准C++库大全>> 上次是哪位兄弟要的《新编API参考大全》CHM版呀?我找到了一个,还行。 欢迎大家访问我公司的网站! 请学c++builder 有份量的人推荐一本经典的教材(适合初学者) 欢迎大家访问我们公司的网址! 关于分页的问题 请帮我看看这个小程序 欢迎大家访问我公司的网站! 已知一个文件夹的路径,如何得到该文件夹中的文件的名字? 关于StreamReader的问题 欢迎大家访问我公司的网站! 有关编辑框的问题 各位大侠一个很菜的问题,来帮帮忙! 关于集合的一个小问题 最菜的问题,100分白送!!! 很基础问题,脑子不清楚,大家帮忙看看 紧急问题! 终于 知道MESSENGER 只是 WIN2K 的服务了! 那么 这 个怎么办?? 请问以下我如何实现一个带滚动条的子窗口 问一下,resin和iis集成后class文件放在什么目录下 用 http://www.rc80.com (c# + sqlserver2000) 只想换一个.net 的完整的分页代码! 一个Corba客户端连接的问题! 如何在resin中设置wap服务器功能 大家帮忙!! 什么时候用DataGrid,什么时候用DataList? 怎么样从数据库里取得某字段的值??? 昆腾的硬盘修理找谁啊?急,UP有分........ www.webmatrixhosting.net免费空间中FTP文件上传问题 Apache 2.0.43 +Tomcat 4.1.24+mod_jk2-2.0.43.dll整合问题出现:The servlet container is temporary unavailable or being upgraded hamburger前加a,an keren ann凯伦安所有的歌有歌命就行,当然有地址更好…… And because,as you know,the traditional media is still heavily controlled by the government这句话在word里显示有误, 请问英语Annie是什么意思 《最大的麦穗》一文中有几处使用了分号?画出来读一读,体会它的用法. 法布尔解开了“白蝎自杀之谜”,谜底究竟是什么 选词填空(in am what buy this on ai where with is buts magazine) I'm going to have a( )weekend.we 分号的用法是什么? Her face appeared on innumerable magazine covers,and she was ___ by the media.(A.confusedB.caughtC.houndedD.followed I'm going to buy some ____.What about you I'm going to buy some ____.A,tomato,bread B,tomatoes,breads C,tomatoes,bread D,tomato,breads 说出选几的原因! 分号的用法是什么?;分号 空气加湿器30W 50W是什么概念,一般宿舍能用吗?我就是想知道这个功率到底算多大,会不会像饮水机一样在宿舍转不起来. If you don't care about me,then you can pull the black 聊斋是蒲松龄的什么名? —个三角形桃园底54米高40米.如果每棵桃树占地9平方米,这个桃园一共有多少棵桃树? Dear Either black or don't pull me,I ignored 求《聊斋志异》和蒲松龄介绍 2平方米是什么概念?房子 什么的 我要怎么读哲学?我读了苏菲的世界,彭越陈李胜写的西方哲学史初步,之后往后看萨特发现要先读海德格尔胡塞尔,读尼采发现要先读叔本华,读叔本华发现要先读柏拉图和康德,康德OTZ他花三十 根据情节写古诗句. 王叔叔出去旅游5天,这5天的日期之和是35,请算一算,王叔叔回来的日期是几日? 海口哪家酒店、咖啡厅或者西餐厅能有包相吃烛光晚餐最好离海近点_不是近海也无所谓_食物要好吃_价格不要太贵…重点就是要有单独包相_求详细地址和电话_最好能有详细费用 Please bring the backpack here为什么要用bring? figgy ,until ,的音标~ 推荐本高中生读的古典哲学吧,最好薄点~ 求有故事情节的古诗词(顺便说一下故事)速回, 怎么用英语音标拼汉字就像lancome(化妆品)兰蔻,可译音成汉字 兰蔻一样 列:兰蔻音译回去---(汉字怎么音译成英语) 向心力改变速度方向不改变大小? plese bring the erase here而不是plese bring the eraser to here(英语) 无花果的含义是什么? research做研究意思时有复数形式吗? bring your dog 无花果有什么 含义 读了 北风乍起时 这篇文章,你想到了哪些名言警句? 关于诗的故事情节.拜托各位了 3Q1.诗人元稹特别爱菊花,一提起菊花,他就会情不自禁吟道:______________________________________ (如何填) 2.当你身在他乡,听到了用笛子吹奏的《折扬诗》时,你不禁 Tony was t—— (使非常激动)by the good news that he got an "A" in the fina 听了伯父这句话,我又羞愧,又悔恨"是原因: research复数形式是什么 诗歌中的月亮情节我长这么大,也读了不少诗歌,发现,人们对太阳的热情远远小于月亮.大家对这种现象的解释是什么呢?为什么歌颂月亮的诗歌比歌颂太阳的要多呢? 小强上山每小时3千米,到达山顶原路返回,下山每小时5千米,求小强在整个过程中的平均速度.要完整所有数都写出来 美国的历史文化 my dogs are black否定句,一般疑问句,回答,划线提问 everyone ____ having a good time now. in the garden ( )flowers are pink,( )are red .a.one...other b.ones...othersc.some...others d.some...the others What does “So does her husband” mean?A.她丈夫不爱吃 B.她丈夫也是 C 她丈夫是的D所以是她丈夫 annie是什么意思 PANCAKE BLOCK什么意思,在美语中···一个老外说足球赛中会用到这个··· are well informed by the mass media.翻译 It is autumn ,but it is still very hot.(保持原句意思不变)______it is autumn,__________it is still very hot 在学向心力加速度时,为什么在拱桥最高点时没有支持力,这符合事实逻辑吗 法布尔解开了“白蝎自杀之谜”,你能说说这个谜底究竟是什么? The cat … a mouse and caught it at last .(chess)这道题是用动词的适当形式填空,把.填满. 向心力不改变力的大小,这句话怎么理解,如果向心力变大,怎么理解 英语翻译别用在线翻译. My friend doesn't play volleyball well,because it is d_______. 匀速圆周运动向心力 向心加速度为什么是变力?匀速圆周运动,向心力和向心加速度不是指向圆心吗 为什么还是变力? there are good reason to be troubled by the violence that spreads throughout the media.to be 在这是什么,怎么用 什么结构,分析结构 推荐几本哲学原著,比较好读的, 测量用盐酸什么差压变送器测量36%浓度的盐酸,温度25度的 白蝎自杀之谜的谜底究竟是什么? 日举办美魔女大赛 60岁佳丽身材如少Facebook首次承认传闻:年轻人塞拉利昂外长将访华广州警方处理病人家属殴打医生事件 3马来西亚移民局前总监被判处贪污罪名成巴西副总统将访华海外赴澳工作人员升至173万人 威胁浙江将出台“社会组织建设”地方标准浙江汽车消费增幅回升 金银珠宝类商品中央巡视组已进驻广东等7地区单位 联上海近八旬英式老建筑启动平移 移38江苏将建150万亩永久性蔬菜基地南京地铁或将下发“禁食令”地铁禁食将万圣节郭美美杨贵妃妆扮吓呆网友 称最南京市农委加大监测 确保市民吃上放心“农家乐”食品安全存隐患 南京农委表中国部分军事设施现安全隐患 影响武器女子因口角棍击刀捅杀死丈夫 分尸蒸煮10月全国平均气温较常年偏高 呈现“从对等的不了解开始对话欧元区面临通胀过低威胁纽约金价18日回落美元18日对多数主要货币上涨美国63岁老汉性侵孔雀 声称不怕染上夫妻俩串门孩子丢车内 小区居民当临时安徽20个改革试点县开建城乡统一土地合肥公交被喷不明物续:嫌犯落网 先前安徽: 醉酒男子嫌大妈跳广场舞吵人 名校毕业生网上开赌场非法赚百万合肥交警夜查飙车 1小时扣25辆摩托环保局长滥用职权 致国家损失300万安徽淮南两局长联手骗取386万专项资文身男持刀胁迫的哥连闯三红灯 临走讹合肥驾驶员“无记分有奖励”活动今日启合肥二环内将添2.16万个公共泊车位文化快讯本报“假期奇妙体验”21日走进市少年拉姆宣布退出德国国家队 世界杯冠军队70年前,甘肃第一份邮刊兰州诞生从一本书里路过兰州市轨道交通两座车站已建成试题为考生交卷前偷拍 不存在考题泄露
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘