说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

【BDTC讲师】Tachyon作者:大数据存储以及处理框架经验分享

HTML文档下载 WORD文档下载 PDF文档下载
12月5-6日召开的2013中国大数据技术大会,两位来自UC Berkeley计算机系AMPLab的讲师将会带来分享,其中Tachyon系统和Spark Streaming系统作者李浩源将会探讨有关大数据存储以及处理框架方面的研发成果和心得。

两位来自UC Berkeley计算机系AMPLab的讲师——UC Berkeley计算机教授、AMPLab共同创始人Ion Stoica和Tachyon系统及Spark Streaming系统作者李浩源,将会在12月5-6日召开的2013中国大数据技术大会上带来分享。大会前期,我们陆续采访了AMPLab的几位核心成员,包括Ion Stoica、辛湜和李浩源,关于李浩源的采访实录如下:

CSDN:首先请介绍一下您自己

李浩源:我是UC Berkeley计算机系AMPLab的博士生,专注于计算机系统和大数据的研究,师从Dr. Scott Shenker和Dr. Ion Stoica两位教授。AMPLab正在开发一个大数据的处理平台叫做Berkeley Data Analytics Stack (BDAS),我是其中Tachyon系统和Spark Streaming系统的作者,也是Apache Spark系统的founding committer。

在伯克利开始博士研究之前,曾在Google和Conviva从事大数据处理挖掘的研发工作,所研发的PFP大数据挖掘算法已被Apache Mahout采用。我分别在北京大学和康奈尔(Cornell)大学获得计算机专业学士学位和硕士学位。

CSDN:请简要介绍下Tachyon项目以及Tachyon适用的应用场景

李浩源:Tachyon是一个高效的分布式存储系统。目前发布的为整体项目的部分功能(缓存部分),此部分功能在一次写、多次读的环境下为系统的性能带来最大的提升。

CSDN:Tachyon目前的发展状况(比如实际应用的商业项目和贡献者等方面)是怎样的?未来的研究方向是什么?是否会考虑像Spark一样商业化?

李浩源:Tachyon是今天4月份开源的,到11月为止已有近20位贡献者,分别来自10家不同机构,其中包括Yahoo、Intel、Adobe等。对于未来的研究方向,一个比较重要的点是更好的与生态系统相结合。AMPLab的Mesos和Spark都已经商业化了,这是一种趋势,但Tachyon目前是否商业化还有诸多因素需要考虑。

CSDN:您目前主要从事哪方面的研究?

李浩源:专业方向为计算机系统和大数据的研究,具体专注于BDAS平台的建设,特别是Tachyon及其相关系统的研发与算法研究。

CSDN:您曾经获得过很多荣誉,尤其是在刚刚过去的SOSP2013上,您参与的两个项目都入选了,您认为自己拥有哪些特质使您在计算机界获得这么多荣誉?对于后辈您有哪些建议?

李浩源:这都是团队的成果,对我来说更是一种鼓励。也谈不上对后辈的建议,可以分享一点从同事和老师们那儿学到的东西,就是明确目标、刻苦工作。

CSDN:能否简要介绍下本次大数据技术大会上,您将给听众带来哪些分享?

李浩源:本次大会上将和大家探讨一些有关大数据存储以及处理框架方面的研发成果和心得。

欢迎关注 @CSDN云计算微博,了解更多云信息。 

第七届中国大数据技术大会(Big Data Technology Conference 2013,BDTC 2013)将于2013年12月5日-6日在北京世纪金源大酒店召开。Spark核心设计者、Databricks创始人兼CEO Ion Stoica,Apache HBase项目管理委员会主席Michael Stack、百度大数据首席架构师林仕鼎、华为公司诺亚方舟实验室主任杨强、Apache Tez commiter Bikas Saha大数据技术专家领衔,来自腾讯、阿里巴巴、Hortonworks、LinkedIn、小米、Intel等50余位工程师带来近60场干货分享,更有《中国智能交通与大数据技术峰会》专场感受智能交通如何改变生活。 

索契冬奥会API:赛事的数据直播 为什么开源企业的开源大旗正在褪色 尘埃落定 腾讯确认投资大众点评,获20%股份 Unite China·2014:上千Unity开发者狂欢、五大精品课程全面开启 下载4万首歌曲仅需几秒——蓝色巨人IBM发布新传输技术 15核芯片+数据平台,Intel软硬兼备的Hadoop战略 Facebook以160亿美元收购50名员工、4.5亿月活跃用户的WhatsApp 2014年全美最吃香职业TOP100,程序员排第一 LinkedIn向所有用户开放博客发布平台 Google与Facebook的产品研发之道 小米海外扩张第一步 红米进军新加坡 Google I/O大会时间已定,Google Glass真的来了? 精英团队PK全能型数据科学家,拼的可不只是数量 专攻移动支付?PayPal将面向全球开放移动SDK CoconutKit:iOS开发必备的开源组件库 个人隐私是如何“泄漏”的:国内外互联网企业隐私策略对比 惠普2014年Q1财报:净利润同比增16% PC业务逆势好转 “阅后即焚”挖谷歌墙角,GAE技术大牛跳槽Snapchat 日800万访客、20万RPS网站的5个9可用性架构 程序员想找好工作?那就学好Linux吧! 一周消息树:开源专家袁萌,国产COS操作系统是“杂种”,不是中国软件梦 移动周报:对话智能硬件云服务平台Yeelink Node.app:用Node.js API开发iOS“原生”应用 Google Project Tango:能3D捕捉的智能手机 成功打造Evernote API生态系统的五大经验 研发周报:Google与Facebook的产品研发之道 AMD高级副总裁Lisa Su访华 宣布引领AMD复兴的五大战略 一周热点:IBM新技术使网速达400G/s,硬盘会“烧掉”吗 特种作战,纽约极客企图建造现实中的“潘多拉星球” 领先Google 150年的数据可视化和“不务正业”的超级计算机 苹果会成为新微软的四大理由 关于CCommandLineInfo 请问一个特殊控件,谢谢,一定给分. 哪儿有关于COM的英文版书下载?--找了很久没找到 PowerDesigner 9中怎么设置外鍵呀,我看到的选项怎么是灰色的呀 经典问题:如何获得IFRAME中网页的HTML代码,特急!!! 有没有在广州的NOTES 开发人员 ,有项目 请寄简历到lotusoa@21cn.com 有没有在广州的NOTES 开发人员 ,有项目 请寄简历到lotusoa@21cn.com. 业务需求、用户需求、功能需求应该分别从那类客户那里获得? 关于SOAP/WEB SEVER的问题!请大家讨论一下! 又一个迷茫初学者 谁能给我讲讲csdn水园的历史 一个关于句柄的问题! 刚接触存储过程,请问这个过程怎么写啊? jdk&jsdk DLL调用 asp.net无法显示web控件,也无法对web控件编程 如何将C语言(不是C++)编写的函数做成dll文件?我用的是Visual C++ 6.0!急急急! 哪里有PROJECT 2000的项目管理软件下载????? 请问如何选择测试数据? 如何将C语言编写的函数做成dll文件?我用的是Visual C++ 6.0 access2000中如何使用SQL2000中的ESCAPE? 无法为更新行集定位:一些值可能已在最后读取后改变--怎么解决 sql server ce问题 气死我了,本姑娘以后再也不来PHP版回答问题了 activeReport 问题 有没有非教育网下载visualage for java 4.0 请教:怎样记录浏览器访问过的地址? ChinaRen实在是太差了!!!!我讨厌ChinaRen!!! 偶觉得湘妹子既可以是红粉知己,也可以是居家老婆,一句话:人生何所求,得一湘妹子足矣! 怎样通过程序设置使浏览器不出现工具条和minibox,maxbox 如何修改注册表来删除ie中的查看》浏览栏按钮? 关于函数指针的问题,欢迎讨论. 还是没有解决的问题:关于VFP报表打印的问题—急急急! moden是否有物理地址 如何用Delphi或C++Builder代码实现一个程序关闭另处一个应用程序。 请各位推荐几本好一点的JAVA参考书,THANKS 这样的代码为什么不能连接SQL SERVER数据库 当二个进程运行时,几就是两次运行FTP 动画关闭窗体API的问题 什么叫串行端口,什么叫并行端口? 程序员级考试就是中级考试吧 各位高手:请问*.html和*.htm文件有何区别? 在活动目录中如何实现组的嵌套? swing窗口布局的问题 毕设还要翻译6000子科技文献,谁介绍一篇呀! 介绍几个考中级的网址来噶 CNET网站重新架构,我们的链接也要改了~~ 急,真的急 各位,有谁能告诉我怎样使得程序中每个Show的窗体都以新窗体出现在任务栏。(答对了一定加分!!!!) 能不能获得来访者的计算机名 help me!高手请看! 如图,直线AB,MN,PQ相交于一点O,角BOM是它余角的2倍,∠AOP=2∠MOQ,且∠POG=50,求∠BOQ的度数 修一条路,以修的和未修的长度比是3:5,如果在修12千米,则以修与未修的长度之比为9:11,这条路共长多少千米? 梯形ABCD的两条角平分线交于点E,图中面积相等的三角形共有几对?分别是——? 如图,直线AB,MN,PQ相交于点O,∠BOM是它的余角的2倍,∠AOP=2∠MOQ,且有∠GOB=90°,有一个答案我看过了 不过我不是很明白什么是余角∠BOM的余角是哪个角? 修一条路,已修和未修的千米数比是3:5.如果再修12千米,则已修和未修的千米数之比为9:11.这条路共长.共有多长. 82,98,102,118,62,138,( ) A 68 B 76 C 78 D 82 选什么?这么做? 直线AB、MN、PQ相交于点O,∠BOM是它的余角的2倍,∠AOP=2∠MOQ,且有OG⊥0A,求∠POG最好有全部的过程,急需,谢谢了 三角函数:△ABC,若cosA+2cosB+cosC=2,求证a,b,c成等差数列 82、98、102、118、62、138、( ) 直线AB、MN、PQ相交于点O,∠BOM是它的余角的2倍,∠AOP=2∠MOQ,且有OG⊥0A,我急需、求你们了.、 3+2到底等于多少?3+2=? 急,我国现行的1982年宪法有( )组成 A.3章101条 B.3章138条 C.4章76条 D.4章138条 199.2,3,8,27,32,( ),128 A.64 B.243 C.275 D.48 三角形ABC中,角A,B,C,的对边分别是a,b,c,且2b×cosA-c×cosA=a×cosC,①求角A的大小,②若a=根号7,b+c=4,求三角形的面积 2.6.30.210.2310.数字推理题 A.68 B.76 C.78 D.82 8/9 ,-2/3,1/2,-3/8,9/32,( A ) A、-27/128 B 25/128 C 3/64 D 5/64 在三角形ABC中,角A,B.C得对边分别为a.b.c且满足(2b-c)cosA=a乘cosC 1,...在三角形ABC中,角A,B.C得对边分别为a.b.c且满足(2b-c)cosA=a乘cosC 1,求角A的大小 2.若 b+c=6 a=2根号6 求三角形ABC面积 数字英文翻译 20 33 40 55 68 74 82 90 106 118 144 若64=2*2*2*2*2*2表示成F(64)=6,243=3*3*3*3*3表示成G(243)=5,则F(128)=(?) F(16)=G(?) F(?)+G(27)=6 已知直角三角形的两条边的和等于8,两条直角边各为多少时,这个直角三角形的面积最大,最大值是多少? 已知ABCD是梯形,在这个图形中共有()对面积相等的三角形来不及了 8/9 -2/3 1/2 -3/8 9/32 ( ),请问括号里应该是几?-27/128 25/128 3/64 5/64 ○+□=82,△+□=64,△+○=48,○=( ),△=( ),□=( 若三角形ABC的周长为20cm,点D.E.F分别是三角形的中点,则DEF的周长为= 概率公式.高数来的三个事件的那个公式我看得懂.特别那个(-1)^n-1 怎么会加入这个东西. 最后能列举4个事件的例子给我看吗? (1)△+□=57 △=□+□ △=()(2)○+□+=82 △+□=64 △+○=48 ○=() △=() □=() 一个等于9分之7的分数,它的分子比分母少18,这个分数是多少?我要的是过程 高数概率恳请大侠们帮忙了.老样子,要很细心的解释. 如图在梯形abcd中三角形1和三角形2的面积相等吗为什么1和2中间的点是o点 如图,写出梯形abcd中面积相等的三角形 高等数学题:(a^2-10a+16)等于(a-2)(a-8) 是运用了哪个公式?本人刚接触这类题,请赐教,三楼的小白蚁,叉叉是什么?能不能说具体点,或者用符号表示,sorry~ 三角形ABC中,角A、B、C的对边分别为a、b、c,且2b*cosA-c*cosA=a*cosC,(1)求角A的大小(2)若a=√7,b+c=4,求三角形ABC的面积 在三角形ABC中,D,E,F分别是各边的中点,骆三角形DEF的周长为20厘米,则三角形ABC的周长是多少? 如图,四个边长均为4厘米的正方形中,画了2个三角形,求这两个三角形的面积之和 工程队修一条路,第一天修了50千米,第二天修了全长的三分之一,这时超过中点5千米,这条路全长多少千米?2.李师傅计划24天生产1200个零件,实际5天完成了20%.照这样计算,李师傅能按期完成任务 二元一次函数图像受什么影响是我想错了,不用回答了 已知直角三角形两条直角边的和等于8,两条直角边各为多少时,这个直角三角形的面积最大,最大值是多少?这是函数题,要设x 高数上的一个问题::((2^x)-1)/x为什么等于ln2?在阅读例题时发现这样的一步:((2^x)-1)/x等于ln2,请问这是为什么?如可能请附上相关知识,感激不尽!是在limx->0的情况下 小数的运算过程 三角形ABC的三个内角所对的边分别为a,b,c,由cosA+2cosB+cosC=2怎样推得a+c=2b? 大一高数 重要极限的题目.例题12.那个次数,[……^(x+2)]^2 不等于原题的2x啊!而且这大一高数 重要极限的题目.例题12.那个次数,[……^(x+2)]^2 不等于原题的2x啊!而且这样算出来不该是4x+ 一个数,把它的小数部分扩大5倍时是3.5,把它的小数部分扩大9倍时则是5.5,这个小数原来是?(计算过程) 三角形ABC角A,B,C,的对边是a,b,c,且2b×cosA-c×cosA=a×cosC,求角A 求助!高数题!∫(1,∞)1/x(1+x^2)dx= 已知直角三角形两条直角边的和等于8,两条直角边各是多少时,这个直角三角形的面积最大?最大值是多少? 修路工人修一条路,第一周修了全长的40%,第二周修了12千米,还剩6千米,这条路有多长? 3+2-5等于多少? 如图,等边三角形ABC中,AE=CD,AD、BE相交与点P,BQ垂直AD于点Q,证明:(1)角ABE=角CAD(2)BP=2PQ 锐角三角形ABC,AB=4倍根号2,角BAC=45度,角BAC的平分线交BC于D,M,N分别是AD和AB上动点,则BM+MN的最小如图所示,在锐角三角形ABC中,AB=4倍根号2,角BAC=45度,角BAC的平分线交BC于点D,MN分别是AD和AB上动点,则B 以知直角三角形两条直角边的和等于8,两条直角边各为多少时,这个直角三角形的面积最大,最大值是多少? 2.5×5/3等于多少有算式更好 在锐角△ABC中,AB=4√2,∠BAC=45,∠BAC的平分线交BC于点D,M,N分别是AD和AB上的动点点,则BM+MN的最小值是 已知直角三角形的两条边的和等于8,两条直角边各为多少时,这个直角三角形的面积最大,最大值是多少?求分析, 求一道高数题的解答过程,用偏导解决 17题求一道高数题的解答过程,用偏导解决 17题 在锐角三角形ABC中,AB=4根号2,∠BAC=45°,∠BAC的角平分线分别是AD和AB上动点,则BM+MN的最小值是? 把下面这个三角形平分成3个面积相等的三角形,可以怎么分?请在图中画出来. 高数求偏导的一道题,比较灵活f(x,x^2)=2x^2e^(-x)fx(x,x^2)=-x^2e^(-x)fy(x,x^2)=?fy(x,x^2)=(2-x/2)e^(-x) 如图,直线AB,MN,PQ相交于点O,∠BOM是它的余角的2倍,∠AOP=2∠MOQ,且有∠GOB=90°,求∠POG的度数 怎样把三角形分成4个面积相等的图形 ...画出来..3种以上 在锐角三角形ABC中,abc分别是角ABC的对边,m=(2b-c,cosC),n=(a,cosA),...在锐角三角形ABC中,abc分别是角ABC的对边,m=(2b-c,cosC),n=(a,cosA),且m平行n.1,求角A的大小.2,求函数y=2sin
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘