说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

见证新一代全能大数据计算平台崛起 ——中国Spark技术峰会将于4月19日在北京召开

HTML文档下载 WORD文档下载 PDF文档下载
2014年4月19日,由CSDN和《程序员》杂志联合举办的“2014中国Spark技术峰会”(Spark Summit China)将在北京召开,国内外Apache Spark社区成员和企业用户将首次齐聚一堂。


2014年4月19日,由CSDN和《程序员》杂志联合举办的“2014中国Spark技术峰会”(Spark Summit China)将在北京召开,国内外Apache Spark社区成员和企业用户将首次齐聚一堂。来自AMPLab、Databricks、Intel、淘宝、腾讯、网易等国内外多家机构的Spark贡献者及一线开发者将分享Spark的现状与未来,各种计算范式的实际操作,新创业公司基于Spark的产品发布,以及生产环境中使用Spark及相关项目的第一手经验和最佳实践方案。

超越Hadoop的全能大数据计算平台

随着大数据相关技术和产业的逐渐成熟,单个组织内往往需要同时进行多种类型的大数据分析作业:传统Hadoop MapReduce最为擅长的批量计算、各种机器学习算法为代表的迭代型计算、流式计算、社交网络中常用的图计算、SQL关系查询、交互式即席查询等。在Spark出现前,要在一个组织内同时完成以上数种大数据分析任务,就不得不与多套独立的系统打交道,一方面引入了不容小觑的运维复杂性,另一方面还免不了要在多个系统间频繁进行代价高昂的数据转储。

Spark是发源于美国加州大学伯克利分校AMPLab的集群计算平台,它立足于内存计算,性能超过Hadoop百倍,从多迭代批量处理出发,兼收并蓄数据仓库、流处理和图计算等多种计算范式,是罕见的全能选手。Spark当下已成为Apache基金会的顶级开源项目,拥有着庞大的社区支持(活跃开发者人数已超过Hadoop MapReduce),技术也逐渐走向成熟。

议题精彩纷呈,案例首次分享

对企业来说,搭建Spark配合现有平台,需要拥有专业的团队实现与维护——对Spark拥有全面和深入的理解,才能开发出高效可靠的应用。本次大会将围绕Spark的多个方面做出权威而全面的解读,多个案例将在大会中首次分享。

Spark的现状与未来

Andy Konwinski是Spark创始团队AMPLab成员,集群调度系统Mesos作者,Databricks联合创始人,美国Spark Summit组织者。他将带来有关Spark发展现状与未来的权威解读。

基于Spark Graphx的大规模用户图计算和应用

明风是淘宝技术部数据挖掘与计算团队负责人,带领团队构建了国内第一个100台规模的Spark on Yarn集群,并基于Spark进行大量机器学习,实时计算和图计算的先行尝试,并将实践成果成功地应用于淘宝网数据相关的业务和产品。

面对淘宝的海量用户,如何基于亿级别的用户和十亿级别的关系链,进行高效的关系构建,社区发现和属性传播,一个高效强大的分布式图计算引擎必不可少。开发时,如何提升性能,计算的结果怎样才能得到高效应用?本演讲将带给你满意的答案。

当机器学习遇到大数据系统——从Spark MLlib看两者的混合发展

尹绪森是Intel工程师,对Spark、Mahout、GraphLab等开源项目拥有实际经验和深度理解。MLlib的出现让我们看到在一个成熟的大数据栈上构建简洁、易用、高效的机器学习算法的希望。当机器学习遇到大数据系统,究竟会产生怎样的火花?他的演讲将从MLlib看两者的混合发展。

Spark性能优化

陈超就职于皮皮网,担任数据平台负责人,负责公司所有数据分析与数据挖掘相关的项目。他是国内较早的Spark研究与使用者,Spark Contributor,目前专注于基于Spark平台的大数据处理。演讲将分享Spark的核心原理,并在此基础上探讨几个Spark性能的优化点。

快速模型更新在精准广告推荐中的应用

薛伟是腾讯精准推荐中心广告推荐负责人,2011年加入腾讯数据平台部,之后一直从事云计算、海量数据分析和数据挖掘、精准推荐相关的研发工作。腾讯广点通团队长期从事社交网络展示广告的技术研究和应用,从Spark诞生之初就开始关注这项技术和这个开源项目,并在广点通项目中进行了长期的应用实践。在这个报告中,他将介绍如何综合运用包括Spark在内的技术来实现广告推荐模型的快速更新。

Tranwarp Inceptor:基于Spark引擎的高速内存分析和挖掘工具

孙元浩是星环科技联合创始人及CTO,他将介绍如何构建分布式内存列式存储,以及如何利用PL/SQL和R语言对内存数据进行高速数据统计和挖掘。

Spark内核探索与性能优化

连城是Spark Contributor,即将加入Databricks工作。Catalyst/Spark SQL是新近加入Spark主线版本的alpha组件,它是一套简洁强大的SQL查询计划优化框架。随着时间的推移,已逐渐进化为一整套完整的SQL on Spark解决方案并更名为Spark SQL。 它的主要特点包括:向下兼容HiveQL,支持针对原生RDD对象的关系查询,可对用户编写的HQL/SQL查询进行有效优化,实现了一套可扩展的代码生成框架,可以针对特定逻辑直接生成字节码,进一步提升性能。它将成为Shark的新引擎。

面向实时计算和ETL处理的Shark应用

王健宗是网易大数据高级研究员,负责网易游戏大数据框架的研究和部署工作,在其推广下成功将Spark稳定应用在生产环境中。他的演讲将介绍应用Spark时的经验和教训,希望这些经验总结能为大家应用落地Spark提供参考和帮助。

为了保证“Spark中国技术峰会”内容的高品质,国内Spark领域的最权威专家组成了程序委员会,成员包括Databricks联合创始人,Spark、Shark、GraphX等项目核心作者辛湜(Reynold S. Xin);Spark Committer,英特尔亚太研发有限公司架构师夏俊鸾;英特尔中国研究院首席工程师吴甘沙;以及CSDN暨《程序员》总编,图灵公司创始人刘江。


更多精彩尽在2014年4月19日中国Spark技术峰会,现在购票,可享受最低票价优惠。3月27日~4月15日期间,新加入CTO俱乐部会员可七折购买“2014中国Spark技术峰会”门票(原价1000元/张),同时享受本次峰会的VIP通道,包括门票快速开通、现场专人签到服务等独享机会。

申请流程:点击,用CSDN ID注册申请加入CTO俱乐部,在推荐人一栏标注“购买Spark大会门票”,待后台审核通过即可收到优惠专享通道。为保证参会服务,请您最晚于415日前提交并购买门票。


更轻松的获取APK文件安装时间 Android控件对应表,丰富你的UI设计 Android开发进阶之NIO非阻塞包(八) Android开发进阶之NIO非阻塞包(七) Android开发进阶之NIO非阻塞包(六) Android开发进阶之NIO非阻塞包(五) Android开发进阶之NIO非阻塞包(四) Android开发进阶之NIO非阻塞包(三) Android开发进阶之NIO非阻塞包(二) Android开发进阶之NIO非阻塞包(一) Android开发进阶教程系列(一)目录篇 Android开发调试工具TraceView多图演示 Android JNI实例代码(二) Android JNI实例代码(一) Android JNI开发高级篇 Android NDK开发技巧二 Android JNI开发进阶篇 Android JNI开发提高篇 Android JNI开发入门篇 Android NDK开发技巧一 Android数据库ContentProvider封装原理 Android Permission列表,ADT 0.9.9 bug Android Theme和Styles内部定义解析 Android平台下图表绘制相关方法 Activity类的runOnUiThread方法你用过吗 Android上鲜为人知的UI控件介绍和使用 获取Android手机上的图片和视频缩略图 Android JSON解析示例代码 Android ANR介绍与避免 Windows Phone 7 SDK完善度不如Android m3 Android中使用定时器TimerTask类介绍 *>>--谁做过日历以及日历相关-- 如何卸载windows 2003 server,再重新安装windows 2000 server? 请问将Interbase中两个Varchar型字段连接起来的查询语句怎么写? 域名设置问题?? 为什么微波和X光能穿透介质,而波长介于它们之间的可见光恰不能? 生成EXE问题! Transaction Data Module 和 ADO 问题 寻求DOMINO SERVER 得配置资料!如HTTP的配置等等。 怎么创建dll?创建dll时参数应该怎么定义?创建后怎么调用?在哪儿声明? 熟悉ADODB.Stream的大侠看过来! 在WIN32 CONSOLE APPLICATION 建立的程序中为什么不能使用CString 类 数据库恢复的简单问题 谁用过jfreereport或jaxperreport做过报表?各位大哥帮忙呀!!!--就20分了 紧急高分求助:怎么在windows的user control中加一个参数 [求助]怎样让工程加入Data Report ,菜单 工程 里没有添加Data Report 的呀? 倡导成产手机爱好者与自由开发者协会 CPU拨了会不会叫的啊。内存和显卡拨了不会有声音,一定是主板有问题吗? 我的程序都关闭了,可是为什么进程还存在,我用了多线程的? 呼救高手--急:在线等待帮忙--怪异啊! 急!在线等 浏览器关闭事件----急,谢谢 各位大虾帮帮忙!!!必有重谢!!! 求助二维数组排序问题? 那里有Delphi下载啊? 下面的代码总出错 如果指针被阉割掉以后... 哪位提供一点关于开发小型dbms系统的odbc驱动程序的资料啊? 探讨DMBS??? 关于数据库操作一问? ***禁止重复登录?*** cout流的执行方式问题!请高手回答!不胜感激!!! 欢迎广临(API打印)CDC if (know && 高手) 值得讨论 else 有收获的; 在线等候 咋再MS SQL中实现这个查询? 通过ADSI验证用户登录的问题。 寻找控制面板编程方法 怎么判断类是否存在? 能通过网络修改其它机器的IP地址么?请教各位大侠,在线等!!! 求一段代码:如何得到硬盘的物理系列号,可以用来做为本机唯一标识! 在c++builder中怎样控制excel图表(急!!) 请问如何注册控件并调用、???谢谢 delphi连ACCESS怎么连,具体点。 一道有关类的习题 关于FORM使用的问题,请高手帮忙!!!!!!!!!! 有一个问题! ADOCommand 的问题 如何执行资源中的EXE文件!高手帮帮忙! 根据年份和月份得到天数? 水晶报表问题 请问用DELPHI做电子商务网有什么好书介绍? 数据库序列中表示当前值是???? 怎样通过数据库的内容,让复选框自动选择选上~~~~~~~~~是多选题来的~~~~ 带有颜色的古风两字词语 英文的化学题目~~~高手!here are some measurements of solutions that were made using a pH meter. A.8 B.9 C.6 D.3 E.7 F.10(1)a bottle of soda powder solution has a pH of10. how do you think the pH would change when it is heated in the s “世家”英语怎么拼 凭心而论是什么意思 英语翻译别摘抄别人的,我就选它 名发世家 汉商店怎么样 爱死小白兔镜头是70-200 能拍远景吗?按照计算不是应该是200/70 三倍不到的变焦.那视角就很大程度取决于镜头到物体的远近?那怎么打鸟?还是不是很懂焦距的事 听说爱死小白兔拍远景,打鸟和 以下哪个有错别字?厮打,箭拨弩张,凭心而论,鞭辟入里 谁有那张壁纸啊,在右半边有好几颗心,心的下面有红的的线,就像液体滴下来 雨夜 张咏 赏析 帘幕萧萧竹院深,客怀孤寂伴灯吟.无端一夜空阶雨,滴破思乡万里心 学业进退 左宗棠翻译 兰溪男子因儿子学习差被指责 动手打伤两名男子入室盗窃 自以为剪断监控就不老公全家都爱说脏话 女子向法院起诉离大学教师:我为什么把12岁女儿送进远曾经爱美的她在翠苑流浪8个多月 超市杭州市中级法院招聘速录员属事业编制 清华大学附属中学在浙大招老师 录用者桐庐干部乔迁摆宴 专家:人情往来易生永康首座500千伏输变电所明年开建宁波出台国内首个网购争议处理办法(组杭州萧山错案四名当事人已提国家赔偿申金融改革显露清晰路线图 未来三年料“导演李行赞李冰冰拿金马奖后星路大开A级绿色食品坐上“高铁” 济南高铁餐当代艺术家办公益艺术展推“理性饮酒”中国探索智能化养老 低成本应对人口老日韩企业试水中国老龄产业成都蝉联中国“服务性政府”城市排名榜专家:并购绝非中企赴美投资好办法学者谈《决定》:金融业对内、对外开放浙江老龄化催生产业发展 日韩企业试水厦门海沧十年:从台商投资区到美丽新城
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘