说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

刘刚:从互联网到传统行业 Hadoop发展迅猛!

HTML文档下载 WORD文档下载 PDF文档下载
刘刚表示,目前Hadoop的应用正在从互联网行业到传统行业快速的扩张,但是在传统行业中Hadoop还是要面临很多困难:Hadoop的安全性不能满足他们的需求;Hadoop的人才缺少;怎么把传统的业务迁移到Hadoop平台上来处理。

2014年05月20日,CSDN携手ChinaHadoop小象社区将打造一场涵盖分布式在线存储系统HBase、数据仓库Hive、Hadoop在电信运营商的应用实践等内容的“Hadoop在企业中的应用实战”高端技术培训。

此次“Hadoop在企业中的应用实战”培训的起因很简单,时下数据已经成为当今企业的核心竞争力,拥有大数据并智慧地使用和运营数据成为企业不可缺少的成功要素。Hadoop生态系统提供了一种实用的、经济有效的、可扩展的架构,帮助企业存储、管理和处理海量数据。业界在Hadoop上的兴趣和投资形成了包括开源软件和商业化软件的整个生态系统,Hadoop迅速成为大数据处理方面的业界事实标准。越来越多的企业急需引入Hadoop技术人才!于是CSDN携手ChinaHadoop小象社区共同打造了此次“Hadoop在企业中的应用实战”!

在本次培训开始前,我和本次培训的讲师刘刚做了一次简单的沟通,他表示将会在5月20日“Hadoop在企业中的应用实战” 分享Hive实战课程,希望通过这次分享,能够让大家掌握使用Hive来分析Hadoop上面的数据。这次讲课以一个Hive的项目开始,来逐一讲解Hive的常用功能和实战经验。报名点击!

刘刚          ChinaHadoop小象社区核心成员

多年Hadoop开发和维护工作,擅长搭建基于Hadoop的海量数据平台和处理TB级数据。 擅长基于MR的算法开发,参与多个Hive、HBase和Mahout的行业应用案例。 《Hadoop应用开发技术详解》作者,《海量数据基于记录级别的容错》专利所有人。

以下是采访原文

-什么原因吸引你钻研Hadoop技术?

记得四年前跟着PKU的曹老师做项目的时候,曹老师让我去调研大数据技术,那个时候hadoop资料很少,只能去看官方的文档。印象最深的是花了两周搭建了一个节点的hadoop集群。过程虽然困难,当搭建成功的那一刻,所有的困难全部变成了宝贵的经验。

Hadoop自带了分布式存储(HDFS)和分布式计算(MapReduce),随着互联网的快速发展,网络上产生的数据量越来越大,这些数据80%以上是非结构花的,所以存在传统的Oracle或者Mysql里面已经不合适了。这个时候,Hadoop可以完美的解决这个问题。不仅解决了存储问题,同时计算的问题也解决了。

-对于解决哪些问题Hadoop独具优势?

Hadoop在国内使用差不多快6年左右了,目前来看Hadoop在互联网行业使用的比较广泛,主要用于:   
  1)日志的存储和离线分析。
  2)基于Mahout的推荐挖掘。
  3)使用Hbase来实现一些半实时的应用。

-目前企业应用Hadoop最大的困难是什么?

在互联网企业Hadoop的使用还是比较好的,但是在传统的行业里面(银行、电信),使用Hadoop还是有困难的。   
  1)Hadoop的安全性不能满足他们的需求。
  2)Hadoop的人才缺少。
  3)最重要的是怎么把传统的业务迁移到Hadoop平台上来处理。

-根据您的了解,目前Hadoop发展的情况如何?

Hadoop在未来5-10年还是海量数据存储和计算的首选工具,目前发展的非常迅速,而且正在从互联网行业向传统行业发展。

-请谈谈你在这次Hadoop培训上即将分享的话题。

我将会分享Hive实战课程,希望通过这次分享,能够让大家掌握使用Hive来分析Hadoop上面的数据。这次讲课以一个Hive的项目开始,来逐一讲解Hive的常用功能和实战经验。

-哪些人群应该来参加本次培训?会对他们有哪些帮助?

  1)对Hadoop感兴趣的人
  2)数据分析师
  3)DBA

更多精彩尽在2014年5月20日“Hadoop在企业中的应用实战”培训,目前报名可享受三人成团优惠价!马上报名!

往期采访文章:

董西成:Hadoop将在高速发展和完善中扩大优势!

冼茂源:HBase在垂直搜索业务以及数据存储中的应用!

叶琪:Hadoop不是万能的 要明确场景扬长避短


以“ 云计算大数据 推动智慧中国 ”为主题的 第六届中国云计算大会 将于5月20-23日在北京国家会议中心隆重举办。产业观察、技术培训、主题论坛、行业研讨,内容丰富,干货十足。 需要购买的朋友,请抓住这最后的机会,点击报名!

对抗苹果?豪雅联合Google、Intel开发智能奢表 VR产品技术解析之三星Gear VR 雅虎北研即将关闭 人才抢夺战迅速拉响 移动应用中的AR开发,5款最受欢迎工具推荐! 中国黑客Pwn2Own再创佳绩 Keen Team三年五夺魁 星环CTO孙元浩:技术解析Transwarp Inceptor是怎样炼成的 第七届中国云计算大会将于6月3-5日在北京召开 两大设计模式 塑造高可读性的网页布局 IP争夺战:任天堂与DeNA联手意味着什么? UNITE 2015干货不断,三天日程抢先看! iOS 8发布近一年,苹果HomeKit都带来了什么? Facebook开源移动网络测试工具Augmented Traffic Control 用JavaScript开发移动原生应用,Facebook正式开源React Native! 《知性》,探寻移动化社区的敏感带 【程序员电子刊精选】技术人员如何参与产品设计讨论之激活那一潭死水 Google开源代码构建工具Bazel 长点心吧!为啥健身应用让你越减越肥? 微信公众号能删除单篇文章了 安卓Android手机应用开发入门书籍推荐 自动释放内存!Facebook推出强大Android图片库Fresco 《近匠》AR学校:从教育领域看增强现实机遇何在 专访Mellanox CEO Eyal Waldman:InfiniBand与以太网齐驱并进 性能更胜一筹 IM助你打造千万级App——容联•云通讯线下沙龙 乐视智能硬件再发力,超级自行车今发布 专访格灵深瞳CTO赵勇:为" 计算机视觉" 赋予智慧的光芒 【程序员电子刊精选】水火不容?研发人员也是产品经理! 如何打动用户?携程用户体验实践分享 【征文】Java二十周年特别策划——谈谈我与Java的那些年、这些事 Facebook的愿景以及虚拟现实的未来 iBeacons一年回顾 英特尔中国30周年之际 IDF上你需要了解的5件事 关于Oracle的数据类型问题? 请问在vc中怎样创建Outlook对象 关于Cable Modem,高手指点。 毕业论文怎么作??????????? 新手送分(解决即给分) 天生爱吃冰激凌! 江湖告急!!!!! 整理 FAQ 的时候 为什么 总是出现 贴子内没有这个人的回复!!!:xxxxx 如何删除一段时间的记录?????(兄弟们帮帮我) 关于 Treeview控件,请高手指教。 推荐好书 Borland Delphi 6 中文企业版哪里有免费下载????????????????????500分 ADO中同一个Connection打开的RecordSet个数有没有限制? 我请教一个关于恢复数据库的问题!!!急急 关于特殊字符的问题!!!!!!!!! 要同时以cascade风格显示10个MessageBox对话框,请问有无可能? 如何用windows2000收发传真? yangjf接分 ASP.NET如何调用mschart asp.net中利用owc10生成了一个EXECL文件,但是不知道如何控制字体大小,及单元格的边框 数据库问题,请高手指点。 本人基础较差,刚刚学习c++,请教一个简单问题!!!! 为什么从左侧树状菜单进入论坛显示时 所有的 情形都是2月28时的贴子状况 笔记本安装SQL Server 2000老出问题 CSDN邮件期刊用什么打开呀?? 怎样用java把数据库里读出来的数据按自己定义的格式写入一个word文件 请问高手,PB7窗口属性面版里的窗口颜色下拉列表中的自定义如何使用。我看到有四个custom,怎样设置,多谢。 关于j2ee服务器定位模式(Service Location pattern) 在网页中怎么样直接运行可执行文件? ORALCE中的首选身份证明的问题 Collections 添加元素,怎样指定添加的位置?我想添加到最开始。 关于字符串长度的问题,我想len("ab你好")=3,而不是等于4,即将虑大小写和数字的问题 listview中怎样根据key ,找到这个listItem 12台计算机要接入宽带,怎么实现?马上散分!!!!! 十万火急!ddvboy、daniel007、sweethzp大虾请进,用Epson-LQ1600K打印381*297工资条,使用QuickReport,选A3纸,预览正常,可平打印右 公共IP问题 把图片存进SQL中??? 看过深入浅出mfc的同志进来看一下。 CDC画图一问,在线等待,谢谢! CFileFind为什么列不出网上邻居的共享目录的文件? 散分的如施舍,似炫耀!接分的如祈求,似可怜! LINUX的播放器咋这么傻啊 如何将小数转成整数,请看例子: 请问哪里有处理微积分等数学运算的控件? sos!!!打包软件!!!! 请问C++编程思想第二版有中文电子版吗? 一个困扰了我很久的问题,关于用BDE连SQL SERVER,请大侠请教? update() 读出PCI设备的ROM后如何找到初始化程序入口? 求助:能否提供一些关于VB二级试题的网站? 如何在VC下使用ADO访问paradox数据库文件? 位于长江上游的大型水利枢纽A小浪底B葛洲坝C三峡D丹江口 地球轨道为什么是椭圆的? 声波公式 长江水能资源丰富,蕴藏量占全国的(),主要集中在()河段,建成了世界最大的()水利枢纽. 地球轨道是椭圆,太阳在一个焦点上,为什么没有在另一个焦点上也有一个太阳.这里地球和太阳泛指宇宙中同类星球.就是说为什么只有一个焦点有,另一个焦点没有星球?无 两物体质量相等,惯性一定相等, 用向量自回归模型之前需要做ARCH异方差检验吗? 保险股票债券储蓄这四种那种是针对风险的投资方式,我说的是针对风险的投资,不是那种风险最大la "为我们的大树,做一片美的叶子吧!"这句话怎么理解 求助一元回归模型没有异方差是不是就意味着没有其他影响因素啊 公司地面铁板碰到水就生绣,有什么好的办法清除铁绣 做一片美的叶子夹子 细菌性感冒如何治疗 喝绣水会补铁吗? 质量相等的物体 惯性相等吗 方差的公式 为什么铁会生绣 做一片美的叶子.阅读. 养细菌最好的办法是什么?... 染织企业生化池的细菌究竟怎么样可以养的最好.请大家给点意见 比较三类生态研究方法的利弊? 作者为表达思想感情,是如何写《做一片美的叶子》的? 基础化学(案例版)课后习题解答作者 席晓岚医学生用书 求问:一种绿色的,高一米左右,杆花纹长得像蛇一样的树(或许是草本植物).叶,杆皆翠绿色,较矮,高度在几十厘米到一米五之间左右,长果实的杆则细长笔直而圆,杆直径三四厘米左右.杆表皮 《做一片美的叶子》中的“生活中的大树”是指什么? 603《基础化学》 科学出版社,2006年6月 李保山主编 是哪一本书啊?第一版还是第二版. 动能和动量有什么关系?为什么动能的导数为动量?请讲详细一些, 1,引导中国先进文化前进的旗帜是什么?2,这一旗帜引领的当代中国先进文化的科学内涵是什么? P(k=x)=(ab^k)/k!且期望E(X)=2,求常数a,b. 有哪些蛇是绿色的有哪些种类的蛇是绿色的?我只知道绿曼巴和竹叶青~越多越好哦~ 为什么说马克思主义是引导中国先进文化前进方向永不褪色的旗帜? 在医疗中,我们一般用什么方法杀死细菌和真菌? 股票 储蓄 债券【企业,政府,金融】 保险风险 收益比较两两分别比较 最大静摩擦力跟物体水平匀速运动时受到的摩擦力有什么关系?当拉力大于最大静摩擦力时,那运动的时候受到的摩擦力比最大静摩擦力要大吗? 世界上没有两片相同的树叶 有感作文急用 绿色的蛇是什么蛇 在建立生物膜模型的过程中,结构与功能相适应的观点是如何得到体现的? 树叶的回音 感悟 高手进. 在线等.急~~~~~转眼就到了大四,大家就要天南地北地实习去了.离校那天,当我狼狈地拖着大大小小的行李走出宿舍楼时,我呆住了.班里的男生都在,他们是来送我的!男 银行存款,股票,房产,基金,保险,外汇,期货,债券的流通性,风险性,收益性,变现能力的差别. 生物膜上在形态结构上共性模型是 赏析、感悟:曲曲折折的荷塘上面,弥望的是田田的叶子.叶子出水很高,像亭亭的舞女的裙.层层的叶子中间曲曲折折的荷塘上面,弥望的是田田的叶子.叶子出水很高,像亭亭的舞女的裙.层层的 叶子的风姿 主旨窗前有一棵树,树上有一片叶子.我望着它,它也望着我.叶总是微微的摇摆着.我很好奇,问:“叶,为什么你老是摆动?” “我想飞.”它说.“叶即是叶,永远不可能像鸟一样飞的. 求邯郸学步的原文及解释!急 无线电波是干什么的? 一片树叶 对生与死的感悟 投资产品(股票、债券、风险投资、房地产等)的流通性和风险有无关系?比如国债的流通性比较大,是不是和风险小有关?股票流通性低,和风险大有关吗?厄,股票那个流通性真不是太懂…或许 关于无线电波首先无线电波能传送数据吗?就是一些平时靠人工记录的数据,电脑记录然后通过无线电波发送出来.其次如果能传送接收,应该是不收费的吧? 扫描隧道显微镜是怎么清楚的探测物体表面的原子的? 水通电分解这一变化属于 变化?其中原子种累是什么?原子个数多水通电分解这一变化属于 变化?其中原子种累是什么?原子个数多少?分子种类是否改变? 茂密的树林可以阻挡沙尘暴,可以挡住洪水,还可以. 用扫描隧道显微镜才能观察到原子在固体表面的排列情况,可得出结论A原子是一个实心球体 B原子是静止不动的C原子是真实存在的肉眼是看不见的粒子 D原子空间有很大的空间 “要坚持社会主义先进文化前进方向”最根本的要求是什么 一个做直线运动的物体,某时刻的速度是10m/s,那么这个物体A.在着一时刻前0.1秒内的位移一定是1米B.从这一时刻起1秒内的位移一定是10米 C.从这一时刻起10秒嫩的位移可能是50米 D,如果从这一时 通过扫描隧道显微镜(STM) 能说明原子还可以再分吗 化学方程式中的催化剂条件怎么打 一个作直线运动的物体,某时刻的速度是10m每秒,那么这个物体在这一时刻之前的1s内的位移可能是10m是否正确 为什么在扫描隧道显微镜下的苯分子只能看到三个碳原子 关于化学方程式中催化剂的问题2NO2+2CO→N2+2CO2 SO2+2CO→S+2CO2这2个方程式的催化剂是啥? 下大雨之后为什么会出现彩虹 什么是地球椭圆轨道? 一个物体在水平地面上以20N的力匀速运动,那么能否以30牛的力匀速运一个物体在水平地面上以20N的力做匀速直线运动,那么能否以30牛的力匀速直线运动不改变力的方向 女子看上弟弟嫁给哥哥 遭家暴虐待起诉国考报名结束 最热职位“七千挑一”胡万林涉非法行医致死案:学员各交万元永康两家企业排污被当地镇政府责令停产中国军工产业向全球进军 开始与西方竞美媒称土购中国导弹或是把特洛伊木马塞德国就默克尔手机或被美监听一事召见美美国情报机构被爆监听35名国际政要电俄要求美与“俄机构在美招募间谍”指控习仲勋在洛阳:要求管好部队纪律(组图广州公务员2012年人均工资加补助为专家:我国在售5大类17种转基因生物美方称无迹象显示两美国人遭绑架是恐怖中国画家潘义奎获艺术界\"诺贝尔\"土耳其已用中国导弹试验 硬顶美国别买美方称无迹象显示两美国人遭绑架是恐怖俄要求美与“俄机构在美招募间谍”指控美方称无迹象显示两美国人遭绑架是恐怖黎巴嫩军方破获一武装团伙纽约黄金期价24日收高美国民警卫队设施内发生枪击案两人受伤热议皆因“状元情结”在作怪承建方火了,工人用集装箱堵桥涟水法院司法拍卖平台入驻淘宝网牙齿居然“冻”出病了曝张伟平张艺谋亲密同游淮安区开通99.2“马路播报”派驻纪委成为“遮羞布”工资“被公开”难为公务员收入“加密”七桥瓮公园:看珍贵蝴蝶“我在东莞玩被抓”南京飞外地机票现“白菜价”科比受访表示想早点复出公务员工资“被公开”江苏今年招录6480名公务员淮安经济技术开发区推进土地节约集约利疑遇恶劣天气坠毁精神病患者离家无处御寒第十四本严歌苓友人:春节前已生二胎出境自由行产品提前2天可预订出行童星秀兰·邓波儿辞世
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘