说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

刘刚:从互联网到传统行业 Hadoop发展迅猛!

HTML文档下载 WORD文档下载 PDF文档下载
刘刚表示,目前Hadoop的应用正在从互联网行业到传统行业快速的扩张,但是在传统行业中Hadoop还是要面临很多困难:Hadoop的安全性不能满足他们的需求;Hadoop的人才缺少;怎么把传统的业务迁移到Hadoop平台上来处理。

2014年05月20日,CSDN携手ChinaHadoop小象社区将打造一场涵盖分布式在线存储系统HBase、数据仓库Hive、Hadoop在电信运营商的应用实践等内容的“Hadoop在企业中的应用实战”高端技术培训。

此次“Hadoop在企业中的应用实战”培训的起因很简单,时下数据已经成为当今企业的核心竞争力,拥有大数据并智慧地使用和运营数据成为企业不可缺少的成功要素。Hadoop生态系统提供了一种实用的、经济有效的、可扩展的架构,帮助企业存储、管理和处理海量数据。业界在Hadoop上的兴趣和投资形成了包括开源软件和商业化软件的整个生态系统,Hadoop迅速成为大数据处理方面的业界事实标准。越来越多的企业急需引入Hadoop技术人才!于是CSDN携手ChinaHadoop小象社区共同打造了此次“Hadoop在企业中的应用实战”!

在本次培训开始前,我和本次培训的讲师刘刚做了一次简单的沟通,他表示将会在5月20日“Hadoop在企业中的应用实战” 分享Hive实战课程,希望通过这次分享,能够让大家掌握使用Hive来分析Hadoop上面的数据。这次讲课以一个Hive的项目开始,来逐一讲解Hive的常用功能和实战经验。报名点击!

刘刚          ChinaHadoop小象社区核心成员

多年Hadoop开发和维护工作,擅长搭建基于Hadoop的海量数据平台和处理TB级数据。 擅长基于MR的算法开发,参与多个Hive、HBase和Mahout的行业应用案例。 《Hadoop应用开发技术详解》作者,《海量数据基于记录级别的容错》专利所有人。

以下是采访原文

-什么原因吸引你钻研Hadoop技术?

记得四年前跟着PKU的曹老师做项目的时候,曹老师让我去调研大数据技术,那个时候hadoop资料很少,只能去看官方的文档。印象最深的是花了两周搭建了一个节点的hadoop集群。过程虽然困难,当搭建成功的那一刻,所有的困难全部变成了宝贵的经验。

Hadoop自带了分布式存储(HDFS)和分布式计算(MapReduce),随着互联网的快速发展,网络上产生的数据量越来越大,这些数据80%以上是非结构花的,所以存在传统的Oracle或者Mysql里面已经不合适了。这个时候,Hadoop可以完美的解决这个问题。不仅解决了存储问题,同时计算的问题也解决了。

-对于解决哪些问题Hadoop独具优势?

Hadoop在国内使用差不多快6年左右了,目前来看Hadoop在互联网行业使用的比较广泛,主要用于:   
  1)日志的存储和离线分析。
  2)基于Mahout的推荐挖掘。
  3)使用Hbase来实现一些半实时的应用。

-目前企业应用Hadoop最大的困难是什么?

在互联网企业Hadoop的使用还是比较好的,但是在传统的行业里面(银行、电信),使用Hadoop还是有困难的。   
  1)Hadoop的安全性不能满足他们的需求。
  2)Hadoop的人才缺少。
  3)最重要的是怎么把传统的业务迁移到Hadoop平台上来处理。

-根据您的了解,目前Hadoop发展的情况如何?

Hadoop在未来5-10年还是海量数据存储和计算的首选工具,目前发展的非常迅速,而且正在从互联网行业向传统行业发展。

-请谈谈你在这次Hadoop培训上即将分享的话题。

我将会分享Hive实战课程,希望通过这次分享,能够让大家掌握使用Hive来分析Hadoop上面的数据。这次讲课以一个Hive的项目开始,来逐一讲解Hive的常用功能和实战经验。

-哪些人群应该来参加本次培训?会对他们有哪些帮助?

  1)对Hadoop感兴趣的人
  2)数据分析师
  3)DBA

更多精彩尽在2014年5月20日“Hadoop在企业中的应用实战”培训,目前报名可享受三人成团优惠价!马上报名!

往期采访文章:

董西成:Hadoop将在高速发展和完善中扩大优势!

冼茂源:HBase在垂直搜索业务以及数据存储中的应用!

叶琪:Hadoop不是万能的 要明确场景扬长避短


以“ 云计算大数据 推动智慧中国 ”为主题的 第六届中国云计算大会 将于5月20-23日在北京国家会议中心隆重举办。产业观察、技术培训、主题论坛、行业研讨,内容丰富,干货十足。 需要购买的朋友,请抓住这最后的机会,点击报名!

分析师称应出售Bing?除非微软倒闭,否则不可能卖Bing Go Mobile沙龙第二期:软硬整合与创客精神 专访西电黄宝林:《基于GPU的并行NMF网络聚类算法》获奖背后故事 友友姚宏宇:用C,C++和Java实现自主研发之后,放开心态迎“高朋” 新技术对传统学科的颠覆:系谱网使用大数据寻亲问祖 IDC:2015年全球平板电脑出货量将超PC Web开发者的福利 30段超实用CSS代码 库克出席D11科技大会:苹果公司没有陷入麻烦 千兆的带宽是不够的,最新研究将我们带入400G时代! 告诉你一个事实:移动互联网依然不大 一切才刚刚开始 戴尔的10亿美元云扩建计划到底是什么? iOS vs. Android,应用设计该如何对症下药? 扁平化设计五大原则 16种折磨开发者的方式 2013年度中国优秀开源项目征集活动正式启动 技术趋势:产品设计向“钱”看 服务器领域:旧时代已过 新时代正在降临 速度与金钱的碰撞:F1赛车将搭上大数据的东风 中国·北京第一届开源大会Hadoop专场侧记:Hadoop已经成为大数据分析平台的标配 Marissa Mayer为何带雅虎重回门户时代? 开发者最爱的三款开发工具 Facebook开源JavaScript库:React 硬件天堂深圳行:从Seeed Studio、Knewone到柴火创客空间 消费应用开发难赚钱?做个企业app store吧 开发开源软件的智慧:够简单,很好用 历届中国云计算大会PPT集萃(终章):架构到实践的全面解析 透过现象看本质:详谈数据可视化 专家观点:HTML5无法彻底抹杀Native应用 Google地图工程主管Raj Shah跳槽至微软在线服务部门 微软证实Windows 8.1引入类“开始”按钮 系统6月26日开放下载 PHP开发者意向调查:移动开发+云服务成为焦点 高分解问,请教高手!关天GIS! 如何判断窗体中的某个控件是textbox控件?或判断窗体中textbox的个数? 如何调用返回不定字段个数的存储过程 那里能找到rational rose 有关FORM与ACCESS数据库的连接 如何使用photoshop把图像缩小到指定大小? 关于某种文件关联的问题 为什么用net send发送的消息有关不掉,点了好多次确定也没用。 怎么保存到数据库中?急急急! 电脑出问题了。 tomcat4.01+apache2.046组合问题:单个的都能运行,...可以加分.. %u的问题 如何调整对话框上工具栏的状态 关于query控件的一个问题 如何结束一个线程? FastReport怎么将没有记录的地方也画上格子??? 我的oracle9装上去之后怎么有7。2G那么大??并且还连不上MANAGEMENT SERVER只能独立启动??请指教!! Fastreport与quickreport那个更好用? 进者有分. 强烈要求铲除全国所有的收容所!!! 要用什么软件才能将CMOS参数备份到某个文件夹中? 请问怎么在建表代码里定义关键字? 请问把数据写入ListView控件内,有什么办法可以快点? win2k server dns 求助! 我在易趣上竞的一个数码相机,只要250元,但是只能拍26张相。我不知道是真是假? 一个搞不定的恶意网站 cout与printf的问题 没有路由怎样用一台服务器实现300台左右的电脑上网? ResultSet里读出数据的参数问题,马上给分 netvt(唯她 v1.1.1),进来拿你应得的分 如果我的程序中用了VFP,但是用户可能并没有装VFP,有什么好的办法直接替用户解决了这个问题,而不是提醒他自己去装 怎么保存到数据库中?急急急! 我用treeview显示数据库的数据,增加一条新记录后,要怎么样才能马上在treeview显示? 无法传值问题,高手急救!!!!!!!!! 在线等待:怎么为datagrid控件的某一格赋值? 请教如何在input上传筐里面限制文件类型? java的图形设计比如swing有前途吗?大家来讨论下,迷惑中。。。 计算机静电问题!! 错误在那里 请教批量update出错问题 请问串口方面的? QQ使用MFC42.DLL, 数据库的记录有文本、有图片、我想给它排成word样式的A4版预览、再打印如何实现 请问,如何在Form中画图啊??/ 水晶报表问题。急呀!! 一个奇怪的问题 TreeNode控件有折叠下一级节点这个命令吗? 大家好,请帮忙提供在C#中做帮助文件的好的方法或网站吗?谢谢了 QQ发送信息老是附加一个网址,有什么办法搞定它? 操作系统挂了,重装后如何恢复ORACLE DATA? 初学不懂:调用ActiveXObject("Microsoft.XMLHTTP") 时用的什么命名空间? 创建临时表 ↖↗↘↙这四个符号怎么打 #儿时疑惑#我为什么不能像小鸟那样自由飞翔? 成长的桥阅读文中画横线的句子在文中起什么作用大神们帮帮忙 子曰:“君子食无求饱,居无求安,敏于事而慎于言,就有道而正焉,可谓好学也已.”可谓好学也已 中通假字是什么,再将通假字解释 #儿时疑惑#鸟为什么会飞, 文中画横线的句子爸爸的花儿落了有什么含义它与文章要表现的中心有什么关系拜托各位大神 核能 核 能(1)核能俗称原子能,它是原子核里的核子——中子或质子,重新分配和组合时释放出来的能量.核能分为两类:一类叫裂变能,一类叫聚变能.(2)核能有巨大的威力.1公斤铀原子核全部裂 #儿时疑惑#卡罗莱纳鹦哥鸟和拟斑马和袋狼现在还有吗? 解释画横线的句子(宋国后面还有有一个“笑”) 核能是什么 鹤龟同池,共有80只脚.如果把只数互换,则有88只脚.求龟、鹤各有几只? 哪位大神可以给我解释一下图中画横线的那句话是什么意思?~~::>_ 英语短文答案 帮助你们更快完成作业,更快玩电脑.In China if you are seven,you have to go to school.At school you learn different subject.Science is one of them.We have three science classes a week.They are on Tuesday,Wendesday and F 河中鹤和龟共有100只脚.如果鹤的只数与龟的只数交换则共有脚92只,求鹤、龟原来各有多少只? 有限集合A=B的充要条件是什么?全题叫:有限集合S中元素个数记作card(S).设A、B都为有限集合,判断下列正误.我只问问A=B的充要条件是card(A)=card(B)为什么是错误的?正确的应该是什么? 有没有英语短篇作文?求70到150字左右.可以说放鞭炮的,玩电脑的等要有翻译的 乌龟和鹤共有200只眼睛,共有350只脚问,乌龟和鹤各有几只? 氢气有几个质子阿我还知道你们是怎么只到你们是怎么知道化学元素的质子数阿 必须用记的嘛 谁帮我写一片英文的做文啊 是初2年级水瓶的作文 上帝保佑 阿门要写关于这 的 生日:He was born in 1996.He was bor on Fed 2nd.1996.His birthday is Feb 2nd.性格:He is an outgoing student and he always makes us laugh.H 龟、鹤共有29只,有脚92只,龟和鹤各有多少只? 要是总有人跟你说,哟哟切克闹,切克闹啊切克闹. 潘多拉的秘密 内衣 怎么样?今天逛街看到一间潘多拉的秘密的内衣店,装修好好,营业员说是法国品牌,想问下有谁知道是不是法国品牌,看他们质量很好,就是价格有点小贵.急 急 急 文言文杯弓蛇影的意思 哟哟切克闹什么意思 卵胎生和卵生、胎生有哪些不同点? 屌丝气质呢?是说男的女的? 哪里出来的? word中如何加粗表格线 大白鲨是胎生还是卵生还是卵胎生 超蓝色星系是什么超蓝色星系的定义什么?百科上怎么没有TT PS 如何移动绘制中选区在PS里,如何在边绘制选区(比如绘制圆形选区)过程中边调整绘制位置呢? 胎生、卵生、卵胎生的动物分别有哪些胎生卵生卵胎生的动物分别有哪些,请多举一些, 怎么培养屌丝气质 word怎么加粗表格 龟鹤共池,已知龟比鹤多5只,共44只脚,龟有( )只.鹤有( )只.要算式.,不能用方程解决.,使用假设法. 25÷23精确到十百千分位?25÷23精确到十、百、千分位? 显微镜对生物起到什么作用举例 “小时候,我以为你很美丽,领着领着一群小鸟飞来飞去……”歌名 龟鹤共有脚100只,若将鹤换成龟,龟换成鹤,则共有脚176只,原来鹤多少只,龟多少只? 我寄愁心与明月,后面半句是什么?现在就要! 找几篇理性一点的文章找几篇600字左右的文章 要理性的 不要感性的 不要太长的 最好有感想 没有也没关系啦 这是什么星系赤经 22h25m41s 赤纬 1度16'48.99看起来模糊 副词有哪几类 已知鹤比龟多14只,鹤的脚比龟的脚多18只,问龟鹤各多少只? 怎么知道两个物体组成合外力为零即动量守恒,就是在解答题目时怎么知道用动量守恒解答,例如两棒在磁场 ( )地模拟填上合适的词语 以理性为主题 的作文 有H-、NH2+、H3O+离子吗?有什么反应? “种类”是副词吗 要英语过了四级才有资格考公务员吗? 1.6g NH2-离子中所含电子数 填上恰当的词语 凝聚什么 模仿什么 #儿时疑惑#小鸟为什么会飞?我为什么不会飞? 英语翻译阿门 我甘愿为我犯过的罪作出应有的惩罚 只愿 我所爱的人过上安乐生活 这类副词的用法?angrily differently excitrdly excitingly interestingly decisively 这类副词怎么使用?我觉得它们和形容词的意思差不多啊?怎么区别它们和形容词用法差异呢? 文言文杯弓蛇影解释方,恶,既,疾,不的意思.后世常以“杯弓蛇影”比喻 ,从文中可见乐广的客人 的性格特点 25℃、l0lkPa下,22.4L氢气含质子的数目为3NA, 什么类型的副词可以做表语 #儿时疑惑#为什么小鸟能飞 这个是什么星系? 偷渡惨案再现撒哈拉沙漠 尼日尔发现8“监听门”持续发酵,美国扮演“地球网Google建造数艘集装箱货船引发猜荷兰边城见证《马约》风雨20年美国全球监听引发网络空间深刻变化中国军医表现突出 荣获厄瓜多尔最高荣党报刊文称回避养老双轨制其他改革恐难北京“10·28”事件受伤人员得到全台湾强震众生相:卖场员工拔腿跑 陆客“杀光中国人”事件彰显华裔维权的决心河南100多公里路200人执法 司机财政部:压缩各地公共财政预算结余结转国资委:国企改革方案争取三中全会后出北京禁止中小学售卖碳酸饮料 不利于学浙江省启动外商投资企业服务月银泰十五周年大庆十日 “小怪兽狂欢S10月制造业PMI创18个月新高 经多机构预测PMI将连续13月扩张 海探访日本第一的苗木之乡——匝瑳市(高偷渡惨案再现撒哈拉沙漠 尼日尔发现8解救儿童iPad上瘾 专家称需72小别说不可能!纽约女孩的零废弃生活全球十二个经典蜜月地,有没有你的最爱姑娘,你真的会吃水果吗?湖南的这10个古城镇美到窒息,却没有这么巧,你也长了这张脸啊这个姑娘靠什么样的魅力征服了全球男人生活啊,一不小心就陷入无聊的死循环ENJOY x IDEAT 灵感之味那 | 些 | 让 | 我 | 们 超女中两个真正人生赢家叶一茜和何洁要北京燕京书画院:以德为先 德行天下在高原上跑步你不得不知道的事黑色一周后迎接机会还是逃命黑色一周后迎接机会还是逃命舜天战鲁能首发:舜天雪藏萨米尔鲁能排整理这些知识的人,我觉得你好冷也好萌刘少奇的俄罗斯籍曾孙女 好美!种草|在这个试衣间里,满足你对自己的这里是一些更为直白、勇敢的爱情自愧不如 美国家庭主妇用iPhone胡雪峰:从未经历这么大的新闻发布会
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘