说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

刘刚:从互联网到传统行业 Hadoop发展迅猛!

HTML文档下载 WORD文档下载 PDF文档下载
刘刚表示,目前Hadoop的应用正在从互联网行业到传统行业快速的扩张,但是在传统行业中Hadoop还是要面临很多困难:Hadoop的安全性不能满足他们的需求;Hadoop的人才缺少;怎么把传统的业务迁移到Hadoop平台上来处理。

2014年05月20日,CSDN携手ChinaHadoop小象社区将打造一场涵盖分布式在线存储系统HBase、数据仓库Hive、Hadoop在电信运营商的应用实践等内容的“Hadoop在企业中的应用实战”高端技术培训。

此次“Hadoop在企业中的应用实战”培训的起因很简单,时下数据已经成为当今企业的核心竞争力,拥有大数据并智慧地使用和运营数据成为企业不可缺少的成功要素。Hadoop生态系统提供了一种实用的、经济有效的、可扩展的架构,帮助企业存储、管理和处理海量数据。业界在Hadoop上的兴趣和投资形成了包括开源软件和商业化软件的整个生态系统,Hadoop迅速成为大数据处理方面的业界事实标准。越来越多的企业急需引入Hadoop技术人才!于是CSDN携手ChinaHadoop小象社区共同打造了此次“Hadoop在企业中的应用实战”!

在本次培训开始前,我和本次培训的讲师刘刚做了一次简单的沟通,他表示将会在5月20日“Hadoop在企业中的应用实战” 分享Hive实战课程,希望通过这次分享,能够让大家掌握使用Hive来分析Hadoop上面的数据。这次讲课以一个Hive的项目开始,来逐一讲解Hive的常用功能和实战经验。报名点击!

刘刚          ChinaHadoop小象社区核心成员

多年Hadoop开发和维护工作,擅长搭建基于Hadoop的海量数据平台和处理TB级数据。 擅长基于MR的算法开发,参与多个Hive、HBase和Mahout的行业应用案例。 《Hadoop应用开发技术详解》作者,《海量数据基于记录级别的容错》专利所有人。

以下是采访原文

-什么原因吸引你钻研Hadoop技术?

记得四年前跟着PKU的曹老师做项目的时候,曹老师让我去调研大数据技术,那个时候hadoop资料很少,只能去看官方的文档。印象最深的是花了两周搭建了一个节点的hadoop集群。过程虽然困难,当搭建成功的那一刻,所有的困难全部变成了宝贵的经验。

Hadoop自带了分布式存储(HDFS)和分布式计算(MapReduce),随着互联网的快速发展,网络上产生的数据量越来越大,这些数据80%以上是非结构花的,所以存在传统的Oracle或者Mysql里面已经不合适了。这个时候,Hadoop可以完美的解决这个问题。不仅解决了存储问题,同时计算的问题也解决了。

-对于解决哪些问题Hadoop独具优势?

Hadoop在国内使用差不多快6年左右了,目前来看Hadoop在互联网行业使用的比较广泛,主要用于:   
  1)日志的存储和离线分析。
  2)基于Mahout的推荐挖掘。
  3)使用Hbase来实现一些半实时的应用。

-目前企业应用Hadoop最大的困难是什么?

在互联网企业Hadoop的使用还是比较好的,但是在传统的行业里面(银行、电信),使用Hadoop还是有困难的。   
  1)Hadoop的安全性不能满足他们的需求。
  2)Hadoop的人才缺少。
  3)最重要的是怎么把传统的业务迁移到Hadoop平台上来处理。

-根据您的了解,目前Hadoop发展的情况如何?

Hadoop在未来5-10年还是海量数据存储和计算的首选工具,目前发展的非常迅速,而且正在从互联网行业向传统行业发展。

-请谈谈你在这次Hadoop培训上即将分享的话题。

我将会分享Hive实战课程,希望通过这次分享,能够让大家掌握使用Hive来分析Hadoop上面的数据。这次讲课以一个Hive的项目开始,来逐一讲解Hive的常用功能和实战经验。

-哪些人群应该来参加本次培训?会对他们有哪些帮助?

  1)对Hadoop感兴趣的人
  2)数据分析师
  3)DBA

更多精彩尽在2014年5月20日“Hadoop在企业中的应用实战”培训,目前报名可享受三人成团优惠价!马上报名!

往期采访文章:

董西成:Hadoop将在高速发展和完善中扩大优势!

冼茂源:HBase在垂直搜索业务以及数据存储中的应用!

叶琪:Hadoop不是万能的 要明确场景扬长避短


以“ 云计算大数据 推动智慧中国 ”为主题的 第六届中国云计算大会 将于5月20-23日在北京国家会议中心隆重举办。产业观察、技术培训、主题论坛、行业研讨,内容丰富,干货十足。 需要购买的朋友,请抓住这最后的机会,点击报名!

“叫好不叫座”的石墨烯也许会给我们带来更清凉、更长寿的计算机 微软WPC 2013:Windows 8.1将于8月底提供给OEM合作伙伴 TIOBE 2013年7月编程语言排行榜:PHP强势回归 扁平化设计或成下一个流行趋势吗? 永生、登天、出唱片、开托儿所,IT大佬业余还玩什么? 终于盼来了:苹果iOS7 Beta 3、Xcode5预览版 可堆叠的创意 开源硬件Microduino开发团队专访 致任天堂的公开信:我想在iPhone上玩超级玛丽 为什么OpenStack被视为新的Linux? Netflix开源Pig可视化框架:Lipstick Tangle:一个开源的数据交互式JS库 云储存服务Dropbox用户达1.75亿 旨在同步而非保存 Windows Server 2012 R2里十个极好的新功能 走向台前的地图服务 彰显LBS应用的创新力量 调查显示:1/5的企业采用SDN技术 Chrome 28正式登陆Windows及Mac 成首个使用Blink内核的浏览器版本 不只是Chrome,Firefox也开始支持Web Audio API 验证HTML的5个原因和5个资源 微软WPC 2013:Office 365融合BI,Cloud OS加速,Intune折扣,SQL高版本数据库等 移动开发者走向全能开发者的五大技能 360和西部数码战略合作 一键开启为国内30万家网站提供免费安全服务 中兴携手英特尔发布基于X86的Geek手机 应用生态建设仍需努力 微软将WP周期延长至36个月 明年推企业功能包 Gartner:全球PC出货量二季度下滑11% 联想成全球最大PC厂商 用来简化开发任务的20个JavaScript类库 煎饼,娇妻,Belief:黄太吉的移动互联网营销 AWS大降价:最高打两折 推荐十款超赞的Google Chrome扩展插件 在团队中进行单元测试/TDD的12条经验 小米游戏中心6月数据报告:页游转手游怎么搞? 司机请专心:安全是车载APP要解决的大问题 装上JDataConnection Server之后,在数据源ODBC中的驱动程序列表中没有JDBC驱动算不算问题,高分求解! 短消息服务提供商(SP)程序问题 activeX控件问题,急盼高手帮助! 请教八数码难题的解法! 如果一个dll,在它里面有一个窗口,而有一个函数是这个窗体类的一个函数,那么如果在使用这个dll文件中的这个函数。 谁能给一个测试是否是EMAIL的函数?急! 如何实现关键字查询? 只能让家里的电视出现更多的台,比如解码器什么的! 急问:那位了解 sys/wait.h ,它的功能是什么? 求MICROSOFT VISUAL STUDIO.NET 2002 中文企业版,2003不要,谢谢~ saucer(思归)在吗?有问题请教! 哪里有C++ Builder 下载的。 TTrayIcon中的图标颜色只能显示16色的吗? HELP!!!XML怎么写成物理文件到本地? 这是为什么呀?电脑高手请进。。。 也说技术人员创业 高分:虚拟主机问题 快被OVERLAY搞死了,急救 中了“盗贼”木马,如何删除? 请网络高手来看看这个问题,给我点提示和建议?急急急 汉字在exe 文件的十六进制 能否 转换得来? 气死人了,在jbuilder8中被logic:iterate搞死了,累,急救 pb数据窗UPDATE的怪问题!很怪!!! 配置问题求救! 请问Access中可以用select case ........when else end的函数吗? 一定要把AutoPostBack设定成true才能响应事件? 但是那样动态生成的控件又都没了…… 急 哪位知道哪有OpenGL高级编程的培训 短消息服务提供商(SP)程序问题 那里能弄到解码器~~~~~~~~~~~~~~~ 马上就要毕业了,请先辈们指点迷津!!! 安装 Duwamish 7.0 和 PetShop 3.0 时的问题? 一个二维数组的问题,请指教 tdbgrid 锁定行,使改行不可编辑 能否实现这样的功能:如果是A登陆,则可以看见一个按钮a;如果不是A登陆,则按钮a不可见。 本人查看过往的薪水调查的贴子,看到大多数人都在贫困线(2K)下,这JSP技术已经没什么钱途了.转向吧! rm格式的文件不能正常播放用什么软件修复呢? 请问用java编好的软件,如何打包发布呀?急~~~ 怎样在对话框里设置背景图片? 帮帮我!我弄了好久拉! 请解决了clientdataset的filter中使用like过滤中文单汉字的高手进来解决一下 如何禁止菜单栏“窗口”项中的窗口列表 如何用xml显示,从数据库图像字段中导出来的图片信息,显示为图片!代码如下... 紧急求助:CSocket的问题 请教:程序先往一word模板中写入数据,word显示出来后,不允许修改,怎么能实现?(在线等待) 可不可以告诉我操作系统里的LPVOID当我在C#中调用API时应转化为哪个类型? boot.ini文件找不到了 再请大家告诉以下连接数据库的问题,为什么总是连不上?!!!! 6711和6211的区别!!!!!!!! C#中如何在代码中实现窗体上所有相同控件的属性赋值,给个示例代码 牛人们,能不能给我一个lod的源程序,或者网址,小妹急用!(在线等) 看完代码后请帮助我 on the contrary这个词组是什么性质的比如名词动词等等这种短语的专属名称是什么? 走过的风景都很美 ,下句用什么好? 描写古代女子的句子要短一点, “重中和之道,尚善教之法”是什么意思,出自哪里? foreign的中文是什么 the new a year ,the new sta 君子安贫, 璇旎怎么读 名词释义:旎璇、颦蹙. 风光璇旎什么意思 “距离产生美”下一句据说是名人名言? 今年全国平均雾霾日数为4.7天 系5风行网日均覆盖超对手 一不留神成土豪佛山“栏脆脆”案终审 被害方诉求获得徐州“交巡警乱罚款”处理结果 停职撤云南泸西致9死爆炸枪击案2名主犯被执中纪委要求严禁公款购买印制寄送贺年卡中央下拨综合开发资金8.05亿元支持两部委取消314项行政性收费生效 重江苏环保厅总工:今年最后两个月霾污染岚演唱会转卖门票遭揭发 杰尼斯重罚黄云南泸西致9死爆炸枪击案2名主犯被执昆明虐海鸥事件伤了谁的心?美媒:巴尔德斯或加盟墨西哥联赛欧战最新积分:英超领先意甲曝球员困惑范加尔拼命时刻用小将北京将推积分落户制 父母配偶子女可随雾霾逐渐减弱 河南局部地区将出现雨雪鹤壁市住房公积金管理中心副主任李肖芳郑州警方多措并举确保群众安全顺利出行产城互动走出城镇化新路安阳微型党课走俏基层 12万人次基层河南日报报业集团与上海文化产权交易所时空妖灵错跟总裁潜规则时空妖医智能电脑择富人生往生记传奇永恒的经典阐教大师兄龙与地下城之武僧至强剑道成人童话孟连旅游弋阳旅游新巴尔虎右旗旅游阿尼玛卿旅游将乐旅游谷城旅游肥东旅游塔什库尔干塔吉克旅游得耳布尔旅游永年旅游大田旅游
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘