说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

刘刚:从互联网到传统行业 Hadoop发展迅猛!

HTML文档下载 WORD文档下载 PDF文档下载
刘刚表示,目前Hadoop的应用正在从互联网行业到传统行业快速的扩张,但是在传统行业中Hadoop还是要面临很多困难:Hadoop的安全性不能满足他们的需求;Hadoop的人才缺少;怎么把传统的业务迁移到Hadoop平台上来处理。

2014年05月20日,CSDN携手ChinaHadoop小象社区将打造一场涵盖分布式在线存储系统HBase、数据仓库Hive、Hadoop在电信运营商的应用实践等内容的“Hadoop在企业中的应用实战”高端技术培训。

此次“Hadoop在企业中的应用实战”培训的起因很简单,时下数据已经成为当今企业的核心竞争力,拥有大数据并智慧地使用和运营数据成为企业不可缺少的成功要素。Hadoop生态系统提供了一种实用的、经济有效的、可扩展的架构,帮助企业存储、管理和处理海量数据。业界在Hadoop上的兴趣和投资形成了包括开源软件和商业化软件的整个生态系统,Hadoop迅速成为大数据处理方面的业界事实标准。越来越多的企业急需引入Hadoop技术人才!于是CSDN携手ChinaHadoop小象社区共同打造了此次“Hadoop在企业中的应用实战”!

在本次培训开始前,我和本次培训的讲师刘刚做了一次简单的沟通,他表示将会在5月20日“Hadoop在企业中的应用实战” 分享Hive实战课程,希望通过这次分享,能够让大家掌握使用Hive来分析Hadoop上面的数据。这次讲课以一个Hive的项目开始,来逐一讲解Hive的常用功能和实战经验。报名点击!

刘刚          ChinaHadoop小象社区核心成员

多年Hadoop开发和维护工作,擅长搭建基于Hadoop的海量数据平台和处理TB级数据。 擅长基于MR的算法开发,参与多个Hive、HBase和Mahout的行业应用案例。 《Hadoop应用开发技术详解》作者,《海量数据基于记录级别的容错》专利所有人。

以下是采访原文

-什么原因吸引你钻研Hadoop技术?

记得四年前跟着PKU的曹老师做项目的时候,曹老师让我去调研大数据技术,那个时候hadoop资料很少,只能去看官方的文档。印象最深的是花了两周搭建了一个节点的hadoop集群。过程虽然困难,当搭建成功的那一刻,所有的困难全部变成了宝贵的经验。

Hadoop自带了分布式存储(HDFS)和分布式计算(MapReduce),随着互联网的快速发展,网络上产生的数据量越来越大,这些数据80%以上是非结构花的,所以存在传统的Oracle或者Mysql里面已经不合适了。这个时候,Hadoop可以完美的解决这个问题。不仅解决了存储问题,同时计算的问题也解决了。

-对于解决哪些问题Hadoop独具优势?

Hadoop在国内使用差不多快6年左右了,目前来看Hadoop在互联网行业使用的比较广泛,主要用于:   
  1)日志的存储和离线分析。
  2)基于Mahout的推荐挖掘。
  3)使用Hbase来实现一些半实时的应用。

-目前企业应用Hadoop最大的困难是什么?

在互联网企业Hadoop的使用还是比较好的,但是在传统的行业里面(银行、电信),使用Hadoop还是有困难的。   
  1)Hadoop的安全性不能满足他们的需求。
  2)Hadoop的人才缺少。
  3)最重要的是怎么把传统的业务迁移到Hadoop平台上来处理。

-根据您的了解,目前Hadoop发展的情况如何?

Hadoop在未来5-10年还是海量数据存储和计算的首选工具,目前发展的非常迅速,而且正在从互联网行业向传统行业发展。

-请谈谈你在这次Hadoop培训上即将分享的话题。

我将会分享Hive实战课程,希望通过这次分享,能够让大家掌握使用Hive来分析Hadoop上面的数据。这次讲课以一个Hive的项目开始,来逐一讲解Hive的常用功能和实战经验。

-哪些人群应该来参加本次培训?会对他们有哪些帮助?

  1)对Hadoop感兴趣的人
  2)数据分析师
  3)DBA

更多精彩尽在2014年5月20日“Hadoop在企业中的应用实战”培训,目前报名可享受三人成团优惠价!马上报名!

往期采访文章:

董西成:Hadoop将在高速发展和完善中扩大优势!

冼茂源:HBase在垂直搜索业务以及数据存储中的应用!

叶琪:Hadoop不是万能的 要明确场景扬长避短


以“ 云计算大数据 推动智慧中国 ”为主题的 第六届中国云计算大会 将于5月20-23日在北京国家会议中心隆重举办。产业观察、技术培训、主题论坛、行业研讨,内容丰富,干货十足。 需要购买的朋友,请抓住这最后的机会,点击报名!

开发响应用户输入的数据库web Server-Delphi资料 利用Delphi编程发送E-mail 利用Delphi编写Socket通信程序 利用Delphi开发网络数据库应用 在许多系统中,出于安全或其它原因,常常要求随时对键盘进行监控,一个专-Delphi资料 链接的视觉效果-Delphi资料 如何从域名名得到IP?-Delphi资料 如何动态改变/添加网络设置中的 TCP/IP 的 DNS 地址-Delphi资料 如何获取CapsLock 、 Insert 等键的状态?-Delphi资料 如何在程序中动态取得Win95/98的网络邻居中的工作组及计算机名?-Delphi资料 提高客户机/服务器应用系统性能的一些方法-Delphi资料 网络和通讯编程-Delphi资料 WebBrowser流程讲解及如何判断下载网页成功-Delphi资料 用Delphi 3.0实现运行于浏览器内的客户 用Delphi编写ASP的ActiveX 用Delphi编写CGI程序(五) 用Delphi编写CGI程序返回图象 用Delphi程序获取拨号连接的动态IP地址 用Delphi创建Internet快捷方式 用Delphi实现NetBIOS广播收发 用Delphi实现网络驱动器的映射和断开 用Delphi实现远程屏幕抓取 用DELPHI制作留言板 再谈用Delphi程序获取拨号连接的动态IP地址 在DELPHI程序中拨号上网 在DELPHI程序中获取网络资源信息 在Delphi程序中应用IE浏览器控件 在Delphi中调用NetscapeNavigator 在Delphi中使用flash控件 在Delphi中使用IP控件 在程序中动态取得Win95/98网络邻居中工作组及计算机名-Delphi资料 救命!!pb6.5是不是不支持oracle的blob类型???? 去掉引导信息??? 为什么我用MFC写的单文档程序在别人的没装VC++的机子上不能运行? 用户登录是密码存放在哪个文件夹里? (简单问题) 请问这个程序为什么抛出这样一个违例??? 问题一个,请教! 增值合订本出的我心不甘 我又来提问了~前天复习是发现一道很怪异的题目~ 用activemovie控件打开一个URL,用哪个函数? 如何去掉ACTIVE MOIVE控件下面显示的几个键和进度条 c源程序。 >>>>高分求解!!!我在一个对话框中插入一个active report run time design,但程序运行时却不显示,在vb中却可以,如何解决这个问题?????? 关于sql server的安装 哪里有下载cc编译器的? 关于导出数据窗口数据的问题,明白人请进! delphi可不可以用于自动控制方面的开发呢 如何使对话框程序执行就让整个屏幕背景变黑色?? 想了解有关程序考试的一些情况? 不同系统就不可以直接电缆直接吗? 怎样使用PQMAGIC对硬盘进行调整分区 memory fault--core dumped的问题 有谁知道怎么解win98的开机密码? 用 procedure 与 trigger 、database link 能完成吗? flowerofwind,rjcludy()请回答 COM中的一个怪问题:我将::CoUninitialize();去掉后程序不出错,添上出现非法操作,是啥问题??? 请问?????? 如何在程序中播放rm格式的文件??? edit怎么用啊? JB6盘中不含 Borland Enterprise Server AppServer5.0,各位快载一个上去吧! 如何改变显示的分辨率? 那里有c#编译器免费下载?谢谢 如何在vc中播放rm格式的文件??? 那位大侠知道怎么创建并使用一个变量,每次只让一个进程访问???给个例子吧,大大大 大 delphi中怎么编写中断,获取外部设备传来的信息?急救!! 数值模拟与计算仿真,高手请帮忙! 请问:dos下图形放大算法或思路?还有.........(高手请进) 求教!!!!SOS!! --请问如何将一个BMP图形文件转成JPG图形文件,高分请教师--- 高分给出,win98的怪问题! 打印统计问题 请教 : html的javascript 中报错:document.Form1.client_name.value不是对象 VC++里面如何从文本文件中一行一行读取文件? 请问,如何用mail函数批量发送邮件.多谢. 各位请教一下,Jsp 的服务resin在win2000下是怎样配置的 各位兄弟: 有谁知道 侯杰 的 <多线程程序设计> 什么时候才能买到??? 哪里有VFP3.0下载? system.ini和win.ini的作用 怎样生成安装包,多谢! 如何在两个不同的应用程序之间拖动文本字符 请问,PTSTR 和 PSTR 有什么不同? 反对上海电信变相涨价的行为。我能不能告中国电信“违约”和“欺诈”呢。 求救!误删Office2000注册表! 有HFO 次氟酸的存在吗? 二次函数a的大小与开口大小的关系是怎样的?如题 如图所示,已知直线a与b是异面直线,直线c∩a=M,直线b∩a=N,又a∩平面α=A,b∩平面α=B,c∩平面α=C求证:A,B,C三点不共线急!大致图像是这样,可能图像不清. 57. 在很长一个时期,人们一直认为氟的含氧酸不存在.1971年美国科学家通过细冰获得次氟酸(HFO),对次氟酸德研究引起充分重视.试回答下列问题:(1) 次氟酸的电子式为_______(2) HFO中各 二次函数a与开口大小有啥关系? 反函数,向量,三角函数的计算公式? 在二次函数中 b的绝对值和c的绝对值怎么比错了错了 是a b的绝对值 通常情况下,温度达到100℃时,水才会沸腾,这说明水沸腾后,如果停止对他加热,则水不能继续沸腾,这说明 有一支刻度均匀但读数不准的温度计,放在冰水混合物中示数为4℃,在沸水中的示数为96℃.用这支温度计测得烧杯中的水温是29摄氏度,则这杯水的实际温度是多少摄氏度? F2和H2O反应是不是氧化还原反应?哪个是氧化剂.哪个是还原剂?怎么看出来? 平面上有A.B.C.D四点,经过其中每两点画直线,最多可画出几条? 有一支温度计,其刻度是均匀的,但示数不准,把他插入冰水混合物中,示数为2℃,而放在1标准大气压小沸水里,示数为94℃,用这支温度计测一杯热水的示数是48℃,则这杯热水的实际温度是------. HFO+H2O=? 在一平面内有四点,过其中的任意两点画直线,如果只能能画出四条直线,则这四点的位置是怎样的?画图, 一支温度计刻度均匀但示数不准,当把它插入冰水混合物中时,温度计示数为5摄氏度,插入1标准大气压下的沸一支温度计刻度均匀但示数不准,当把它插入冰水混合物中时,温度计示数为5℃,插入1 谁知道HFO的制法,为什么要这样?在说一下HFO中各原素得化合价! 反函数的导数 高数 ln|arctanx|求导 已知:平面α∩β=直线l,又直线a与α有一个公共点P,试分析α与β的位置关系 HFO中F是几价? 如果一条直线l与平面a的一条垂线垂直 ,那么直线l与平面a的位置关系是不是任意一条 而是一条。 直线l,m与平面α,β,γ,满足l=β∩γ,l∥α,m∈α,m⊥γ,则必有〔〕 a.α⊥γ且m∥β b.α⊥γ且l⊥m c.m∥α且l⊥m d.α∥β且α⊥γ HFO中各元素的化合价 直线l垂直于平面α,直线m在平面α内.直线l,m的位置关系有哪几种 求过程」一刻度均匀的温度计放在冰水混合物中时,示数为10°C;用它测一个标准大气压下沸水的温度时,示数为90°C.若用它来测得温水的温度为70°C.则温水的实际温度是____. 氟锑酸是固体吗 物态变化实验6个,与书上的不同 高数:反函数和导数的一道题! 画出函数f(X)=1-x2的绝对值/1+x的图像,并写出这个函数的单调区间 漂白粉生产方程式和漂白原理 高数中反函数的一阶导数是这样求的,那么反函数的二阶导数怎么求? 氟锑磺酸和氟锑酸的区别好像都是HF和SbF5的混合物吧. 两个二次函数的a的绝对值相等,这两个二次函数的图像形状相同吗 大一高数导数.,设y=y(x)由方程x^y+2x^2-y=1所确定,求y′′(1) . 画那些自变量外有绝对值的图像,是先画绝对值还是先平移,为什么? 一元二次函数图像 已知三个平行平面α、β、γ与两条直线l、m分别相交于点A已知三个平行平面α、β、γ与两条直线l、m相交于点A、B、C和点D、E、F,求证:AB∶BC=DE∶EF. 含绝对值的函数图像怎么变呢?比如,y=|x|-3 和 y=|x-3|的图像有什么不同呢?该如何变? 二次函数图像的形状相同可以说明什么y=ax^2+bx+c 与y=-x^2-7x+12的形状相同,对称轴为x=1,顶点到x轴的距离为根号3,写出函数解析式 在同一平面内,与已知直线l平行的直线有___条,过直线l外一点M与已知直线l平行的直线有_____条.希望快点、、准确! F2+H2O=HF+OF2该反应用等号还是可逆号? 在二次函数中,为什么|a|越大,抛物线的开口越小? 若直线 L与平面b平行 ,直线a在b上 ,则 l与a 的位置关系是A、平行 B、 异面 C、 相交 D、 没有公共点偶A答案B,要理由啊 在(3)BrF3+(5)H2O=HBrO3+Br2+(9)HF+O2↑的反映中.当有3molBrF3参加反应时,其中被水还原的BrF3的物质的量是?A.1mol.B.4/3mol.C.2mol.D.3mol.为什么答案会是B呢? 二次函数,a的数值越大,抛物线的开口越小,为什么?考虑y=10x^2+3x+1 高数小题,反函数求导. 为什么f2与naoh有两个反映:F2+4OH-==2F-+O2+2H2O 2F2+2NaOH=OF2+2NaF+H2O 为毛说二次函数中|a|越大,抛物线开口越小,|a|越小,抛物线开口越大. 直线a、b不共面,且a⊂平面α,b⊂平面β,α∩β=直线m,则m与a,b的位置关系是 在“观察在水的沸腾”的实验中 水的蒸发与气压有关系吗 有一支温度计,刻度均匀但刻度线不准.用它测量冰水混合物的温度时,度数为6℃,用它测量1标准大气压下沸水的温度时,读数为96℃.(1)若该温度计某次测量显示温度是33℃,则实际温度为_____℃ 请问 “AgF+Cl2+H2O= AgCl+AgClO3+HF+O2” 怎么配平呢快啊 下列说法错误的是 A.水在任何温度下都能蒸发.B.在1标准气压下,将水加热到100℃,水就能沸腾.C.水在沸腾时,要吸收热量,但温度不升高.D.水在低于100℃时也可能沸腾. 若直线a,b异面,a‖α,则b与平面α的位置关系 在HFO(次氟酸,HOF)中F显-1价,可以看作F的最高价态了,那么HFO和HClO4的酸性哪个更强?能按递变性解释 平面上有ABCD四个点,过其中每两点画直线,可以画几条?画图说明画图说明! 有一只刻度均匀的温度计,但是在冰水混合物中,温度计显示的度数为5°c ,在一个标准大有一只刻度均匀的温度计,但是在冰水混合物中,温度计显示的度数为5°c ,在一个标准大气压下的沸水温度 HFO(次氟酸)中的O真是0价么?据化学说上说只有单质为0价.如果O为0价,那么不就放出去了么?他们是怎么结合形成的,F在化合物中(有机或无机)会出现正价么 二次函数a与开口大小关系如题,分正负两种情况讨论,不要说绝对值越小 直线a,b,c在同一平面内,a//b,a与c相交于一点M,则b与c的位置关系是
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn