说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

数据中心基础设施是大数据战略成败的关键

HTML文档下载 WORD文档下载 PDF文档下载
随着基于传感器的移动Web监视设备和输出数据越来越多,可用的数据量将继续呈指数级增长。每个公司围绕大数据的相关决策都会有所不同,大数据战略需要数据中心基础架构作出的改变主要有五点。

【编者按】管理者相信,能有效运用数据的企业将比落后者具备更大优势。大数据战略需要数据中心基础架构作出的改变主要有文中所列举的五点,例如大数据导致的存储需求量每年都将增长60%至80%,IT采购者应选择在可扩展性和存储速度上最具成本效益的硬件;当然每个公司围绕大数据的相关决策都会有所不同。请记住,随着围绕大数据的技术演变,大数据战略也应当及时调整。本文来自机房360。

以下为原文:

为大数据选择新的硬件、存储和其它数据中心基础设施,这是IT专业人员们所面临的新挑战。

大数据是具备空前规模和形式的非结构化信息。它包括视频、图像,以及半结构化的数据(例如在Web上常见的电子邮件和文本)。随着基于传感器的移动Web监视设备和输出数据越来越多,可用的数据量将继续呈指数级增长。

推行大数据战略的压力往往来自高层,因为管理者相信,能有效运用数据的企业将比落后者具备更大优势。大数据战略需要数据中心基础架构作出的改变主要有五点:

一、支持大数据的硬件

大数据导致的存储需求量每年都将增长60%至80%,鉴于这种快速增长和当前的成本限制,IT采购者应选择在可扩展性和存储速度上最具成本效益的硬件。类似大型机的向上扩展体系结构重新兴起,因为它们能够经济高效地扩展,降低总体拥有成本。同样,在提升性能方面,固态硬盘(SSD)和固态卡带都比传统磁盘做得更好。

类似IBM Netezza和Oracle Exadata的硬件装置已被证实能有效兼顾可扩展性和性能。考虑采用硬件装置来支持关键大数据业务,但也应确认设备的架构能在未来提供快速性能升级。

二、围绕大数据选择存储

在成功的大数据策略下,企业可以将来自内部的高质量数据与Hadoop挖掘自多个云供应商的低质量数据进行整合。这也就改善了业务相关数据的质量,让分散在各地的数据能组织成为具备一致和及时性的大数据资源。

大数据正在改变中央数据仓储和松耦合数据集市的决策基础,后者的存储库规模要小得多,既可以替代中央数据仓库,也可以成为中央数据仓库的数据源。随着各地办事机构或者国际子公司的增加,中央管理层在业务线扩大的同时更需要高质量的数据来维持管控力度,避免权力的分散。

新的软件技术承担了繁重的存储相关处理工作。由Composite Software(刚刚被Cisco收购)和Denodo提供的数据虚拟化软件能自动发现数据源并提取数据充实全局元数据存储库,为整个组织提供跨越内部和外部的所有数据的公共数据库外观和体验。主数据管理软件通过创建公用主记录提高了数据质量,消除了费时的数据仓库检索。

企业Web外链需求加深了对公众和混合云的依赖。许多大型企业发现他们需要来自于多个云供应商的大数据,却不能指望供云应商会负责整合这些数据。企业只能从数据虚拟化供应商寻求工具来跨多个云整合大数据。

三、利用SSD的存储分层策略

存储成本很高,而且越快的存储也就越昂贵。最重要的是,大数据要求存储同时提供大容量和“大”性能。存储分层在存储资源池中提供多种成本/性能选项,从昂贵的高性能固态存储到传统的串行SCSI(SAS)磁盘存储,这些选项的组合降低了总拥有成本。在主内存和磁盘之间增加一个固态层将有助于将大数据任务的性能维持在高位,而且不会引起存储成本失控。

SSD的用量应遵从“90-10”的存储分层规则:成本和速度的最佳组合比例是:使用大约10%的SSD和90%的机械硬盘。这一策略让IT公司用仅增加10%成本的代价就能获得90%以上的性能提升。主内存和SSD的容量比例也遵从同样的规则。

由于SSD的性能价格比的提升速度超过传统磁盘(容量提升,价格降低),预计在不久的将来传统磁盘和SSD的配置比例会变为遵循80-20的规则。

IBM BLU Acceleration这类最新的纵列和内存数据库设施能利用SSD获得远超传统磁盘的性能,它们的设计能够有效发挥SSD这类“扁平化磁盘”的优势。

四、大数据分析和报告能力

虽然嵌入式分析工具已经可以利用报告和自动优化功能改善业务流程,但大数据再次改变了分析规则。例如,和传统上对单个客户进行主要行为分析洞察相比,大数据战略能为每个客户创建一个迭代和洞察分析线程,让公司能跟踪客户并更好地维持与所有客户的长期关系。

典型的大数据分析从业人员被称为数据科学家,和常规的IT主管不同,他们更可能同时担任CMO(营销总监)。然而,IT专业人员必须明白他们公司的大数据策略对数据科学家的工作产生的影响。

这意味着需要在自动化的报告和嵌入分析之外人工添加第三方审议内容:专设和松散耦合分析。支持专设查询的分析和统计工具是必要的软件前提。许多传统IT供应商以及云供应商——如IBM、Cognos和Birst——正在扩充这些功能。

五、企业中的Hadoop

Hadoop为数据密集型应用提供“紧贴着”MapReduce文件系统处理程序框架的分布式文件系统。此文件系统支持针对富文本数据的并行事务扩展,例如社交媒体数据。

许多IT公司通过在企业内创建自己的Hadoop版本来解决从Web获取Hadoop数据源的问题。然而,缺乏专业知识是一种挑战:精通这种发展中的Web数据管理框架的专业和艺术的IT管理人员犹如凤毛麟角。

组织开发他们自己的数据管理工具时应该留意,如IBM、Oracle和EMC的这些主要供应商,往往既提供专有产品用于访问Hadoop数据,也可进行定制开发,让IT公司不需要专门的数据归纳措施就能访问需要的数据。如果您决定搭建自己的数据平台,供应商也提供整合服务,使Hadoop更贴合现有IT资源来高效运作。

每个公司围绕大数据的相关决策都会有所不同。请记住,随着围绕大数据的技术演变,大数据战略也应当及时调整,与时俱进。

原文链接:数据中心基础设施是大数据战略成败的关键 (责编/魏伟)

以“ 云计算大数据 推动智慧中国 ”为主题的 第六届中国云计算大会 将于5月20-23日在北京国家会议中心隆重举办。产业观察、技术培训、主题论坛、行业研讨,内容丰富,干货十足。 需要购买的朋友,请抓住这最后的机会,点击报名!

富士康自主研发智能手表 惹苹果发来订单 开发者眼中的iOS 7:重设计过程没想象中那么糟 游戏引擎Unity宣布免费支持Windows Phone 8及Xbox One 蝉游记王益善专访:7人小团队实现App 30万下载量 去除IE 10广告的两种方法 直接拿来用!最火前端开源项目(二) 工作变得简单又高效 试试这八个WebApp 移动周报:生于微信,疯狂猜图的推广经 DataTorrent 将数据分析速度从“实时”提升至“现在时” 华为FusionCube开启全球规模商用 黑暗架构:以最少时间完成系统升级并获客户认可的开发之道 Hadoop Summit 2013见闻:创业与Hadoop 2.0不可阻挡 Facebook的清洁能源改革——革命尚未成功,仍需努力 YARN或将成为Hadoop新发力点 主流编程语言属性一览(多图) 粉碎硬件复杂论:开发者不懂硬件运行的方式怎么可以?! 最新版Chrome OS加入Word和Excel编辑功能 直指微软 传诺基亚将购诺西全部股份,疑为出售手机业务做准备? 优秀技术领导者的修成之道 直接拿来用!最火前端开源项目(三) 第八届开源中国开源世界高峰论坛成功举办 曾经那些主流的API,而今风光已不再! Android 4.3本月9日亮相 新功能汇总 移动游戏的国际化运营技巧 Google的Janus与Facebook的McDipper:将闪存用于数据中心 拥抱开源还是坚守阵地:传统数据库供应商面临抉择 超棒的30款JS类库和工具 立场坚定:惠普仍然密谋回到智能手机市场 6月份浏览器份额:Chrome成市场份额增长最快浏览器 关于PHP的十大误解 你中了几个? 专访西电朱虎明:异构计算硬件架构呈现百花齐放 百家争鸣 Regular DLL中向导生成的winapp对象有什么用? 关于Install shield 的问题 一个高难度问题,特急! 从一个页的Button事件中如何获取在iframe中另一页中选种checkbox的值? 大家一起来帮帮我 我是个新手请教如何在98下安装和设置apache,尽是详细些,最好给介绍些资料 高手请教,有关类的链表指针 如何定义日期类型? 请教高手!如何执行带条件SQL语句? 大家一起来为c#加油阿 追女教训谈 如何用OUTLOOK作多用户使用???? 赐教 有谁知道ramdrive.sys在dos下的详细用法,敬请赐教,倍感感激!! 怎么用Delphi调用MySql(win) 关于frame的问题. 为什么显示不出来???? c#通过INTERNET远程访问数据库都有什么办法?(请高手指点) 有誰能把CDONTS.DLL(電子郵件)的源代碼貼出來嗎?有分送,THANK! 请教 NetColorWolf(NCW) pb7的工具条栏的文字字体! 为什么,我的子窗口调用另一个窗口时,总是新开一个被调用窗口,而且被调用窗口中的ADOTable的connected总是丢失。why 《Delphi淡手辑略 之 数据库篇》:数据安全删除(函数) 请教! 我用setfocus使一个控件聚焦,但我想隐藏光标,不想让它在界面上闪动,怎么办? 用delphi 编防火墙 有谁知道ramdrive.sys在dos下的详细用法,敬请赐教,倍感感激!! 关于Delphi线程构造函数: 简单问题 ADSL代理上网部分站点上不去解决一例. 消息中间件的功能?各位铜人帮忙! 如何改变对话框和窗体的背景色呢? 《Delphi淡手辑略 之 数据库篇》:打印DBGrid中的所有数据(过程) 有关Delphi指针的问题,请高手帮忙!!!!!!! 还是weblogic问题 麻烦帮我检查一下代码,实在想不通 请问大家我新买一台品牌机,再使用时经常死机是怎么回事? 哪里有介绍Active Directory 的中文资料? 怎样在ListView组件的详细显示模式下,让屏幕自动随输出数据滚屏和聚焦在输出的数据上面。 实现接口时出错,分数大大的有 《Delphi淡手辑略 之 数据库篇》:数据集解构成树(过程) 100分求教!!!文章“如何快速自动生成并定制报表”的问题!!! 一个农民上网的代价! 怎样将分割视图在一开始显示的时候就是确定的? Win2000server如何设置成路由器? 存储过程和函数得问题 转帖]!现在各大城市求爱对话写真 如何把XML+XSL的输出结果显示到一个指定的HTML元素里? 有些API中的参数开头是lpsz ,lpsa ....请问什么意思?相关的也说说好吗?谢谢 为何长语句分不了行 我用vs.net正式版开发的留言簿提供全部源码下载 公车上的性骚扰 请问哪里有比较好的关于 OpenGL 的网站或者是论坛啊?小弟的毕业设计课题是关于这个的!(NULL) 一个高难度的问题,特急! 能否解释下下列图这些音乐符号各代表什么意思.特别是房子里的1和2代表什么意思? UC是什么意思 做匀变速直线运动的物体位移随时间的变化规律为x=24t-1.5t^2(m)根据这一关系式可以知道,物体速度为零的时.为什么 围绕一句名言展开写的作文 600字 《听泥土说话》阅读答案课时达标上的 做匀变速直线运动的质点,它的位移时间变化的规律是s=(24t-1.5t*t)m,则质点的速度为零的时刻是 两小儿辩日原文 《听泥土说话》中的阅读答案,越快越好!(1)文中的他两次与泥土对话后分别有什么变化?(2)文中最后一段为什么要写那些和他一起同时发迹的伙伴“掉下来”的事?(3)读完短文后,结合 做匀减速直线运动的质点,它的位移随时间变化的规律是s=24t-1.5t2(m),当质点的速度为零,则t为多少答案是16s.可我算出来是8s. 急求《两小儿辩日》原文!要原文(古文) 《听泥土说话》的阅读答案 父母的教诲:500字作文教诲 两小儿辩日的原文 听泥土说话朗读指导从此,儿子处世如泥土般低调,性情如泥土般内敛,为人如泥土般虚心,对待成败得失亦如泥土般自然、平静和从容.请用着重号在上文中画出朗读重音,并说说理由. 物理致癌因子? 《两小儿辩日》原文和翻译 听泥土说话阅读题文中的“泥土”仅仅是指自然界的泥土吗?请谈谈你的理解阅读全文,仿照地⑧段,在地3段的横线上把句子补充完整请简要分析文中画线句“再把这泥土扔了,就等于扔掉了我 四个5,填三个符号,得2使用加减乘除,使等式成立. 两小儿辩日原文的格式 一物体的运动方程是s=5t+1.5t^2,则物体在时间段[0,1]内平均速度是多少?在1s时的瞬时速度是? 延安我把你追寻小学课文中的这篇课文中的精神指什么.是有三个问题 ,填空类型的.要简明点. 英语翻译如:1.鱼,我所欲也;熊掌,亦我所欲也.翻译:鱼,是我想得到的(东西);熊掌,也是我想得到的(东西).我要10个, 做匀变速直线运动的物体的位移与时间的关系为s=t^2+0.5t,则经过()s他的速度是3m/s 延安,我把你追寻,追寻什么 鱼我所欲也 中心论点到底是哪一句大神们帮帮忙 一质点作直线运动,其位移x(m)与时间t(s)有t(2-t)的关系此质点在头2s内的平均速度等于?第2s末速度 写爸爸的作文500字左右最好以别人托出爸爸的好.最好是最新的.只有1个钟头时间喔.好的话, 有个女生给我发短信带了这样一个符号;-P , 请问大家电气符号代表的意思PG1404 FICO1401 TICA1410 WI1401 LIA1401 FIAO1403 RE 还有一些长的:NG-1401o-40-M1E PA-1401-50-M2E-J 诗人为什么要追寻延安 爱的教育的读书笔记 ‘原文’我认为……300字共15篇 珍珠鸟 课文原文. 《延安,我把你追寻》中的问题2.延河枣园、南泥湾开荒的镢头、杨家岭、温热的土炕、顶天立地的脊梁各象征什么? 来篇以教育为话题的800字作文(高中作文) 鸟的天堂课文原文 《延安,我把你追寻》的问题.1.《延安,我把你追寻》主要写什么?2.《延安,我把你追寻》写到了哪几个地方?3.《延安,我把你追寻》是围绕延安精神写的.请你将这首诗分成三个部分,并概括每个 800字高中作文.《如何看待现代教育》从社会、学校、家庭,的方面去写.(议论文)! 鸟的天堂原文我是日本天皇殿下.我向你们表示感谢/王歧山副总理访问我们大日本帝国 《延安,我把你追寻中》的问题作者在第二节中,连用了四个“追寻你”.诗人为什么追寻延河、枣园、杨家岭和南泥湾呀?用具体的事例说说你的理解.第一个“你”代表_______________;第二个“ 《鱼我所欲也》中体现“性本善”思想的句子是 谁有老舍的《鸟的天堂》原文?我要语文书11册上的原文! 一个物体做匀变速直线运动已知位移方程为X=(5t-2t平方)m该物体运动的初速度为(?) 鱼我所欲也重点句子翻译 珍珠鸟原文, 某物体做匀速直线运动,其方位方程为x=(5t+2t方)m,则该物体的初速度为(),加速度为(),2s之内的位移大小为(),2s末的速度为() 急需人教版语文《说勤》原文 写出uc的缩写语或符号表示的含义 什么(填物理或化学)变化中伴随什么(填物理或化学)变化的发生? 原文是三余勤读 鱼我所欲也,背诵怎么办?五个小时后就要考默写,错一处一巴掌,还要罚写.昨天刚刚学,还没学完.求神人帮助支个招...谢拉! 下列各项中属于化学致癌因子的是( ) A电离辐射 B X射线 C紫外线 D 苯 勤礼碑原文 在matlab中,符号计算中结果出现了conj(),例如出现了,(E*bi*(conj(bi)/conj(A) + conj(bm)/conj(A)))/(30*A) + (3*E*bi*((2*conj(bi))/(3*conj(A)) + (2*conj(bm)),除了conj外,其他字母全部都是已定义的符号.那conj()是什 紫外线是致癌因子吗 书山有路勤为径,学海无涯苦作舟.的原文 鱼我所欲也 重点句子(背诵方面)明天要考试了,求本文在考卷上最经常考到的句子.越多越好【也不要把全文都复制下来 做匀减速直线运动的质点,它的位移随时间变化的规律是S=24t-1.5t的平方,当质点的速度=0,则t为多少?选项A.1.5s B.8s C.16s D.24s 请问还是找不到那些特殊符号, UC是什么意思?一直听说UC,UC是什么意思? 做匀减速运动的质点,它的位移随时间变化的规律是s=24t-1.5t²(m),当质点的速度为零时,则t为多少?
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘