说三道四技术文摘-感悟人生的经典句子
说三道四 > 文档快照

数据中心基础设施是大数据战略成败的关键

HTML文档下载 WORD文档下载 PDF文档下载
随着基于传感器的移动Web监视设备和输出数据越来越多,可用的数据量将继续呈指数级增长。每个公司围绕大数据的相关决策都会有所不同,大数据战略需要数据中心基础架构作出的改变主要有五点。

【编者按】管理者相信,能有效运用数据的企业将比落后者具备更大优势。大数据战略需要数据中心基础架构作出的改变主要有文中所列举的五点,例如大数据导致的存储需求量每年都将增长60%至80%,IT采购者应选择在可扩展性和存储速度上最具成本效益的硬件;当然每个公司围绕大数据的相关决策都会有所不同。请记住,随着围绕大数据的技术演变,大数据战略也应当及时调整。本文来自机房360。

以下为原文:

为大数据选择新的硬件、存储和其它数据中心基础设施,这是IT专业人员们所面临的新挑战。

大数据是具备空前规模和形式的非结构化信息。它包括视频、图像,以及半结构化的数据(例如在Web上常见的电子邮件和文本)。随着基于传感器的移动Web监视设备和输出数据越来越多,可用的数据量将继续呈指数级增长。

推行大数据战略的压力往往来自高层,因为管理者相信,能有效运用数据的企业将比落后者具备更大优势。大数据战略需要数据中心基础架构作出的改变主要有五点:

一、支持大数据的硬件

大数据导致的存储需求量每年都将增长60%至80%,鉴于这种快速增长和当前的成本限制,IT采购者应选择在可扩展性和存储速度上最具成本效益的硬件。类似大型机的向上扩展体系结构重新兴起,因为它们能够经济高效地扩展,降低总体拥有成本。同样,在提升性能方面,固态硬盘(SSD)和固态卡带都比传统磁盘做得更好。

类似IBM Netezza和Oracle Exadata的硬件装置已被证实能有效兼顾可扩展性和性能。考虑采用硬件装置来支持关键大数据业务,但也应确认设备的架构能在未来提供快速性能升级。

二、围绕大数据选择存储

在成功的大数据策略下,企业可以将来自内部的高质量数据与Hadoop挖掘自多个云供应商的低质量数据进行整合。这也就改善了业务相关数据的质量,让分散在各地的数据能组织成为具备一致和及时性的大数据资源。

大数据正在改变中央数据仓储和松耦合数据集市的决策基础,后者的存储库规模要小得多,既可以替代中央数据仓库,也可以成为中央数据仓库的数据源。随着各地办事机构或者国际子公司的增加,中央管理层在业务线扩大的同时更需要高质量的数据来维持管控力度,避免权力的分散。

新的软件技术承担了繁重的存储相关处理工作。由Composite Software(刚刚被Cisco收购)和Denodo提供的数据虚拟化软件能自动发现数据源并提取数据充实全局元数据存储库,为整个组织提供跨越内部和外部的所有数据的公共数据库外观和体验。主数据管理软件通过创建公用主记录提高了数据质量,消除了费时的数据仓库检索。

企业Web外链需求加深了对公众和混合云的依赖。许多大型企业发现他们需要来自于多个云供应商的大数据,却不能指望供云应商会负责整合这些数据。企业只能从数据虚拟化供应商寻求工具来跨多个云整合大数据。

三、利用SSD的存储分层策略

存储成本很高,而且越快的存储也就越昂贵。最重要的是,大数据要求存储同时提供大容量和“大”性能。存储分层在存储资源池中提供多种成本/性能选项,从昂贵的高性能固态存储到传统的串行SCSI(SAS)磁盘存储,这些选项的组合降低了总拥有成本。在主内存和磁盘之间增加一个固态层将有助于将大数据任务的性能维持在高位,而且不会引起存储成本失控。

SSD的用量应遵从“90-10”的存储分层规则:成本和速度的最佳组合比例是:使用大约10%的SSD和90%的机械硬盘。这一策略让IT公司用仅增加10%成本的代价就能获得90%以上的性能提升。主内存和SSD的容量比例也遵从同样的规则。

由于SSD的性能价格比的提升速度超过传统磁盘(容量提升,价格降低),预计在不久的将来传统磁盘和SSD的配置比例会变为遵循80-20的规则。

IBM BLU Acceleration这类最新的纵列和内存数据库设施能利用SSD获得远超传统磁盘的性能,它们的设计能够有效发挥SSD这类“扁平化磁盘”的优势。

四、大数据分析和报告能力

虽然嵌入式分析工具已经可以利用报告和自动优化功能改善业务流程,但大数据再次改变了分析规则。例如,和传统上对单个客户进行主要行为分析洞察相比,大数据战略能为每个客户创建一个迭代和洞察分析线程,让公司能跟踪客户并更好地维持与所有客户的长期关系。

典型的大数据分析从业人员被称为数据科学家,和常规的IT主管不同,他们更可能同时担任CMO(营销总监)。然而,IT专业人员必须明白他们公司的大数据策略对数据科学家的工作产生的影响。

这意味着需要在自动化的报告和嵌入分析之外人工添加第三方审议内容:专设和松散耦合分析。支持专设查询的分析和统计工具是必要的软件前提。许多传统IT供应商以及云供应商——如IBM、Cognos和Birst——正在扩充这些功能。

五、企业中的Hadoop

Hadoop为数据密集型应用提供“紧贴着”MapReduce文件系统处理程序框架的分布式文件系统。此文件系统支持针对富文本数据的并行事务扩展,例如社交媒体数据。

许多IT公司通过在企业内创建自己的Hadoop版本来解决从Web获取Hadoop数据源的问题。然而,缺乏专业知识是一种挑战:精通这种发展中的Web数据管理框架的专业和艺术的IT管理人员犹如凤毛麟角。

组织开发他们自己的数据管理工具时应该留意,如IBM、Oracle和EMC的这些主要供应商,往往既提供专有产品用于访问Hadoop数据,也可进行定制开发,让IT公司不需要专门的数据归纳措施就能访问需要的数据。如果您决定搭建自己的数据平台,供应商也提供整合服务,使Hadoop更贴合现有IT资源来高效运作。

每个公司围绕大数据的相关决策都会有所不同。请记住,随着围绕大数据的技术演变,大数据战略也应当及时调整,与时俱进。

原文链接:数据中心基础设施是大数据战略成败的关键 (责编/魏伟)

以“ 云计算大数据 推动智慧中国 ”为主题的 第六届中国云计算大会 将于5月20-23日在北京国家会议中心隆重举办。产业观察、技术培训、主题论坛、行业研讨,内容丰富,干货十足。 需要购买的朋友,请抓住这最后的机会,点击报名!

Android签名用keytool和jarsigner制作apk文件 谈谈Android中文短信的实现 Android中文短信开发技巧 Android来电号码获取代码 Android AIDL初学者必看内容 Android与XML解析 Android天气预报程序开发实例与定位信息 Android中文短信开发终结篇 Android权限列表permission说明 Android输入法开发实例解析 Android示例程序Snake贪食蛇源代码分析 Android平台View的按键事件KeyDown用法 Android加速感应器实现屏幕自动旋转-Sensor属性 Android视频播放类VideoView解析 Javascript如何检测浏览器关闭了小叉叉 文件操作 - DOS BAT批处理编程入门教程(六) 获得手机中的电话簿 Android开发学习小心得 VC中用CPPToolTip轻松实现工具提示 Android中MediaRecorder类实现视频录制 WEB开发中将数据库记录转换到EXCEL表格文件xls供下载 F#是什么语言 函数式编程语言F#:基于CLR的另一个头等编程语言 编程获取Google PR值方法集锦 第一个F#入门程序Hello world 在F#中将函数作为一等对象的值 PHP获取Google PR值 ASP.NET(C#)获取Google PR值 android.appwidget类剖析 Android NDK之JNI使用例子 RemoteViews - Android Widget开发入门 EmbeddedWB怎么安装?? exchange2000可以接收公网发来的邮件,但是无法发送邮件!!(急!!!) 一个关于以后发展方向的问题!(在线等待) vf怎么那么不稳定阿? 哪位大哥帮我看看阿 在线等 请问如何生成一个新窗口页面? 用twebbrowser写的浏览器,如何拖放链接到其他程序? 关于网上邻居不能显示的问题? 各位老大,不知道有没有方法把rose转化为visio??给个答复就给分!! 丈夫日记 (zt) 新手要去哪里看适合的c++源代码啊?自己编些什么程序来练习合适呢?(内空) 高手救人!!!!!!!!!! [求救醒目]如何改变file对象的格式?[求救醒目] 一个莫名奇妙的问题 关于自己以后发展方向的一个问提!!!(偏软还是硬) 对WinSock和TCP/IP协议共同工作的疑惑 请高手指点迷津 综合我的几个问题,请高手指点。 为什么我存储图象的时候小的bmp能存储大的却说invalid blob length 一个字符串的基础问题 求助,关于DropDownList控件的问题 请教一个简单的SQL语句的写法! 请问我把两路PCM的样值点相加除2得到混音信号,可是噪音很大,应该怎么消除呢(有代码) 大家快看电视新闻,中国一艘潜艇在海上出事了!紧急发布! 各位快请帮帮忙呀!Session问题!!! 如何在代码中添加新增lookup字段??? xp系统问题!高分等答案 pl/sql中函数与过程有什么区别 关于事务 LIB 在线等!!!!!!!! ADO+SQL Server 如何用VB编写发邮件的程序? 数据库搜索的一个怪问题 怎么得到从另一个页面传来的参数 Full Text: Bush Speech Aboard the USS Abraham Lincoln 请问 怎么实现变量互换阿 我是新手~~~ FAT错误,请问如何修复? flashget那个小方框怎么做? 谁有《UML与Rational Rose2002从入门到精通》书的选配光盘 急!!!随机函数 FAT错误,请高手帮忙修复。 内部消息(我对我说的负责) 不定时开放FTP服务器 急,求救!!! 一个很简单的问题. 为什么 “基本图象处理代码(1) ehom(原作)”对grayscale不对? linux下的oicq 有马? 帮帮我,好吗,感谢,非常 help,help,sql query question? 大家认为考研考进其他学校(且跨专业)的可能性有多大 显示图片 数据库搜索的一个怪问题 共享上网问题!急~!!!! 曹刿认为战争取胜的先决条件是 ,这一观点与孟子提出的什么不谋而合 简单命题能否含有逻辑联结词 对对联:清风邀月赏花香 孟子在《得道多助 失道寡助》中谈到战争胜利的最主要条件是“人和”,而曹刿却认 The girl glanced at the boy and went away同义句 西瓜含有什么有害物质? 前面两个字一样后面两个字也一样的成语 天庭粽子是什么意思 西瓜中有什么物质 从低到高 的英文怎么写?是from shoeter for taller吗?(或把for改成with)(或把for改成to) 天庭粽子是干嘛的 怎么都在说快男 为什么生石灰与水反应放出的热量可以煮熟鸡蛋? 怎样才能改掉粗心大意的毛病啊 天庭粽子吧为啥找不到了,如何进去? 五年级综合填空I am a Chinese g____ . 如何改掉粗心大意的毛病?急 我想知道 天庭指什么 天庭饱满又有何意义 What do you like playing?回答 求3个字母的名词英语缩写.我们有个球队要取一个含义好的英文名词的缩写~把缩写和单词还有翻译一起发上来~ 用所给词的适当形式填空.1.My name is Gina.I am my___(pa用所给词的适当形式填空.1.My name is Gina.I am my___(parents) daughter.2.This is her school bag.___(my) ison the desk.3.Are _____(that) your friends? 什么叫天庭饱满,如题 西瓜和玉米含什么矿物资多? 用am或is填空 My name____Robert.I____a student.I____Italian. 广东话里听人常说 什么什么海是嘛意思,搞不懂? 英语茶的复数英语中,茶有复数吗 中国与巴基斯坦良好关系的历史根源!虽然我国是一个不结盟的国家,不过巴基斯坦与我国的关系可以说非常类似盟国的关系,据说邓小平去世后巴国还降半旗以表哀悼/到底我国和巴基斯坦是在 Where is the 茶的英语是tea吗? 中国和巴基斯坦的友谊的由来 以及现在的关系 A;Where is( )coat?B;It's( )the computer I'm hungry now,because I ate ___ this morning是few还是little 数学粗心大意,到底该怎么办我今年升高二,期末考试数学简单的要死,除去最后一大题,前面的题目只用了40分钟就搞定了,可是最后只考了107分,几乎全部都是错在粗心大意上,本人欲哭无泪中, 句子成分分析I am much grateful to be employed by you two months ago as an editor for your magazine. 请问这是什么鱼?是黄花鱼吗?如题不好意思,手机发的,没发上图. 排球中的后三战术是什么? 已知sin(α+β)sin(α-β)=2m(m≠0),则cos²α-cos²β等于() A.-2m B.2m C.-m D.m 这是什么鱼,大黄鱼吗看图,正在解冻呢 真搞不懂了每次关系搞僵了她都主动找我和好,问我有没有女朋友,喜欢什么样的女孩子,上次和她出去吃饭,聊天的时候,我就说我妈妈对她印象不错,也算是暗示吧,当时我也想试下她对我的态度 关于高中语文的几个问题以下问题一直很困扰我(1)借景抒情和烘托到底有什么区别(2)我知道有哀景衬哀情,可为什么还有乐景写哀情,如果作者的情绪已经很低落了,为何要写乐景啊? (3 ( ) is the cat it's under the bed.A where Bwhat C who 根据上下文补全句子:1、I am ____ after a long running.2、My brother looks _____.He got a pair of new shoes. 我在写作文的时候总是打不开思路,碰到题目总是想不到以前看过的例子,请问我该怎样做? 话费卡充值支付宝面额选择错误?如果充值卡面值选错,充值金额同样会在三天后到达支付宝账户,且交易无法完成,可以在三天后登录支付宝继续完成支付. 能承受很高重量的纸船怎么折 以前有一首歌里的一句话是:请你是阵阵花香是什么歌这是硪很喜欢旳一首歌 鸡和鸭的运动方式是什么? 不屈不挠粽子吧是怎样一个贴吧?到底是干什么的? This is all I have left of him这是老友记里的一句话,想知道这个leave 和of都是怎么用的?of是不是表示all这个词的所属类似的看过很多,我一个外国朋友就在ps里帮我写过一句话,a good foundation to build off where is your 不屈不挠粽子的创始人是谁 凉风送爽,空气里飘来一阵真诱人的花香.(这个句子怎么缩写,希望越快越好.) make sense 出现在一下对话中BARBARA:Hello,Go Away Now Travel Agency.This is Barbara.How may I help you?CLARENCE:Hi Barbara.I'd like to confirm my travel plans.BARBARA:Okay.What's your name and reservation number?CLARENCE:This is Clarence Wong. 纸船怎么做? They ____________(have)the hamburger in the box this evening. The ball is wnder the chair.(画线提问) ---------------- ming should eat healthy food?改为一般疑问句 I have to do this on my own Im sorry 请问to somebody ,for somebody ,with somebody的用法怎么区别?如题我不知道什么时候用to,何时该用for和with 10个人8个会打篮球6个会打排球问会打篮球又会打排球的有几个人 一( )新闻 一( )清风 一( )花香 新快报头版就陈永洲收钱发失实报道致歉公务员报考热再起 专家:官本位与户籍嫦娥三号任务运载火箭从北京启程运往西雾霾应急预案受考验 专家:污染源不控道德说教者与偏执窃听狂俄罗斯举行大型集体哺乳快闪活动(组图俄罗斯举行大型集体哺乳快闪活动(组图二战中的情报暗战:丘吉尔为保密牺牲一德外交部长召见美大使 国内热议手机通凯特王妃被传再次怀孕 王室代表称并非纽约时报:东亚首富李嘉诚“脱亚入欧”法新社:中国转向南美化解原油“饥渴”最高层着手“顶层设计” 中国周边外交遭官员强奸女童家长:负担过重不得不民“国考”报名结束152万人过审 最热嫦娥三号任务运载火箭启程 预计11月解放军用实战对抗提升战力 预想剧本出经济观察:中国化解产能过剩并非简单“打造两岸经贸合作升级版 ECFA后续美媒:失业者重找工作需要做的五件事外媒曝查尔斯不想当国王 王位或将越代酒泉一公司非法吸收公众存款3600余女子包养“小白脸” 情夫翻脸录性爱视南水北调“难”几许? 克服“工程癌症女孩随父母驾帆船航游世界8年 10岁挪威警告称该国或将遭恐怖袭击 警方加骗子冒充淘宝客服 骗走两位买家近万元文化发展的 “蚌埠速度”安庆经济指标全线上扬 增幅位次全省领刺伤加油站女员工 无牌摩托车主被抓翻译家童道明谈契诃夫:总能击中人性最恋爱谈崩了 女方要对方还钱得法院支持“碰瓷“团伙专盯酒驾司机 作案数十起台湾“劳动部长”求见遭拒绝 江宜桦电高清图:德安水灾全景记录安新组织爱心企业捐资10万元救助50台湾复兴航空失事第二天 公司董事长赴哈尔滨动物疫病检测拿到“全球牌照”加拿大外长贝尔德将访华驻汉堡总领事杨惠群拜会基尔市长、议长国际货币基金组织下调全球经济增长预期“打假专业户”方舟子出书谈健康 打假
备案号:鲁ICP备13029499号-2 说三道四 www.s3d4.cn 说三道四技术文摘