您现在的位置: 通信界 >> IT >> 技术正文  
 
今天,你“OUT”了吗?
[ 通信界 / 佚名 / www.cntxj.net / 2012/3/25 10:59:48 ]
 

随着云计算和虚拟化技术的普及,数据中心基础设施领域出现了很多技术创新。Amazon负责数据中心的副总裁James Hamilton曾经说过,在最近5年内数据中心领域技术创新超过了过去15年的创新之和,而这些创新基本上都是被云计算和超大规模互联网应用所驱动。

Scale Up是传统IT界应对大数据、大容量、大流量的解决方案,也就是造更大、更快、更强的IT设备,从而形成了“高性能服务器+高性能SAN存储+高速以太网”这样的“三高”IT架构模型。为了维护自己在业界的市场地位,各个计算、存储和网络厂商不停的推出高规格的旗舰产品来证明自己的存在。但是在新互联网时代,我们看到传统的Scale Up方案越来越力不从心,这不仅因为高性能设备的研发和制造成本越来越高,更因为传统的通过高性能设备实现的Scale Up方案自身的技术极限,无法满足大数据互联网级的要求。为了应对这个挑战, Scale Out解决方案应时出现。所谓Scale Out,简单的讲就是利用分布式和并行计算的原理,把原先由高性能设备完成的任务分布到一群设备上去完成,在满足处理性能要求的同时保证相关的高可靠性,并降低相关成本。

Scale Out是天生属于计算领域的。我们知道最早的高端企业级计算领域是大型机/小型机的世界。计算机的硬件、操作系统和跑在其上的应用是纵向整合的,当时IBM控制了整个业界的创新步伐。但是在新互联网领域,面对terabyte级别甚至petabyte级别的数据集处理要求,Scale Out是唯一的选择。基于商用x86架构工业标准服务器集群和分布式软件来构建互联网架构,是目前互联网领域的技术热点,典型代表之一是Apache Hadoop开源软件项目。现在大型云计算互联网公司数据中心动辄上万台Hadoop服务器来实现其并行计算。例如百度的Hadoop服务器规模是1万多台,已经超过了Yahoo和Facebook,2012年计划将达到2万台。同时,面向企业级私有云的Hadoop实践也开始走向实践。

在IT基础设施领域,除了计算以外,存储领域也开始从Scale Up迈向Scale Out。一个主要的原因就是CPU的性能和密度持续超过旋转磁盘的读取性能。传统的SAN和NAS外置存储解决方案过去受欢迎的原因就是外部磁盘阵列可以通过多轴磁盘实现高速IO,以及可以实现方便的磁盘阵列扩充。只要应用不需要非常快的读写大量数据,这种把存储外置在服务器之外,也就是存储和计算分离的解决方案可以工作的很好。但是一旦面对大数据快速读写,传统SAN/NAS技术架构就会出现技术瓶颈。考虑到这种情况,最近有人甚至预言未来外置高性能存储将趋向灭亡,取而代之的是Scale Out解决方案。具体说就是返璞归真——把数据推向计算点,而不是计算点通过一个fabric从远端阵列获取数据。这种模型通过分布式文件系统(如Hadoop文件系统,HDFS)构建在x86服务器集群上,有效的利用本地存储的低成本和高速实现相对于外置集中存储的性能、扩展和成本优势。一旦这种模式得到普及,传统的SAN/NAS的外置式存储恐怕将像恐龙一样淡出历史舞台。

看完计算和存储,我们来看看IT基础设施的最后一块拼图——网络,是否也要走向“Scale Out”?答案是Yes。虽然单个网络产品本身的性能和接口带宽是不断的向“UP”的方向发展的,例如在未来的数据中心,10GE接口将渐渐普及到接入层, 40GE/100GE接口也将在不远的将来进入实用。但是就整个网络架构来讲,在计算和存储向Scale Out架构发展的大前提下,网络的Scale Out是必然的发展趋势。这里面有三点含义:

拓扑结构的Scale Out。新型的互联网将不再是传统企业网的三层或者多层组网,而是扁平化的二层组网架构。因为扁平的二层组网架构将最大程度的减少节点和节点之间的跳数和时延,更加有利于Hadoop等分布式软件发挥效能。扁平化组网要求网络核心模块有极强的弹性扩展能力,可以在节点数目增加时实现网络接入模块的按需挂接。

性能上的Scale Out。网络作为新一代数据中心的fabric,不能成为性能瓶颈。但是当单端口的带宽达到一定极限的时候,就必须实现大流量在整个数据中心范围内的多个接入端口/上联端口的横向Scale Out。从本质上说,H3C的IRF2技术,以及针对数据中心大二层网络需求的IETF TRILL标准,都是这种Scale Out解决方案。

网络服务的Scale Out。所谓网络服务是指安全和流量分析等4-7层的网络增值业务。在传统的数据中心网络服务模块,如防火墙是作为一个单独的模块挂接在核心层或者汇聚层上的,总体来讲是一种集中式处理模式。随着数据中心规模和流量的上升,这种部署要求防火墙性能越来越高,以至于会成为一个严重的业务瓶颈点。因此在大数据互联网数据中心中网络服务部署必须走Scale Out模式。简单的讲,就是在大二层组网下,网络服务模块必须贴近节点(物理的或者虚拟的),并通过分布式网络软件把大量、分散的网络服务模块虚拟化起来,统一管理部署和动态调配,来满足业务处理需求。

总之,新的IT技术创新虽然目前都只是在互联网大数据环境下在应用,传统的技术也不会马上消亡,但是我们可以想见到Scale Out模式对未来泛企业IT模型的影响,也就是说IT架构的价值从硬件转向了软件。不论您是企业IT人员、系统集成商、还是IT设备制造商,恐怕今天都要问一句自己:

今天,你“OUT”了吗?

 

作者:佚名 合作媒体:不详 编辑:顾北

 

 

 
 热点技术
普通技术 “5G”,真的来了!牛在哪里?
普通技术 5G,是伪命题吗?
普通技术 云视频会议关键技术浅析
普通技术 运营商语音能力开放集中管理方案分析
普通技术 5G网络商用需要“无忧”心
普通技术 面向5G应运而生的边缘计算
普通技术 简析5G时代四大关键趋势
普通技术 国家网信办就《数据安全管理办法》公开征求意见
普通技术 《车联网(智能网联汽车)直连通信使用5905-5925MHz频段管理规定(
普通技术 中兴通讯混合云解决方案,满足5G多元业务需求
普通技术 大规模MIMO将带来更多无线信道,但也使无线信道易受攻击
普通技术 蜂窝车联网的标准及关键技术及网络架构的研究
普通技术 4G与5G融合组网及互操作技术研究
普通技术 5G中CU-DU架构、设备实现及应用探讨
普通技术 无源光网络承载5G前传信号可行性的研究概述
普通技术 面向5G中传和回传网络承载解决方案
普通技术 数据中心布线系统可靠性探讨
普通技术 家庭互联网终端价值研究
普通技术 鎏信科技CEO刘舟:从连接层构建IoT云生态,聚焦CMP是关键
普通技术 SCEF引入需求分析及部署应用
  版权与免责声明: ① 凡本网注明“合作媒体:通信界”的所有作品,版权均属于通信界,未经本网授权不得转载、摘编或利用其它方式使用。已经本网授权使用作品的,应在授权范围内使用,并注明“来源:通信界”。违反上述声明者,本网将追究其相关法律责任。 ② 凡本网注明“合作媒体:XXX(非通信界)”的作品,均转载自其它媒体,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。 ③ 如因作品内容、版权和其它问题需要同本网联系的,请在一月内进行。
通信视界
华为余承东:Mate30总体销量将会超过两千万部
赵随意:媒体融合需积极求变
普通对话 苗圩:建设新一代信息基础设施 加快制造业数字
普通对话 华为余承东:Mate30总体销量将会超过两千万部
普通对话 赵随意:媒体融合需积极求变
普通对话 韦乐平:5G给光纤、光模块、WDM光器件带来新机
普通对话 安筱鹏:工业互联网——通向知识分工2.0之路
普通对话 库克:苹果不是垄断者
普通对话 华为何刚:挑战越大,成就越大
普通对话 华为董事长梁华:尽管遇到外部压力,5G在商业
普通对话 网易董事局主席丁磊:中国正在引领全球消费趋
普通对话 李彦宏:无人乘用车时代即将到来 智能交通前景
普通对话 中国联通研究院院长张云勇:双轮驱动下,工业
普通对话 “段子手”杨元庆:人工智能金句频出,他能否
普通对话 高通任命克里斯蒂安诺·阿蒙为公司总裁
普通对话 保利威视谢晓昉:深耕视频技术 助力在线教育
普通对话 九州云副总裁李开:帮助客户构建自己的云平台
通信前瞻
杨元庆:中国制造高质量发展的未来是智能制造
对话亚信科技CTO欧阳晔博士:甘为桥梁,携"电
普通对话 杨元庆:中国制造高质量发展的未来是智能制造
普通对话 对话亚信科技CTO欧阳晔博士:甘为桥梁,携"电
普通对话 对话倪光南:“中国芯”突围要发挥综合优势
普通对话 黄宇红:5G给运营商带来新价值
普通对话 雷军:小米所有OLED屏幕手机均已支持息屏显示
普通对话 马云:我挑战失败心服口服,他们才是双11背后
普通对话 2018年大数据产业发展试点示范项目名单出炉 2
普通对话 陈志刚:提速又降费,中国移动的两面精彩
普通对话 专访华为终端何刚:第三代nova已成为争夺全球
普通对话 中国普天陶雄强:物联网等新经济是最大机遇
普通对话 人人车李健:今年发力金融 拓展汽车后市场
普通对话 华为万飚:三代出贵族,PC产品已走在正确道路
普通对话 共享退潮单车入冬 智享单车却走向盈利
普通对话 Achronix发布新品单元块 推动eFPGA升级
普通对话 金柚网COO邱燕:天吴系统2.0真正形成了社保管