代码改变世界

“大数据”时代

2012-07-31 17:26  依水间  阅读(517)  评论(0编辑  收藏  举报

未来的十年将是一个“大数据”引领的智慧科技的时代。随着社交网络的逐渐成熟,移动带宽迅速提升,云计算、物联网应用更加丰富。更多的传感设备、移动终端接入到网络,由此产生的数据及增长速度将比历史上的任何时期都要多,都要快。“大数据”时代的脚步悄然而至。

请试想一下:当40亿部手机、10亿部电脑,随时随地都在向分布在全球各地的服务器发送数据;当你开着车对着“语音助手”说:“我要在附近找一家最罗曼蒂克的餐厅。”之后,短短一两秒就能得到您满意的答案时。其背后向您提供服务所涉及到的定位、资料检索、存取、数据交换等一系列动作是何等的复杂。而这一系列动作正是由“大数据”所支撑,正如IBM总结的那样:“大量化(Volume)、多样化(Variety)和快速化(Velocity)”就是“大数据”的显著特征。大量、多样、快速给现在的IT业提出了巨大挑战。当今的网络环境、存储以及搜索架构越来越不适应这种新的变化。而大数据的到来将促使这些领域产生新的变革。

问题一:网络架构不适应“大数据”时代

传统的网络架构已经不能满足现代网络应用需求。传统的网络结构设计是以客户端向服务器发出请求,由服务器应答返回结果给客户的垂直结构。而在大数据时代,这种垂直结构的服务请求将变得越来越少,取而代之的是水平结构的横向请求服务。“大数据”时代,大量的数据都存储在分布广泛、不同地域、各种类型的服务器中。当用户发出一个搜索或查询请求时,最多的运算是服务器之间的信息交换,最后将结果返回给用户。新一代网络架构要适应Web2.0时代的水平服务应用。

问题二:数据中心将面临巨大压力

“大数据”时代对数据中心的访问量是前所未有的。更多的网络设备将同时访问数据中心,这包括智能手机、平板电脑、台式机、笔记本、甚至正在马路上行驶的汽车。此时,数据中心面临的压力将是难以想象的。正如铁道部去年年底推出的在线订票系统,采用的系统不可谓是当今最先进的系统,但当有几亿人同时访问的时候,网站所有服务都陷入了瘫痪。这是所有工程人员难以预料的。“大”到一定程度的时候,任何事情都可能发生。随着全球经济一体化的深入,未来数据中心要面临的不仅是一个中国地区的访问量,而是全球几十亿的访问量。还是那句话:“用户你伤不起。”

问题三:数据仓库架构不适应高速反应的要求

当今数据库里的内容不仅仅是多,而且结构已发生了极大改变,不是以二维表的规范结构存储。大量的数据是非结构化的办公文档、文本、图片、XML、HTML、各类报表、图片和音频/视频等。并且在企业的所有数据中是大量且增长迅速的。企业80%的数据是非结构化或半结构化的,结构化数据仅有20%。并且全球结构化数据增长速度约为32%,而非结构化数据增速高达63%。预计今年非结构化数据占有比例将达到互联网整个数据量的75%以上。面临如此大量的非机构化数据,其移动和修改将耗费大量的人力物力,读取效率也将越来越低。当然这包括了物理存储和逻辑存储软、硬件两个层面。

当然“大数据”时代对IT业各方面的影响都将巨大且意义深远。此次会展不仅从大数据角度剖析对产业界的挑战与机遇,更有分会场《云计算基础架构》、《云应用服务》、《云计算 数据中心》等息息相关的领域,将为现场的专业观众带来全方位的产业观察和案例分享。