大数据时代来临:逐步成主流

畅享网 发表于:12年10月29日 11:19 [转载] DOIT.com.cn

  • 分享:
[导读]如今我们被称为“大数据” 之物,曾今只是我们简单的称为“数据”。大数据不是一时流行,而是数据管理演变所产生的新兴词汇。大数据描述了数据增长的指数是多么巨大,为了能容纳这些数据,我们努力提供存储空间----大数据还能使用技术从新兴数据中获取信息,抓取新机遇。

如今我们被称为“大数据” 之物,曾今只是我们简单的称为“数据”。大数据不是一时流行,而是数据管理演变所产生的新兴词汇。大数据描述了数据增长的指数是多么巨大,为了能容纳这些数据,我们努力提供存储空间----大数据还能使用技术从新兴数据中获取信息,抓取新机遇。

通过这篇博文,你能够了解大数据的最新变化。我将着重讲述一些大数据案例分析,包括NoSQL 数据库,Hadoop(分布式计算)平台,预测分析等。尤其是数据可视化----它开辟了数据分析新领域----这是个经常出现的话题。

大数据有许多种的定义,Gartner将大数据形容为“容量大,速率高,且信息资产多样,需使用全新处理方式,以提升决策力和洞察力,以及优化处理能力”,这是非常贴切的。首先,通过这些案例研究,我们将了解以下几点:各机构如何通过新技术,迅速应对,并处理海量数据,并有效管理任意类型数据。

大数据的重大突破

为何在这个特殊时刻,大数据“翩然而至”?根本缘由在于网络自身。网络出现后,我们面对的对象已改变,不再是成千上万客户机应用用户,使用由RDBMS(关系数据库管理系统)支持的客户机应用。如今,网络应用对全世界客户开放。通过使用这些网络应用,成千上万的用户能够产生成千上万的数据。

数据规模之大,需要容量极大的系统才有空间容纳,并为所有用户提供服务----正是这一点,促进了NoSQL运动的发展。同时,还需要对这些半结构化的海量数据进行分析,以找出优化用户体验,以及货币化行为的方法。因此,Hadoop应运而生,MPP(大规模并行处理)分析数据库逐渐进化,BI工具亦不断推陈出新。

大数据发明者,以及大数据最早使用者们发现,传统技术已满足不了大数据需要。尤其是传统技术成本过高,且需耗费较多精力,因此,他们转而使用NoSQL,以及Hadoop。

比起使用传统RDBMS,ETL(提取转换加载),以及BI工具,这些用户宁愿使用NoSQL,以及Hadoop,并放弃一些新功能。例如,若使用 NoSQL系统,他们就将放弃ACID顺从性。(ACID:指数据库管理系统事务的四个特性:原子性,一致性,隔离性,持久性。);使用Hadoop,他们就将放弃传统ETL功能,放弃优质GUI(图形用户界面),以及实时查询功能;使用BI,他们将放弃实时可视化,以及数据交互功能。这样的例子不胜枚举。至于这些公司认为这些牺牲值得与否,就因使用案例而异了。

逐步成为主流

最后,于大数据技术的早期用户而言,他们终会希望能重新使用这些功能。大数据技术供应商能满足他们的需求,在这之后,大数据就将不再是独立的IT类别。

同时,数据增长速率将继续加快。如今,网络点击流数据,系统事件,以及其它我们依赖的核心技术来源,为大数据处理提供了大量新生的,半结构化数据。在将来,移动设备,以及“物联网”---物联网-通过 RFID(无线射频识别系统),以及其它传感器进行连接----使我们能够采集,并分析来自制造系统,运输基本设施,医疗器械,以及你所能想到任何来源的海量数据。

因此,随着大数据的持续发展,若仅关注早期的大数据应用,终将付出代价。那些我们与大数据联系一处的新兴技术,建立起了标准的数据管理体系,能够应对随后的数据大爆炸。

[责任编辑:黄辉]
大黄
以备份起家的CommVault近两年的解决方案不断向更全面的数据保护转型,并对数据管理、数据挖掘也有了一些关注。CommVault中国区技术总监蔡报永接受采访时表示CommVault将继续做一家专注做数据管理和信息管理的软件厂商。
官方微信
weixin
精彩专题更多
华为OceanStor V3系列存储系统是面向企业级应用的新一代统一存储产品。在功能、性能、效率、可靠性和易用性上都达到业界领先水平,很好的满足了大型数据库OLTP/OLAP、文件共享、云计算等各种应用下的数据存储需求。
12月15日,中国闪存联盟成立,同时IBM Flash System卓越中心正式启动
DOIT、DOSTOR、易会移动客户端播报中国存储峰会盛况。
 

公司简介 | 媒体优势 | 广告服务 | 客户寄语 | DOIT历程 | 诚聘英才 | 联系我们 | 会员注册 | 订阅中心

Copyright © 2013 DOIT Media, All rights Reserved.