英特尔支持大数据开源 发行Hadoop免费版
11月30日，在北京举办的2012年Hadoop与大数据技术大会上，英特尔亚太研发有限公司总经理、英特尔软件与服务事业部中国区总经理何京翔博士代表英特尔公司宣布推出英特尔Hadoop发行版的免费版本。这也是自今年7月推出Hadoop发行版以...
共 96 篇文章
标签：Hadoop 第2页
大数据对数据中心架构的新挑战
由中国计算机学会主办、CCF大数据专家委员会承办HBTC2012Hadoop与大数据技术大会于11月30日在北京举行。 Gartner公司的数据中心研究部的首席分析师张瑾先生就大数据对数据中心架构的新挑战做了主题演讲。 Gartner研究表...
HBTC2012:大数据的挑战问题和发展趋势
由中国计算机学会主办、CCF大数据专家委员会承办HBTC2012Hadoop与大数据技术大会于11月30日在北京举行。本届大会以大数据共享与开放技术为主题，设置了Hadoop生态系统、大数据行业应用、大数据共享平台与应用以及大数据的技术挑战...
YARN： 让Hadoop更完善？
Apache Hadoop的肯定不是开源分布式文件系统唯一的解决方案，近年来出现了一些hadoop的竞争对手，如HPCC等等，但在蓬勃发展的大数据存储领域它肯定是最有名的和最流行的平台。 虽然hadoop精于数据处理和分析和原始存储，但Ha...
技术为王 HBTC 2012公布40位讲师及议题
11月30日-12月1日，中国IT界技术盛会——Hadoop与大数据技术大会(Hadoop&BigData Technology Conference 2012，以下简称“HBTC 2012&rd...
博客精选：Hadoop各商业发行版之比较
Hadoop的发行版除了社区的Apache hadoop外，cloudera，hortonworks，mapR，EMC，IBM，INTEL，华为等等都提供了自己的商业版本。商业版主要是提供了专业的技术支持，这对一些大型企业尤其重要。每个发行...
Hadoop之父勾勒大数据平台未来
“大数据不是炒作，也不是泡沫。Hadoop在未来将继续追随谷歌的脚步。”Hadoop的创造者兼Apache Hadoop项目创始人Doug Cutting近日表示。 作为一个批处理计算引擎，Apache Hadoop...
浅析Hadoop两大核心组件的体系结构
HDFS和MapReduce是Hadoop的两大核心。而整个Hadoop的体系结构主要是通过HDFS来实现对分布式存储的底层支持的，并且它会通过MapReduce来实现对分布式并行任务处理的程序支持。 HDFS的体系结构 我们首先介绍HDF...
如何为Hadoop集群选择合适的硬件？
我们的客户开始使用Hadoop时的第一个问题是如何为他们的Hadoop集群选择合适的硬件。这个博客介绍Hadoop管理员需要考虑的各种因素。我们也鼓励其他人根据他们的经验决定Hadoop集群配置。虽然Hadoop设计在工业标准硬件上运行，建...
Hadoop白皮书(3)：分布式计算框架MapReduce简介
MapReduce 是一个高性能的批处理分布式计算框架，用于对海量数据进行并行分析和处理。与传统数据仓库和分析技术相比，MapReduce 适合处理各种类型的数据，包括结构化、半结构化和非结构化数据。数据量在 TB 和 PB 级别，在这个量...
大数据与Hadoop之间的关系
大数据，一种新兴的数据挖掘技术，它正在让数据处理和分析变得更便宜更快速。大数据技术一旦进入超级计算时代，很快便可应用于普通企业，在遍地开花的过程中，它将改变许多行业业务经营的模式。但是很多人对大数据存在误解，下面就来缕一缕大数据与Hadoo...
针对大数据发展的三种猜想
过去很长时间，市场研究者和专家将每一个事物都贴上了大数据的标签，理由如下： 1. 每一个事物都在互联网上; 2. 互联网上存在大量的信息; 3. 因此每一件事都是数据。 当你有一个大锤时，所有的事情都变成细小的钉子，当你有一个Hadoop部...
提升效率--暴风影音Hadoop应用之法
自从互联网诞生伊始，互联网公司在IT技术领域就秉承了“开放、共享、创新”的互联网精神，以雅虎、谷歌、Facebook为代表的互联网公司对于IT技术的推动与发展可谓影响深远。以目前最为火热的大数据领域为例，Hadoop...
大数据技术对于企业数据挖掘的未来意义
我们都听说过如下的预测：到2020年，全球以电子形式存储的数据量将达到35ZB，是2009年全球存储量的40倍。而在2010年底，根据IDC的统计，全球数据量已经达到了120万PB，或1.2ZB。如果将这些数据都刻录在DVD上，那么光把这些...
如何提升Hadoop运行速度？
在数据处理方面，我们发现数据输入速度一般要比的数据处理速度快很多，这种现象在大数据领域尤为明显。随着数据不断膨胀，相应的响应时间自然要有所增加，数据处理的复杂度也在不断提高。作为一个开发者，我们自然非常关注系统的运行速度问题。在云计算领域，...
Hadoop白皮书2：分布式数据库HBase简介
HBase 是一个面向列的分布式数据库。HBase 不是一个关系型数据库，其设计目标是用来解决关系型数据库在处理海量数据时的理论和实现上的局限性。传统关系型数据库在上世纪七十年代为交易系统设计，以满足数据一致性(ACID)为目标，并没有考虑...
开源破解大数据困局 Hadoop非唯一选择
曾几何时，社交网络正悄然成长起来，并逐渐成为人们工作和生活中不可或缺的一部分。如今，社交网络发展得如火如荼，Facebook就是其中的一个 典型代表。Facebook作为社交网站的领头羊，最初只是为了方便大学宿舍成员之间的沟通，后来发展成用...
Hadoop白皮书1：分布式文件系统HDFS
Hadoop 分布式文件系统 (HDFS) 是运行在通用硬件上的分布式文件系统。HDFS 提供了一个高度容错性和高吞吐量的海量数据存储解决方案。HDFS 已经在各种大型在线服务和大型存储系统中得到广泛应用，已经成为各大网站等在线服务公司的海...
初志孟庆龙：拥抱开源 走出国产NAS之路
作为IT系统的基础设施，存储不可或缺。但受限于起步较晚，中高端鲜有国产存储的身影，而这一切终会改变。“诸如Hadoop、OPenStack之类的开源技术，以及英特尔公司开放性标准将给国产存储厂商带来崛起的希望。”国产...
《存储e周刊》第402期 大数据和Hadoop的关系分析
大数据和Hadoop的关系分析
Henry和我正在进行一项检查大数据以及其真正意义的工作。大数据是一个流行语。和许多流行语一样，大数据这个词用得有些滥了，但是它包含了一些真正的有用性和技术。我们决定在这个主题上对大数据进行一番分析，努力挖掘其中的真实性以及它们对存储解决方...
英特尔Hadoop发行版亮相
CNET科技资讯网 7月24日 北京报道(文/梁钦)：今日下午，英特尔在北京召开了主题为“芯动大数据、智领大机遇”的英特尔大数据论坛。会上，英特尔亚太研发有限公司总经理、英特尔软件与服务事业部中国区总经理何京翔博士指...
精华文档：英特尔Hadoop解决方案介绍
Facebook的Hadoop应用与故障转移方案
我们曾提到过在短短的60秒内，Facebook的用户会分享684478条信息，Like按钮被点击34772次。庞大的业务量时刻考验着 Facebook的数据处理能力。我们知道，Facebook使用Hadoop来进行大数据的处理，但Faceb...
大数据大发展 Hadoop成为关键部件
由于认识到Hadoop的巨大潜力，更多的用户在使用现有Hadoop平台技术的同时，着手研发自有的技术，以对Hadoop堆栈进行补充。 如今，Apache的Hadoop技术在帮助企业管理海量数据的过程中变得越来越重要。包括NASA(美国国家航...
大数据案例分析：电信业Hadoop应用分析
Hadoop伴随大数据一同火爆起来。现如今，Hadoop已经无人不知无人不晓。Hadoop从它一诞生的那天开始就与大数据深深地关联到了一起。众所周知，大数据多是出现在这些领域，包括金融、电信、保险以及一些大型互联网企业等。以电信行业为例，H...
大数据市场火爆 Hadoop 2.0即将发布
随着越来越多的公司开始使用Hadoop处理大数据，因此我们预测Hadoop不久就会推出2.0版本。 如今，Apache的Hadoop技术在帮助企业管理海量数据中变得越来越关键。包括NASA、推特和Netflix等用户对这一开源分布式计算平台...
EMC升级Greenplum 4.2 实现Hadoop处理
大数据的问题不仅是因为它很大，还因为它一直在膨胀。比起传统的数据仓库，它需要更现代的Hadoop MapReduce 数据处理。EMC最近更新了自己的Greenplum数据库，使其能够更容易地处理大数据。 如前一代，Greenplum数据库...
关于Hadoop你不得不知道的12个事实
现如今，Apache Hadoop已经无人不知无人不晓。当年雅虎搜索工程师Doug Cutting开发出这个用以创建分布式计算机环境的开源软件库，并以自己儿子的大象玩偶为其命名的时候，谁能想到它有一天会占据“大数据”...
大数据的发展与应用：Hadoop的前世今生
大数据计算我们把它理解成为一个什么事情呢?目前现在这个时代通信、网络等等这些电子信息技术发展，使数据规模得到了极大的增加。2011年整个全球产生的数据量达到1.8ZT，这样的数据量为传统的处理数据的技术提出了挑战。传统的技术处理不了这样规模...