上QQ阅读APP看本书,新人免费读10天
设备和账号都新为新人
第1章 神奇的大象——Hadoop
这是一个信息爆炸的时代,互联网上的信息正在以几何级数的速度增长。在这个大背景下,消耗CPU最多的计算逐渐从“提升软件本身性能”方面转移到信息处理方面。与此同时,摩尔定律似乎也不再像以前那么准确地发挥作用了。在这样的严峻形势下,各大厂商面临着极大的挑战——他们需要从TB乃至PB级的数据中挖掘出有用的信息,并对这些海量的数据进行快捷、高效的处理。在这段特殊时期,Google公司以MapReduce为基石,结合GFS、Bigtable逐步发展成为全球互联网企业的领头羊。然而,出于技术保密的原因,Google公司并没有开源其MapReduce的实现细节,这使得人们无法深入了解和认识它。就在这时,一头神秘的大象——Hadoop从天而降,它的开源给人们带来了新的希望。