Hadoop的發展歷史

2004年— 最初的版本(現在稱為HDFS和MapReduce)由Doug Cutting和Mike Cafarella開始實施。

2005年12月— Nutch移植到新的框架，Hadoop在20個節點上穩定運行。

2006年1月— Doug Cutting加入雅虎。

2006年2月— Apache Hadoop項目正式啟動以支持MapReduce和HDFS的獨立發展。

2006年2月— 雅虎的網格計算團隊采用Hadoop。

2006年4月— 標準排序(10 GB每個節點)在188個節點上運行47.9個小時。

…………

Hadoop的工作原理是：

Hadoop 由許多元素構成。其最底部是 Hadoop Distributed File System(HDFS),它存儲 Hadoop 集群中所有存儲節點上的文件。HDFS(對于本文)的上一層是MapReduce 引擎,該引擎由 JobTrackers 和 TaskTrackers 組成。………