雅虎开源 Yahoo! Distribution of Hadoop

Hadoopop 是一个开源的Java并行编程框架,由DougCutting开发,它是Map/Reduce的开源版本。
Map/Reduce 技术可以将应用程序分解为多个工作片段,每一个片段都可以在簇中的任何一个节点中运行。Google 就是用它在计算机簇上对大规模数据进行分布式计算的。
Facebook 便是使用 HadoopHadoop 作为站内搜索工具。Hadoop 还支持HDFS分布式文件系统,该文件系统将数据存储在簇的节点中,以此来提高带宽利用。
不久前,雅虎的网络计算团队使用自己开发的 Yahoo! Distribution of Hadoop 在GraySort年度比赛中,打破了世界数据排序记录。6月10日,在硅谷举行的 Hadoop Summit 会议上,雅虎宣布将其内部使用的Hadoop开源。
分享此文 →
2条评论▼