发布于 2016-05-12 02:23:40 | 476 次阅读 | 评论: 0 | 来源: 网友投递

这里有新鲜出炉的Hadoop教程，程序狗速度看过来！

Hadoop分布式系统

一个分布式系统基础架构，由Apache基金会所开发。 用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。

---

操作系统：win7

hadoop版本：CDH3u6

1、下载安装JDK，以及Eclipse

   具体看此链接：http://blog.csdn.net/weixuehao/article/details/17715793

2、新建JAVA Project

3、去cloudera网站下载hadoop的CDH3u6版本。将起解压到win7的某个目录

4、选中OperateHDFS，右击，选择“property”，弹出右侧的窗口；

    选择“Java Build Path” —— “Libraries” —— Add External Jars

 

5、到上面的画面后，下面就是选择开发hadoop程序时，用到的一些jar包

    将lib文件夹下的所有的jar包，添加进去；将红框内的jar包，安装进去。

6、创建配置文件夹

7、将core-site.xml,hdfs-site.xml,mapred-site.xml放入到此文件夹中。

 

 

8、右键->属性 进行如下操作，添加刚刚创建conf文件夹

 

 

配置搞定！

写代码的过程中要写入的namenode和jobtracker地址(修改为你自己的)

在你的代码中，加入如下代码就可以了