发布于 2016-05-14 23:34:08 | 204 次阅读 | 评论: 0 | 来源: 网友投递
这里有新鲜出炉的Hadoop教程,程序狗速度看过来!
Hadoop分布式系统
一个分布式系统基础架构,由Apache基金会所开发。
用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。
<property>
<name>fs.checkpoint.dir</name>
<value>/disk1/hdfs/namesecondary,/disk2/hdfs/namesecondary</value>
</property>
<property>
<name>fs.checkpoint.dir</name>
<value>/disk1/hdfs/namesecondary,/disk2/hdfs/namesecondary</value>
<final>true</final>
</property>
</configuration>
core-site.xml
1. 整个Hadoop的入口
2.在主节点中,namenode必须配置
<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://namenode/</value>
</property>
</configuration>
hdfs-site.xml
1. 此配置想用于保存fimage和editlog,尽量将此目录放在安全的地方。
<configuration>
<property>
<name>dfs.name.dir</name>
<value>/disk1/hdfs/name,/remote/hdfs/name</value>
</property>
<configuration>
下面配置文件是用于存储数据的。数据分块放的目录
<property>
<name>dfs.data.dir</name>
<value>/disk1/hdfs/data,/disk2/hdfs/data</value>
</property>