Hadoop配置文件

梦里梦外; 2022-07-13 01:24 224阅读 0赞

hadoop需要配置五个文件

第一个：

hadoop-env.sh

把里面的下面一行改为真正的java路径

export JAVA_HOME=/usr/local/java/jdk1.7.0_79

第二个：

core-site.xml

<configuration>
    	
    	<property>
    		<name>fs.default.name</name>
    		<value>hdfs://itcast:9000</value>
    	</property>
    	
    	<property>
    		<name>hadoop.tmp.dir</name>
    		<value>/itcast/hadoop-2.7.3/tmp</value>
    	</property>
    </configuration>

第三个：

hdfs-site.xml

<configuration>
    	
    	<property>
    		<name>dfs.replication</name>
    		<value>1</value>
    	</property>
    </configuration>

第四个：

mapred-site.xml

注意这个要拷贝一个副本，或改名源文件mapred-site.xml.template为mapred-site.xml

<configuration>
    	
    	<property>
    		<name>mapreduce.framework.name</name>
    		<value>yarn</value>
    	</property>
    </configuration>

第五个：

yarn-site.xml

<configuration>
    	<property>
    		<name>yarn.resourcemanager.hostname</name>
    		<value>localhost</value>
    	</property>
    	<property>
    		<name>yarn.nodemanager.aux-services</name>
    		<value>mapreduce_shuffle</value>
    	</property>
    </configuration>

发表评论取消回复

表情：

评论列表（有 0 条评论，224人围观）

还没有评论，来说两句吧...

相关阅读

相关 Hadoop配置文件介绍

文章目录一,默认配置文件二,自定义配置文件 Hadoop 配置文件分两类：默认配置文件和自定义配置文件，只有用户想修改某一默认配置值时，才需要修改自定义

﹏ヽ暗。殇╰゛Y/ 2023年01月14日 10:58/ 0 赞/ 155 阅读

相关 Hadoop配置文件与HBase配置文件

本Hadoop与HBase集群有1台NameNode, 7台DataNode 1. /etc/hostname文件 NameNode: node1 DataNod

我就是我/ 2022年08月27日 04:53/ 0 赞/ 275 阅读

相关 Hadoop配置文件

hadoop需要配置五个文件第一个： hadoop-env.sh 把里面的下面一行改为真正的java路径 export JAVA_HOME=/usr/loca

梦里梦外;/ 2022年07月13日 01:24/ 0 赞/ 225 阅读

相关 maven配置hadoop的pom文件

<?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0

女爷i/ 2022年06月02日 01:06/ 0 赞/ 317 阅读

相关 hadoop各个配置文件的作用

core-site.xml 　　<property> //指定hdfs的主端口 namenode要放在哪台机器上　　　　<name>fs.defaul

川长思鸟来/ 2022年05月14日 12:21/ 0 赞/ 241 阅读

相关 Hadoop各个配置文件的作用

core-site.xml 其中 fs.defaultFS 配置的地址就是java代码访问的时候的路径，需要配置在java代码中代码中要用IP:9000不能用local

爱被打了一巴掌/ 2022年04月13日 08:55/ 0 赞/ 445 阅读

相关 Hadoop之hdfs-site.xml配置文件

下面来说下hadoop配置hdfs-site.xml文件的配置过程：增加hdfs配置信息（namenode、datanode端口和目录位置）hdfs-site.xml文件中

男娘i/ 2021年09月28日 13:28/ 0 赞/ 2643 阅读

相关 Hadoop之core-site.xml配置文件

下面介绍一下core-site.xml文件的配置：增加hadoop核心配置（hdfs文件端口是9000）core-site.xml文件中包含的信息，如使用Hadoop实例分

港控/mmm°/ 2021年09月28日 13:28/ 0 赞/ 792 阅读

相关 Hadoop之hadoop-env.sh配置文件

下面分享一下hadoop配置jdk路径： The java implementation to use: export JAVA_HOME=/home/bi

àì夳堔傛蜴生んèń/ 2021年09月28日 13:26/ 0 赞/ 693 阅读

相关 hadoop入门——配置文件说明

1.coer-site.xml <configuration> <!--【这里的值指的是默认的HDFS路径。这里只有一个HDFS集群，在这里指定！该值来

喜欢ヅ旅行/ 2021年09月27日 05:52/ 0 赞/ 434 阅读