windows配置hadoop(详细)

编程知识 更新时间:2023-04-12 12:52:52

一、环境

windows7 64位

hadoop2.7

二、安装java1.8,并配置环境变量

下载地址:

http://www.oracle/technetwork/java/javase/downloads/jdk8-downloads-2133151.html

下载对应的jdk

配置环境变量:

电脑—属性—高级电脑设置—环境变量

系统变量那里,点击新建,输入如图所示。

找到Path,编辑,在最后面加上;%JAVA_HOME%in;%JAVA_HOME%jrein;

三、安装配置hadoop

方案一:直接下载我已经修改好的hadoop,新建环境变量即可使用

1、下载修改好的hadoop,解压缩,配置环境变量

在Path中加上D:hadoop-2.7.1in;D:hadoop-2.7.1sbin;

2、新建data文件夹,并且在该文件夹下,新建两个文件夹namenode和datanode

修改hadoop-2.7.1etchadoop的hadoop-env.cmd文件,用txt或者Notepad++打开,修改java_home,使其指向你的java的安装位置。

3、此时打开cmd,输入hdfs namenode -format,回车

4、在刚刚的窗口输入start-all.cmd,回车会弹出4个新的cmd窗口

5、打开浏览器,输入localhost:8088

方案二:

去hadoop官网下载hadoop,解压缩

修改多个配置文件

D:hadoop-2.7.1etchadoopcore-site.xml

<configuration>
        <property>
                <name>fs.defaultFS</name>
                <value>hdfs://localhost:9000</value>
        </property>

</configuration>

D:hadoop-2.7.1etchadoopmapred-site.xml

<configuration>
        <property>
                <name>mapreduce.framework.name</name>
                <value>yarn</value>
        </property>

</configuration>

D:hadoop-2.7.1etchadoopyarn-site.xml

<configuration>

<!-- Site specific YARN configuration properties -->
        <property>
                <name>yarn.nodemanager.aux-services</name>
                <value>mapreduce_shuffle</value>
        </property>
		
		<property>
                <name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name>
                <value>org.apache.hahoop.mapred.ShuffleHandler</value>
        </property>
</configuration>

配置完环境变量后,接着从方案一第二步开始执行。

更多推荐

windows配置hadoop(详细)

本文发布于:2023-04-10 20:57:00,感谢您对本站的认可!
本文链接:https://www.elefans.com/category/jswz/4825d65bbc35a4705c49504667415f9a.html
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。
本文标签:详细   windows   hadoop

发布评论

评论列表 (有 0 条评论)
草根站长

>www.elefans.com

编程频道|电子爱好者 - 技术资讯及电子产品介绍!

  • 66036文章数
  • 14阅读数
  • 0评论数