虚拟机+ubuntu+Hadoop配置+win10下eclipse与虚拟机的通信

编程入门 行业动态 更新时间:2024-10-14 10:44:05

<a href=https://www.elefans.com/category/jswz/34/1770279.html style=虚拟机+ubuntu+Hadoop配置+win10下eclipse与虚拟机的通信"/>

虚拟机+ubuntu+Hadoop配置+win10下eclipse与虚拟机的通信

最近,要在eclipse实现一个Hadoop工程,并传给虚拟机的hadoop运行,查了好多博客,记录一下出错的地方。


:虚拟机里面配置Hadoop(特别提醒不要下最新的Ubuntu和hadoop,出错了的坑巨多且网上还不好找到解决办法
首先,配置hadoop参照了这位朋友的:
hadoop的伪分布式集群配置

可能出现的坑:
1、一定要按上面配置好ssh,不然后面肯定出现问题。

2、注意jdk、hadoop、ubuntu(或者其他linux系统)版本是否匹配。

3、最好创建一个hadoop用户,并给予权限,类似这样“sudo chown -R hadoop ./hadoop”

4、在单机执行wordcount时,可能share/hadoop下没有mapreduce,不要纠结,直接在网上下载一个版本匹配的wordcount的jar包,给复制到这个目录下。
如果单机还是运行wordcount失败,也不要纠结,先把伪分布集群配置好,在集群中执行(我是在伪集群中执行成功了)

5. 布置完成后,格式化开启集群后,输入jps发现没有datanode节点,可能时是原来的格式化失败留下的namenode节点没删掉,去自己hadoop目录tmp往下走,把namenode删掉࿰

更多推荐

虚拟机+ubuntu+Hadoop配置+win10下eclipse与虚拟机的通信

本文发布于:2024-03-05 00:26:39,感谢您对本站的认可!
本文链接:https://www.elefans.com/category/jswz/34/1710820.html
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。
本文标签:虚拟机   通信   ubuntu   Hadoop   eclipse

发布评论

评论列表 (有 0 条评论)
草根站长

>www.elefans.com

编程频道|电子爱好者 - 技术资讯及电子产品介绍!