0


IDEA连接hadoop hdfs

一、下载插件

在这里插入图片描述
进入一下界面, 搜索

big data tools

在这里插入图片描述
重启IDEA

二、本地配置

在这里插入图片描述
首先保证浏览器可以访问到
按照下述步骤创建一个HDFS连接
在这里插入图片描述

在这里插入图片描述
点击

Test Connection

出现报错,点击哪个报错的链接
在这里插入图片描述
https://cwiki.apache.org/confluence/display/HADOOP2/WindowsProblems
点击之后出现如下界面,点击

to github

下面这个页面就是解决方案,

HADOOP_HOME not found

在这里插入图片描述
https://github.com/steveloughran/winutils
在这里插入图片描述
下载解压后,放在某个路径下,并且保存该路径,并且找到对应的hadoop版本,我们要为他配置环境变量。我用的是hadoop-2.7.1
我的路径是

D:winutilswinutils-masterhadoop-2.7.1

在这里插入图片描述

在这里插入图片描述

三、配置环境变量

在桌面上,点击此电脑右键->属性 ->高级系统设置->环境变量
在这里插入图片描述

HADOOP_HOME
D:winutilswinutils-masterhadoop-2.7.1

在这里插入图片描述
点击确定。
找到Path,双击
在这里插入图片描述
新建一个

%HADOOP_HOME%in

在这里插入图片描述

四、再次连接

回到IDEA (建议重启IDEA),重新进行连接。
点击

Test connection

,可以连接了!!!
在这里插入图片描述
如果出现如下错误
在这里插入图片描述
在linux中随便创建一条数据即可

hdfs dfs -mkdir /data/1

在这里插入图片描述
这个时候就连接成功了!
在这里插入图片描述


本文转载自: https://blog.csdn.net/jiey0407/article/details/126595925
版权归原作者 技术布道师 所有, 如有侵权,请联系我们删除。

“IDEA连接hadoop hdfs”的评论:

还没有评论