超详Windows系统下eclipse远程hadoop环境搭建

2023-10-18 06:10

本文主要是介绍超详Windows系统下eclipse远程hadoop环境搭建,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

一.JAVA环境配置

  • JDK安装(小伙伴们上网找压缩包即可)

  • JDK环境变量配置

 

  • 新建一个系统变量

变量名:JAVA_HOME

变量值:根据自己JDK安装实际路径填写

  • 新建一个系统变量

变量名:CLASSPATH

变量值:%JAVA_HOME%\lib\dt.jar;%JAVA_HOME%\lib\tools.jar;.

  • 修改系统变量

变量名:PATH

变量值:%JAVA_HOME%bin;      (该项在前面添加 )

验证是否成功

打开cmd命令窗口输入 java -version 结果如下图则成功

二.下载Eclipse并配置(JavaSE版本、JavaEE版本均可)

找到Eclipse安装路径,在该路径下创建HadoopWorkspace文件夹

 

启动Eclipse,将工作空间设定在刚建立的HadoopWorkspace目录

 

下载并解压下图文件,将解压后文件复制到eclipse的相应目录plugins下

   解压之后=>  

 

三.windows系统中安装Hadoop2.7.3

将Hadoop2.7.3.tar.gz解压(这里需要解压缩两次)到指定位置:D:\hadoop-2.7.3

 经过1次解压缩=>

再次解压=>

配置环境变量:

新建系统变量

变量名:HADOOP_HOME

值为:D:\hadoop-2.7.3

 

修改系统变量

变量名:PATH

变量值:%HADOOP_HOME%bin;      (该项在前面添加 )

 

修改D:\hadoop-2.7.3\etc\hadoop\hadoop-env.cmd

修改set JAVA_HOME=C:\Progra~1\Java\jdk1.8.0_144    

注意1:写自己安装的jdk目录

注意2:和作者路径一样的小伙伴 Program Files  由于有空格命令无法执行所以要改成Progra~1

验证hadoop是否安装好

在命令行提示符下输入:hadoop version

重启eclipse后在windows==>preference==>Hadoop Map/Reduce设置hadoop的安装目录

注:安装目录根据自己hadoop实际路径写,作者为D:\hadoop-2.7.3

 

四.下载安装windows系统编译好的Hadoop2.7.1

  • 解压hadoop-2.7.1.tar 到D:\hadoop-2.7.1

  • 打开hadoop-2.7.1

    1.将文件winutil.exe复制到D:\hadoop-2.7.3\bin  注:这里复制到自己hadoop-2.7.3bin目录下
    2.将文件hadoop.dll复制到c:\windows\system32

 五.Eclipse内部配置

  • 重启Eclipse 添加并打开Map/Reduce视图

        windows==>Show View==>选择Map/Reduce Locations

 

  • 点击图中箭头位置,填写弹出新建Hadoop连接窗口

 

  •  填写相应的配置项内容

    location name:Hadoop     //自定义一个名字
    Map/Reduce master        //yarn_site.xml
        Host:192.168.118.129  //填自己虚拟机master的IP
         Port:18040  //固定
     DFS Master        //core_site.xml
        Host:192.168.118.129   //填自己虚拟机master的IP
         Port:9000     //固定

 

  • 到这里我们的所有配置就完成了,我们可以在Eclipse看到虚拟机里HDFS文件系统的文件情况

 

这篇关于超详Windows系统下eclipse远程hadoop环境搭建的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/230708

相关文章

Python+PyQt5开发一个Windows电脑启动项管理神器

《Python+PyQt5开发一个Windows电脑启动项管理神器》:本文主要介绍如何使用PyQt5开发一款颜值与功能并存的Windows启动项管理工具,不仅能查看/删除现有启动项,还能智能添加新... 目录开篇:为什么我们需要启动项管理工具功能全景图核心技术解析1. Windows注册表操作2. 启动文件

Gradle下如何搭建SpringCloud分布式环境

《Gradle下如何搭建SpringCloud分布式环境》:本文主要介绍Gradle下如何搭建SpringCloud分布式环境问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地... 目录Gradle下搭建SpringCloud分布式环境1.idea配置好gradle2.创建一个空的gr

Linux搭建单机MySQL8.0.26版本的操作方法

《Linux搭建单机MySQL8.0.26版本的操作方法》:本文主要介绍Linux搭建单机MySQL8.0.26版本的操作方法,本文通过图文并茂的形式给大家讲解的非常详细,感兴趣的朋友一起看看吧... 目录概述环境信息数据库服务安装步骤下载前置依赖服务下载方式一:进入官网下载,并上传到宿主机中,适合离线环境

使用Python创建一个功能完整的Windows风格计算器程序

《使用Python创建一个功能完整的Windows风格计算器程序》:本文主要介绍如何使用Python和Tkinter创建一个功能完整的Windows风格计算器程序,包括基本运算、高级科学计算(如三... 目录python实现Windows系统计算器程序(含高级功能)1. 使用Tkinter实现基础计算器2.

Android开发环境配置避坑指南

《Android开发环境配置避坑指南》本文主要介绍了Android开发环境配置过程中遇到的问题及解决方案,包括VPN注意事项、工具版本统一、Gerrit邮箱配置、Git拉取和提交代码、MergevsR... 目录网络环境:VPN 注意事项工具版本统一:android Studio & JDKGerrit的邮

Windows系统宽带限制如何解除?

《Windows系统宽带限制如何解除?》有不少用户反映电脑网速慢得情况,可能是宽带速度被限制的原因,只需解除限制即可,具体该如何操作呢?本文就跟大家一起来看看Windows系统解除网络限制的操作方法吧... 有不少用户反映电脑网速慢得情况,可能是宽带速度被限制的原因,只需解除限制即可,具体该如何操作呢?本文

windows和Linux使用命令行计算文件的MD5值

《windows和Linux使用命令行计算文件的MD5值》在Windows和Linux系统中,您可以使用命令行(终端或命令提示符)来计算文件的MD5值,文章介绍了在Windows和Linux/macO... 目录在Windows上:在linux或MACOS上:总结在Windows上:可以使用certuti

CentOS和Ubuntu系统使用shell脚本创建用户和设置密码

《CentOS和Ubuntu系统使用shell脚本创建用户和设置密码》在Linux系统中,你可以使用useradd命令来创建新用户,使用echo和chpasswd命令来设置密码,本文写了一个shell... 在linux系统中,你可以使用useradd命令来创建新用户,使用echo和chpasswd命令来设

电脑找不到mfc90u.dll文件怎么办? 系统报错mfc90u.dll丢失修复的5种方案

《电脑找不到mfc90u.dll文件怎么办?系统报错mfc90u.dll丢失修复的5种方案》在我们日常使用电脑的过程中,可能会遇到一些软件或系统错误,其中之一就是mfc90u.dll丢失,那么,mf... 在大部分情况下出现我们运行或安装软件,游戏出现提示丢失某些DLL文件或OCX文件的原因可能是原始安装包

电脑显示mfc100u.dll丢失怎么办?系统报错mfc90u.dll丢失5种修复方案

《电脑显示mfc100u.dll丢失怎么办?系统报错mfc90u.dll丢失5种修复方案》最近有不少兄弟反映,电脑突然弹出“mfc100u.dll已加载,但找不到入口点”的错误提示,导致一些程序无法正... 在计算机使用过程中,我们经常会遇到一些错误提示,其中最常见的就是“找不到指定的模块”或“缺少某个DL