超详Windows系统下eclipse远程hadoop环境搭建

2023-10-18 06:10

本文主要是介绍超详Windows系统下eclipse远程hadoop环境搭建,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

一.JAVA环境配置

  • JDK安装(小伙伴们上网找压缩包即可)

  • JDK环境变量配置

 

  • 新建一个系统变量

变量名:JAVA_HOME

变量值:根据自己JDK安装实际路径填写

  • 新建一个系统变量

变量名:CLASSPATH

变量值:%JAVA_HOME%\lib\dt.jar;%JAVA_HOME%\lib\tools.jar;.

  • 修改系统变量

变量名:PATH

变量值:%JAVA_HOME%bin;      (该项在前面添加 )

验证是否成功

打开cmd命令窗口输入 java -version 结果如下图则成功

二.下载Eclipse并配置(JavaSE版本、JavaEE版本均可)

找到Eclipse安装路径,在该路径下创建HadoopWorkspace文件夹

 

启动Eclipse,将工作空间设定在刚建立的HadoopWorkspace目录

 

下载并解压下图文件,将解压后文件复制到eclipse的相应目录plugins下

   解压之后=>  

 

三.windows系统中安装Hadoop2.7.3

将Hadoop2.7.3.tar.gz解压(这里需要解压缩两次)到指定位置:D:\hadoop-2.7.3

 经过1次解压缩=>

再次解压=>

配置环境变量:

新建系统变量

变量名:HADOOP_HOME

值为:D:\hadoop-2.7.3

 

修改系统变量

变量名:PATH

变量值:%HADOOP_HOME%bin;      (该项在前面添加 )

 

修改D:\hadoop-2.7.3\etc\hadoop\hadoop-env.cmd

修改set JAVA_HOME=C:\Progra~1\Java\jdk1.8.0_144    

注意1:写自己安装的jdk目录

注意2:和作者路径一样的小伙伴 Program Files  由于有空格命令无法执行所以要改成Progra~1

验证hadoop是否安装好

在命令行提示符下输入:hadoop version

重启eclipse后在windows==>preference==>Hadoop Map/Reduce设置hadoop的安装目录

注:安装目录根据自己hadoop实际路径写,作者为D:\hadoop-2.7.3

 

四.下载安装windows系统编译好的Hadoop2.7.1

  • 解压hadoop-2.7.1.tar 到D:\hadoop-2.7.1

  • 打开hadoop-2.7.1

    1.将文件winutil.exe复制到D:\hadoop-2.7.3\bin  注:这里复制到自己hadoop-2.7.3bin目录下
    2.将文件hadoop.dll复制到c:\windows\system32

 五.Eclipse内部配置

  • 重启Eclipse 添加并打开Map/Reduce视图

        windows==>Show View==>选择Map/Reduce Locations

 

  • 点击图中箭头位置,填写弹出新建Hadoop连接窗口

 

  •  填写相应的配置项内容

    location name:Hadoop     //自定义一个名字
    Map/Reduce master        //yarn_site.xml
        Host:192.168.118.129  //填自己虚拟机master的IP
         Port:18040  //固定
     DFS Master        //core_site.xml
        Host:192.168.118.129   //填自己虚拟机master的IP
         Port:9000     //固定

 

  • 到这里我们的所有配置就完成了,我们可以在Eclipse看到虚拟机里HDFS文件系统的文件情况

 

这篇关于超详Windows系统下eclipse远程hadoop环境搭建的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/230708

相关文章

一篇文章彻底搞懂macOS如何决定java环境

《一篇文章彻底搞懂macOS如何决定java环境》MacOS作为一个功能强大的操作系统,为开发者提供了丰富的开发工具和框架,下面:本文主要介绍macOS如何决定java环境的相关资料,文中通过代码... 目录方法一:使用 which命令方法二:使用 Java_home工具(Apple 官方推荐)那问题来了,

vite搭建vue3项目的搭建步骤

《vite搭建vue3项目的搭建步骤》本文主要介绍了vite搭建vue3项目的搭建步骤,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学... 目录1.确保Nodejs环境2.使用vite-cli工具3.进入项目安装依赖1.确保Nodejs环境

Nginx搭建前端本地预览环境的完整步骤教学

《Nginx搭建前端本地预览环境的完整步骤教学》这篇文章主要为大家详细介绍了Nginx搭建前端本地预览环境的完整步骤教学,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录项目目录结构核心配置文件:nginx.conf脚本化操作:nginx.shnpm 脚本集成总结:对前端的意义很多

Linux挂载linux/Windows共享目录实现方式

《Linux挂载linux/Windows共享目录实现方式》:本文主要介绍Linux挂载linux/Windows共享目录实现方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地... 目录文件共享协议linux环境作为服务端(NFS)在服务器端安装 NFS创建要共享的目录修改 NFS 配

基于Python开发Windows自动更新控制工具

《基于Python开发Windows自动更新控制工具》在当今数字化时代,操作系统更新已成为计算机维护的重要组成部分,本文介绍一款基于Python和PyQt5的Windows自动更新控制工具,有需要的可... 目录设计原理与技术实现系统架构概述数学建模工具界面完整代码实现技术深度分析多层级控制理论服务层控制注

idea+spring boot创建项目的搭建全过程

《idea+springboot创建项目的搭建全过程》SpringBoot是Spring社区发布的一个开源项目,旨在帮助开发者快速并且更简单的构建项目,:本文主要介绍idea+springb... 目录一.idea四种搭建方式1.Javaidea命名规范2JavaWebTomcat的安装一.明确tomcat

linux系统中java的cacerts的优先级详解

《linux系统中java的cacerts的优先级详解》文章讲解了Java信任库(cacerts)的优先级与管理方式,指出JDK自带的cacerts默认优先级更高,系统级cacerts需手动同步或显式... 目录Java 默认使用哪个?如何检查当前使用的信任库?简要了解Java的信任库总结了解 Java 信

java程序远程debug原理与配置全过程

《java程序远程debug原理与配置全过程》文章介绍了Java远程调试的JPDA体系,包含JVMTI监控JVM、JDWP传输调试命令、JDI提供调试接口,通过-Xdebug、-Xrunjdwp参数配... 目录背景组成模块间联系IBM对三个模块的详细介绍编程使用总结背景日常工作中,每个程序员都会遇到bu

Java服务实现开启Debug远程调试

《Java服务实现开启Debug远程调试》文章介绍如何通过JVM参数开启Java服务远程调试,便于在线上排查问题,在IDEA中配置客户端连接,实现无需频繁部署的调试,提升效率... 目录一、背景二、相关图示说明三、具体操作步骤1、服务端配置2、客户端配置总结一、背景日常项目中,通常我们的代码都是部署到远程

k8s搭建nfs共享存储实践

《k8s搭建nfs共享存储实践》本文介绍NFS服务端搭建与客户端配置,涵盖安装工具、目录设置及服务启动,随后讲解K8S中NFS动态存储部署,包括创建命名空间、ServiceAccount、RBAC权限... 目录1. NFS搭建1.1 部署NFS服务端1.1.1 下载nfs-utils和rpcbind1.1