CDH5.12.0 (5.X)安装笔记(离线parcel安装)

2024-06-12 19:08

本文主要是介绍CDH5.12.0 (5.X)安装笔记(离线parcel安装),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

安装参考 http://blog.csdn.net/qq_23660243/article/details/60870527


操作系统:CentOS 7.3

本教程采用虚拟机安装CDH的完全分布式。

机器环境配置

配置虚拟机与安装系统

本教程选择VMware 10 作为虚拟机运行工具。

首先,需要配置虚拟机的虚拟网络,以及为虚拟机和物理主机之间配置网关,使虚拟机能够连上网络。

打开Vmware,编辑-> 虚拟网络编辑器-> 子网IP (192.168.2.0) 子网掩码(255.255.255.0)->  应用 -> 确定

回到windows --> 打开网络和共享中心 -> 更改适配器设置 -> 右键VMnet8 -> 属性 -> 双击IPv4 -> 设置windows的IP:192.168.2.2子网掩码:255.255.255.0  ,网关 192.168.2.1,

首选DNS :8.8.8.8,备用DNS:114.114.114.114



安装CentOS

使用VMware安装CentOS,由于自己笔记本内存8G,为了流畅运行CentOS,选择最小(Mini)版安装即可。

设置主节点机器内存为:2G,处理器:1,核心数:1。(其余节点,设置内存为:512M,处理器:1,核心数:1)

创建用户 :hadoop  密码:hadoop

修改普通用户执行权限

让普通用户具备sudo执行权限

切换到root

然后  vi /etc/sudoers   加入一行

root    ALL=(ALL)       ALL
hadoop  ALL=(ALL)       ALL

关闭防火墙和selinux

关闭firewall:

[root@hadoop ~]# systemctl stop firewalld.service      #停止firewall
[root@hadoop ~]# systemctl disable firewalld.service   #禁止firewall开机启动
[root@hadoop ~]# firewall-cmd --state                  #查看默认防火墙状态(关闭后显示notrunning,开启后显示running)

配置网关和IP

查询此虚拟机正在运行的网卡

[root@hadoop ~]# ifconfig

可以看到该虚拟机的网卡为 ens33 .

接下来,修改网卡配置文件

[root@hadoop ~]# vi /etc/sysconfig/network-scripts/ifcfg-ens33

需要将配置文件中修改(或添加)项 如下:

  • BOOTPROTO="static" #dhcp改为static 
  • ONBOOT="yes" #开机启用本配置  

  • IPADDR=192.168.2.110 #静态IP

  • GATEWAY=192.168.2.1 #默认网关 
  • NETMASK=255.255.255.0 #子网掩码 

  • DNS1=192.168.2.1 #DNS 配置

配置完毕,重启网卡。并查询一下本机的ip地址。

[root@hadoop ~]# systemctl restart network
[root@hadoop ~]#  ip addr


回到windows,检测一下物理主机能否ping通虚拟机(本人物理主机使用windows系统)

ping 192.168.2.110

回到虚拟机,检测一下虚拟机能否ping通网络

ping www.baidu.com

若都能ping通,则表示网卡网关配置成功!


通过Secure CRT远程连接虚拟机

在物理主机安装 Secure CRT 软件,输入hostname和username对虚拟机进行远程连接。

修改主机名

修改hosts文件和hostname文件

vi /etc/hosts    #在hosts文件中添加记录,192.168.2.110 master
 
vi /etc/hostname   # 把文件中原来的名字去掉,修改为 master
vi /etc/sysconfig/network   #把文件中的主机名修改为 master

再次查询,可见主机名已经更改。

更改yum源

yum源都在国外,我们现在更改为 163 的源。(因为本教程中是在CentOS 7 利用yum安装 mysql 5.7,aliyun源缺少相关组件,不建议使用 )

下载  CentOS7-Base-163.repo 文件,将虚拟机中的源 进行备份,并替换掉。

 mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup

在Secure CRT 中,上传下载的 CentOS7-Base-163.repo  文件,同时按下 alt + p 后,出现sftp窗口,然后put d:\CentOS7-Base-163.repo  

文件会上传至 /home/hadoop 根目录中

接下来,将文件放到 /etc/yum.repos.d 中,并重命名称。

 mv /etc/yum.repos.d/CentOS7-Base-163.repo /etc/yum.repos.d/CentOS-Base.repo 


接下来,我们要makecache一下,然后更新包。

 yum makecacheyum update


过程可能很长,y输入一直继续。

这篇关于CDH5.12.0 (5.X)安装笔记(离线parcel安装)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1055078

相关文章

RabbitMQ 延时队列插件安装与使用示例详解(基于 Delayed Message Plugin)

《RabbitMQ延时队列插件安装与使用示例详解(基于DelayedMessagePlugin)》本文详解RabbitMQ通过安装rabbitmq_delayed_message_exchan... 目录 一、什么是 RabbitMQ 延时队列? 二、安装前准备✅ RabbitMQ 环境要求 三、安装延时队

linux系统上安装JDK8全过程

《linux系统上安装JDK8全过程》文章介绍安装JDK的必要性及Linux下JDK8的安装步骤,包括卸载旧版本、下载解压、配置环境变量等,强调开发需JDK,运行可选JRE,现JDK已集成JRE... 目录为什么要安装jdk?1.查看linux系统是否有自带的jdk:2.下载jdk压缩包2.解压3.配置环境

Python库 Django 的简介、安装、用法入门教程

《Python库Django的简介、安装、用法入门教程》Django是Python最流行的Web框架之一,它帮助开发者快速、高效地构建功能强大的Web应用程序,接下来我们将从简介、安装到用法详解,... 目录一、Django 简介 二、Django 的安装教程 1. 创建虚拟环境2. 安装Django三、创

linux安装、更新、卸载anaconda实践

《linux安装、更新、卸载anaconda实践》Anaconda是基于conda的科学计算环境,集成1400+包及依赖,安装需下载脚本、接受协议、设置路径、配置环境变量,更新与卸载通过conda命令... 目录随意找一个目录下载安装脚本检查许可证协议,ENTER就可以安装完毕之后激活anaconda安装更

Jenkins的安装与简单配置过程

《Jenkins的安装与简单配置过程》本文简述Jenkins在CentOS7.3上安装流程,包括Java环境配置、RPM包安装、修改JENKINS_HOME路径及权限、启动服务、插件安装与系统管理设置... 目录www.chinasem.cnJenkins安装访问并配置JenkinsJenkins配置邮件通知

Python学习笔记之getattr和hasattr用法示例详解

《Python学习笔记之getattr和hasattr用法示例详解》在Python中,hasattr()、getattr()和setattr()是一组内置函数,用于对对象的属性进行操作和查询,这篇文章... 目录1.getattr用法详解1.1 基本作用1.2 示例1.3 原理2.hasattr用法详解2.

Win10安装Maven与环境变量配置过程

《Win10安装Maven与环境变量配置过程》本文介绍Maven的安装与配置方法,涵盖下载、环境变量设置、本地仓库及镜像配置,指导如何在IDEA中正确配置Maven,适用于Java及其他语言项目的构建... 目录Maven 是什么?一、下载二、安装三、配置环境四、验证测试五、配置本地仓库六、配置国内镜像地址

Python安装Pandas库的两种方法

《Python安装Pandas库的两种方法》本文介绍了三种安装PythonPandas库的方法,通过cmd命令行安装并解决版本冲突,手动下载whl文件安装,更换国内镜像源加速下载,最后建议用pipli... 目录方法一:cmd命令行执行pip install pandas方法二:找到pandas下载库,然后

Linux系统中查询JDK安装目录的几种常用方法

《Linux系统中查询JDK安装目录的几种常用方法》:本文主要介绍Linux系统中查询JDK安装目录的几种常用方法,方法分别是通过update-alternatives、Java命令、环境变量及目... 目录方法 1:通过update-alternatives查询(推荐)方法 2:检查所有已安装的 JDK方

SQL Server安装时候没有中文选项的解决方法

《SQLServer安装时候没有中文选项的解决方法》用户安装SQLServer时界面全英文,无中文选项,通过修改安装设置中的国家或地区为中文中国,重启安装程序后界面恢复中文,解决了问题,对SQLSe... 你是不是在安装SQL Server时候发现安装界面和别人不同,并且无论如何都没有中文选项?这个问题也