Ambari部署及hdp部署的疑难问题解答汇总

2024-01-30 11:40

本文主要是介绍Ambari部署及hdp部署的疑难问题解答汇总,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

点击上方蓝色“大数据实战演练”,选择“设为星标”或“置顶”

回复“资料”领取独家整理的学习资料!

每一个成功人士的背后,必定曾经做出过勇敢而又孤独的决定。

放弃不难,但坚持很酷~

前言

以下,都是收集于网友、群友安装 ambari 或部署 hdp 集群时出现的问题,挤时间写了个疑难问题解答汇总,希望能够快速帮小伙伴们定位解决问题。觉得文章靠谱的小伙伴,希望能转发、点赞、在看三连走一波~

一、hdp version 丢失

hdp version 丢失的问题,算是比较常见。之前有不少朋友都私信问过我,今天在群里又有群友遇到这个问题,索性记录一下吧。

1、问题描述

在安装完 ambari 部署 hdp 集群的时候,发现少了 hdp 版本号,如下图所示:

2、解决办法

点击 “Add Verision” 按钮后,如下图所示:

两种方法,可以选择上传本地 hdp version 文件,也可以直接键入文件链接。

对,就是这个 HDP-3.1.0.0-78.xml 文件,它记载了 hdp 各服务版本信息,在 /var/www/html/HDP/centos7/3.1.0.0-78 目录下。

如果链接打不开,请确保 httpd 服务是正常的哈。正常的话,通常就能打开,不行就换个浏览器试试。

点击按钮后,基本上 version 信息就出来了,如下图所示:

二、安装 hdp 服务时很慢,甚至超过了 30 分钟

yum 安装 hdp 相关 rpm 包超时,超时 30 分钟。。

碰到这种问题,首先要做的是,去这个节点上,手动执行 yum install hadoop_3_1_4_0_315 ,看看会报错,还是单纯的下载慢。

如果只是安装速度慢,可以看下,repo 源文件里面配置的是不是 yum 本地源,如果是,再确认下是不是配置成了外网ip,这个很重要,还是推荐配置内网 ip 。

如果 yum 安装报错的话,就是 yum 源的问题,你就针对解决就可以。

三、安装 Hive 服务时,测试 mysql 连接不通过

测试通不过的话,可以点击 “Connection Failed” 查看错误日志。思路如下:

1)jdbc 驱动 jar 包有吗?

2)数据库 url 对吗?数据库存在吗?用户名密码对吗?

一般就这两方面,如果没有 jdbc 驱动包的话,可以执行如下命令:

ambari-server setup --jdbc-db=mysql --jdbc-driver=/usr/share/java/mysql-connector-java.jar

命令会将 mysql-connector-java.jar 拷贝到 /var/lib/ambari-server/resources/ 目录下。

四、启动 ambari-server 时,日志提示数据库密码不正确

无非就是 ambari-server setup 时,配置指定的数据库账号密码不对。

MySQL 中的用户是 用户名host 共同标识。ambari@localhost、ambari@% 算是两个用户。

这个可以参考 《Ambari 2.7.3.0 安装部署 hadoop 3.1.0.0 集群完整版,附带移除 SmartSense 服务》中的 第六章节 - 安装mysql

五、安装 Ambari 并部署 hdp 集群脑图

目前,就安装 ambari 并部署 hdp 集群来说,我已经有了两篇文章一个视频,除了这个文档,还有:

  • 一篇图文教程《Ambari 2.7.3.0 安装部署 hadoop 3.1.0.0 集群完整版,附带移除 SmartSense 服务》,很详细

  • 录制的视频已上传到哔哩哔哩网站,地址:https://www.bilibili.com/video/av80315899,虽然录制的时间较晚,但是荣登榜首,开心!也能侧面证明视频的质量,真的录制的已经很细致了,果然群众的眼睛是雪亮的~~~

下面这个图是安装 ambari 并部署 hdp 集群的脑图,大家可以看看,很详细吧。

四、加群

海内存知己,天涯若比邻。同为 ambari 的使用者,在网上资料还不多的情况下,碰到熟悉 ambari 的朋友真的是一种幸运。平时我有运营大数据技术交流群,里面有很多 ambari 的伙伴,有问题可以在这里交流解决~ 哈哈,有没有感觉找到组织了呢?

感兴趣的朋友可以加我微信:create17_ ,坑位不多,我拉你进群。

五、Ambari 实战课程宣传

鉴于 ambari 自定义服务集成系列资料,网上太少。我就利用了空闲时间录制了一系列的课程,方便大家学习。感兴趣的可以看看这个链接:

付费 | Ambari自定义服务集成实战教学(完结) · 语雀

可复制在浏览器中查看,或进入本公众号菜单 -> Ambari -> Ambari 课程查看。

好啦,本篇 ambari 部署及 hdp 部署的疑难问题解答暂时就汇总到这里,如果后续还有新问题,我会继续更新。鉴于微信文章不支持更新,大家可以点击原文链接实时查看最新文章。

觉得文章靠谱的小伙伴,希望能转发、点赞、在看三连走一波~

欢迎大家留言讨论

???? ???? ????

往期推荐

Ambari 2.7.3.0 安装部署 hadoop 3.1.0.0 集群完整版,附带移除 SmartSense 服务

快来看,全网少有的Ambari自定义服务集成实战(全)

Ambari 2.7.3.0 安装部署 hadoop 3.1.0.0 集群视频完整版

ambari 自定义服务集成原理讲解,自定义服务项目结构解读

入群指南(大数据实战演练群分布情况)

扫一扫,我们的故事就开始了。

如果这篇文章对你有所启发,点赞、转发都是一种支持!

另外公众号改变了推送规则,大家看文章不要忘记点击最下方的在看,点赞按钮,这样微信自动识别为常看公众号,否则很可能推送的文章可能淹没在别的文章找不到,谢谢大家

让我知道你在看

这篇关于Ambari部署及hdp部署的疑难问题解答汇总的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/660130

相关文章

通过Docker容器部署Python环境的全流程

《通过Docker容器部署Python环境的全流程》在现代化开发流程中,Docker因其轻量化、环境隔离和跨平台一致性的特性,已成为部署Python应用的标准工具,本文将详细演示如何通过Docker容... 目录引言一、docker与python的协同优势二、核心步骤详解三、进阶配置技巧四、生产环境最佳实践

Nginx部署HTTP/3的实现步骤

《Nginx部署HTTP/3的实现步骤》本文介绍了在Nginx中部署HTTP/3的详细步骤,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学... 目录前提条件第一步:安装必要的依赖库第二步:获取并构建 BoringSSL第三步:获取 Nginx

redis-sentinel基础概念及部署流程

《redis-sentinel基础概念及部署流程》RedisSentinel是Redis的高可用解决方案,通过监控主从节点、自动故障转移、通知机制及配置提供,实现集群故障恢复与服务持续可用,核心组件包... 目录一. 引言二. 核心功能三. 核心组件四. 故障转移流程五. 服务部署六. sentinel部署

Linux部署中的文件大小写问题的解决方案

《Linux部署中的文件大小写问题的解决方案》在本地开发环境(Windows/macOS)一切正常,但部署到Linux服务器后出现模块加载错误,核心原因是Linux文件系统严格区分大小写,所以本文给大... 目录问题背景解决方案配置要求问题背景在本地开发环境(Windows/MACOS)一切正常,但部署到

Python按照24个实用大方向精选的上千种工具库汇总整理

《Python按照24个实用大方向精选的上千种工具库汇总整理》本文整理了Python生态中近千个库,涵盖数据处理、图像处理、网络开发、Web框架、人工智能、科学计算、GUI工具、测试框架、环境管理等多... 目录1、数据处理文本处理特殊文本处理html/XML 解析文件处理配置文件处理文档相关日志管理日期和

Python38个游戏开发库整理汇总

《Python38个游戏开发库整理汇总》文章介绍了多种Python游戏开发库,涵盖2D/3D游戏开发、多人游戏框架及视觉小说引擎,适合不同需求的开发者入门,强调跨平台支持与易用性,并鼓励读者交流反馈以... 目录PyGameCocos2dPySoyPyOgrepygletPanda3DBlenderFife

使用IDEA部署Docker应用指南分享

《使用IDEA部署Docker应用指南分享》本文介绍了使用IDEA部署Docker应用的四步流程:创建Dockerfile、配置IDEADocker连接、设置运行调试环境、构建运行镜像,并强调需准备本... 目录一、创建 dockerfile 配置文件二、配置 IDEA 的 Docker 连接三、配置 Do

MySQL 主从复制部署及验证(示例详解)

《MySQL主从复制部署及验证(示例详解)》本文介绍MySQL主从复制部署步骤及学校管理数据库创建脚本,包含表结构设计、示例数据插入和查询语句,用于验证主从同步功能,感兴趣的朋友一起看看吧... 目录mysql 主从复制部署指南部署步骤1.环境准备2. 主服务器配置3. 创建复制用户4. 获取主服务器状态5

golang程序打包成脚本部署到Linux系统方式

《golang程序打包成脚本部署到Linux系统方式》Golang程序通过本地编译(设置GOOS为linux生成无后缀二进制文件),上传至Linux服务器后赋权执行,使用nohup命令实现后台运行,完... 目录本地编译golang程序上传Golang二进制文件到linux服务器总结本地编译Golang程序

如何在Ubuntu 24.04上部署Zabbix 7.0对服务器进行监控

《如何在Ubuntu24.04上部署Zabbix7.0对服务器进行监控》在Ubuntu24.04上部署Zabbix7.0监控阿里云ECS服务器,需配置MariaDB数据库、开放10050/1005... 目录软硬件信息部署步骤步骤 1:安装并配置mariadb步骤 2:安装Zabbix 7.0 Server