其他笔记 - 如何利用superset部署一个可视化的数据平台 [ docker配置与测试记录 ]

本文主要是介绍其他笔记 - 如何利用superset部署一个可视化的数据平台 [ docker配置与测试记录 ],希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

superset配置与测试记录

  • 1 安装
    • 1.1 系统环境与前言
    • 1.2 docker部署superset
    • 1.3 superset中文化(可跳过)
  • 2 参考

1 安装

1.1 系统环境与前言

cat /etc/issue
Ubuntu 18.04.5 LTS \n \l

superset是一个开源数据可视化工具。

由Airbnb贡献的轻量级BI产品,目前在GitHub上有3万多颗星,其受欢迎程度可见一斑。Superset提供了Dashboard和多维分析两大类功能,后者可以将制作的结果发布到Dashboard上也可以单独使用。

数据源方面,Superset支持CSV、MySQL、Oracle、Redshift、Drill、Hive、Impala、Elasticsearch等27种数据源,并深度支持Druid。

InfluxDB 是一个开源分布式时序、事件和指标数据库。
我打算利用这个来部署一个边缘端的数据平台,搜集机器人和控制器数据并做可视化。

1.2 docker部署superset

docker search superset
NAME                                  DESCRIPTION
amancevice/superset                   Superset on Debian+Python3
apache/superset                       Apache Superset
preset/superset                       Apache Superset (incubating) is a modern,
tylerfowler/superset                  An extendable Docker image for Apache's Su
maedamikio/superset
huksley/superset                      AirBnB Superset 0.28 with MySQL driver
dailyhotel/superset                   Dockerized Superset
ganshanshan/superset_tddv             tddv superset
tyyzqmf/superset                      根据amancevice/superset修改的镜像 主要解决
yagami15145/superset-nginx
starburstdata/superset                Apache Superset docker container

选择拉取第一个,没写tag的话默认拉取latest版本

docker pull amancevice/superset

查看已下载的所有镜像。

docker image ls

运行。

docker run -d -p 8088:8088 -p 8086:8086 -v ~/home/DATAPLATFORM/data amancevice/superset

-p后面是端口映射,8088给superset,8086给influxdb, 也可以用3000-4000这种表示方法同时映射多个连续的ip。
-v 是挂载本地目录

docker ps 可用于查看容器,docker rename 新名 旧名可用于重命名容器。成功运行后可使用docker execattach进入,最好使用exec

docker exec -it <容器名> /bin/bash

进入容器以后设置用户名:

之前用命令fabmanager create-admin --app superset
安装时会报错 'NoneType' object has no attribute 'auth_type',且有警告提示说fabmanager即将被抛弃。

所以使用以下命令创建用户:

superset fab create-admin

创建用户
更新和初始化:

# 更新
superset db upgrade # 初始化
superset init# 启动服务器,不写-p默认5000
superset run -h 0.0.0.0 -p <端口号># 载入案例
superset load-test-users
superset load-examples

注意:
看到一些案例写的superset runserver,最新版没有runserver命令.
同时必须映射host到0.0.0.0,-h默认为127.0.0.1但外网无法访问。

1.3 superset中文化(可跳过)

在目录/usr/local/lib/python3.8/site-packages/superset下找到config.py的文件,进行编辑。位置在Setup default language。编辑时记得备份原文件。
编辑命令:

cd /usr/local/lib/python3.8/site-packages/superset
cp config.py backup_config.py
vim config.py

内容如图:
更改前:
中文设置
更改后:
在这里插入图片描述
运行时报错:

cannot import name ‘Any’ from partially initialized module ‘typing’
(most likely due to a circular import)

看了一下是我不能再当前目录下运行superset,和其他python模块冲突。换一个路径运行就行了。
在这里插入图片描述

在实际部署的时候可以使用gunicorn或者supervisor,该docker使用gunicorn进行服务进程管理.

//TODO
后续添加如何写influxdb的接入殷勤。

2 参考

  1. Superset学习实践(一)–基于Docker的安装配置
  2. superset搭建使用

这篇关于其他笔记 - 如何利用superset部署一个可视化的数据平台 [ docker配置与测试记录 ]的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1103434

相关文章

SQL Server修改数据库名及物理数据文件名操作步骤

《SQLServer修改数据库名及物理数据文件名操作步骤》在SQLServer中重命名数据库是一个常见的操作,但需要确保用户具有足够的权限来执行此操作,:本文主要介绍SQLServer修改数据... 目录一、背景介绍二、操作步骤2.1 设置为单用户模式(断开连接)2.2 修改数据库名称2.3 查找逻辑文件名

Python UV安装、升级、卸载详细步骤记录

《PythonUV安装、升级、卸载详细步骤记录》:本文主要介绍PythonUV安装、升级、卸载的详细步骤,uv是Astral推出的下一代Python包与项目管理器,主打单一可执行文件、极致性能... 目录安装检查升级设置自动补全卸载UV 命令总结 官方文档详见:https://docs.astral.sh/

Redis Cluster模式配置

《RedisCluster模式配置》:本文主要介绍RedisCluster模式配置,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录分片 一、分片的本质与核心价值二、分片实现方案对比 ‌三、分片算法详解1. ‌范围分片(顺序分片)‌2. ‌哈希分片3. ‌虚

SpringBoot项目配置logback-spring.xml屏蔽特定路径的日志

《SpringBoot项目配置logback-spring.xml屏蔽特定路径的日志》在SpringBoot项目中,使用logback-spring.xml配置屏蔽特定路径的日志有两种常用方式,文中的... 目录方案一:基础配置(直接关闭目标路径日志)方案二:结合 Spring Profile 按环境屏蔽关

canal实现mysql数据同步的详细过程

《canal实现mysql数据同步的详细过程》:本文主要介绍canal实现mysql数据同步的详细过程,本文通过实例图文相结合给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的... 目录1、canal下载2、mysql同步用户创建和授权3、canal admin安装和启动4、canal

Maven 配置中的 <mirror>绕过 HTTP 阻断机制的方法

《Maven配置中的<mirror>绕过HTTP阻断机制的方法》:本文主要介绍Maven配置中的<mirror>绕过HTTP阻断机制的方法,本文给大家分享问题原因及解决方案,感兴趣的朋友一... 目录一、问题场景:升级 Maven 后构建失败二、解决方案:通过 <mirror> 配置覆盖默认行为1. 配置示

Springboot3+将ID转为JSON字符串的详细配置方案

《Springboot3+将ID转为JSON字符串的详细配置方案》:本文主要介绍纯后端实现Long/BigIntegerID转为JSON字符串的详细配置方案,s基于SpringBoot3+和Spr... 目录1. 添加依赖2. 全局 Jackson 配置3. 精准控制(可选)4. OpenAPI (Spri

统一返回JsonResult踩坑的记录

《统一返回JsonResult踩坑的记录》:本文主要介绍统一返回JsonResult踩坑的记录,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录统一返回jsonResult踩坑定义了一个统一返回类在使用时,JsonResult没有get/set方法时响应总结统一返回

使用SpringBoot整合Sharding Sphere实现数据脱敏的示例

《使用SpringBoot整合ShardingSphere实现数据脱敏的示例》ApacheShardingSphere数据脱敏模块,通过SQL拦截与改写实现敏感信息加密存储,解决手动处理繁琐及系统改... 目录痛点一:痛点二:脱敏配置Quick Start——Spring 显示配置:1.引入依赖2.创建脱敏

maven私服配置全过程

《maven私服配置全过程》:本文主要介绍maven私服配置全过程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录使用Nexus作为 公司maven私服maven 私服setttings配置maven项目 pom配置测试效果总结使用Nexus作为 公司maven私