其他笔记 - 如何利用superset部署一个可视化的数据平台 [ docker配置与测试记录 ]

本文主要是介绍其他笔记 - 如何利用superset部署一个可视化的数据平台 [ docker配置与测试记录 ],希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

superset配置与测试记录

  • 1 安装
    • 1.1 系统环境与前言
    • 1.2 docker部署superset
    • 1.3 superset中文化(可跳过)
  • 2 参考

1 安装

1.1 系统环境与前言

cat /etc/issue
Ubuntu 18.04.5 LTS \n \l

superset是一个开源数据可视化工具。

由Airbnb贡献的轻量级BI产品,目前在GitHub上有3万多颗星,其受欢迎程度可见一斑。Superset提供了Dashboard和多维分析两大类功能,后者可以将制作的结果发布到Dashboard上也可以单独使用。

数据源方面,Superset支持CSV、MySQL、Oracle、Redshift、Drill、Hive、Impala、Elasticsearch等27种数据源,并深度支持Druid。

InfluxDB 是一个开源分布式时序、事件和指标数据库。
我打算利用这个来部署一个边缘端的数据平台,搜集机器人和控制器数据并做可视化。

1.2 docker部署superset

docker search superset
NAME                                  DESCRIPTION
amancevice/superset                   Superset on Debian+Python3
apache/superset                       Apache Superset
preset/superset                       Apache Superset (incubating) is a modern,
tylerfowler/superset                  An extendable Docker image for Apache's Su
maedamikio/superset
huksley/superset                      AirBnB Superset 0.28 with MySQL driver
dailyhotel/superset                   Dockerized Superset
ganshanshan/superset_tddv             tddv superset
tyyzqmf/superset                      根据amancevice/superset修改的镜像 主要解决
yagami15145/superset-nginx
starburstdata/superset                Apache Superset docker container

选择拉取第一个,没写tag的话默认拉取latest版本

docker pull amancevice/superset

查看已下载的所有镜像。

docker image ls

运行。

docker run -d -p 8088:8088 -p 8086:8086 -v ~/home/DATAPLATFORM/data amancevice/superset

-p后面是端口映射,8088给superset,8086给influxdb, 也可以用3000-4000这种表示方法同时映射多个连续的ip。
-v 是挂载本地目录

docker ps 可用于查看容器,docker rename 新名 旧名可用于重命名容器。成功运行后可使用docker execattach进入,最好使用exec

docker exec -it <容器名> /bin/bash

进入容器以后设置用户名:

之前用命令fabmanager create-admin --app superset
安装时会报错 'NoneType' object has no attribute 'auth_type',且有警告提示说fabmanager即将被抛弃。

所以使用以下命令创建用户:

superset fab create-admin

创建用户
更新和初始化:

# 更新
superset db upgrade # 初始化
superset init# 启动服务器,不写-p默认5000
superset run -h 0.0.0.0 -p <端口号># 载入案例
superset load-test-users
superset load-examples

注意:
看到一些案例写的superset runserver,最新版没有runserver命令.
同时必须映射host到0.0.0.0,-h默认为127.0.0.1但外网无法访问。

1.3 superset中文化(可跳过)

在目录/usr/local/lib/python3.8/site-packages/superset下找到config.py的文件,进行编辑。位置在Setup default language。编辑时记得备份原文件。
编辑命令:

cd /usr/local/lib/python3.8/site-packages/superset
cp config.py backup_config.py
vim config.py

内容如图:
更改前:
中文设置
更改后:
在这里插入图片描述
运行时报错:

cannot import name ‘Any’ from partially initialized module ‘typing’
(most likely due to a circular import)

看了一下是我不能再当前目录下运行superset,和其他python模块冲突。换一个路径运行就行了。
在这里插入图片描述

在实际部署的时候可以使用gunicorn或者supervisor,该docker使用gunicorn进行服务进程管理.

//TODO
后续添加如何写influxdb的接入殷勤。

2 参考

  1. Superset学习实践(一)–基于Docker的安装配置
  2. superset搭建使用

这篇关于其他笔记 - 如何利用superset部署一个可视化的数据平台 [ docker配置与测试记录 ]的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1103434

相关文章

使用Java将各种数据写入Excel表格的操作示例

《使用Java将各种数据写入Excel表格的操作示例》在数据处理与管理领域,Excel凭借其强大的功能和广泛的应用,成为了数据存储与展示的重要工具,在Java开发过程中,常常需要将不同类型的数据,本文... 目录前言安装免费Java库1. 写入文本、或数值到 Excel单元格2. 写入数组到 Excel表格

SpringBoot3.4配置校验新特性的用法详解

《SpringBoot3.4配置校验新特性的用法详解》SpringBoot3.4对配置校验支持进行了全面升级,这篇文章为大家详细介绍了一下它们的具体使用,文中的示例代码讲解详细,感兴趣的小伙伴可以参考... 目录基本用法示例定义配置类配置 application.yml注入使用嵌套对象与集合元素深度校验开发

python处理带有时区的日期和时间数据

《python处理带有时区的日期和时间数据》这篇文章主要为大家详细介绍了如何在Python中使用pytz库处理时区信息,包括获取当前UTC时间,转换为特定时区等,有需要的小伙伴可以参考一下... 目录时区基本信息python datetime使用timezonepandas处理时区数据知识延展时区基本信息

Qt实现网络数据解析的方法总结

《Qt实现网络数据解析的方法总结》在Qt中解析网络数据通常涉及接收原始字节流,并将其转换为有意义的应用层数据,这篇文章为大家介绍了详细步骤和示例,感兴趣的小伙伴可以了解下... 目录1. 网络数据接收2. 缓冲区管理(处理粘包/拆包)3. 常见数据格式解析3.1 jsON解析3.2 XML解析3.3 自定义

SpringMVC 通过ajax 前后端数据交互的实现方法

《SpringMVC通过ajax前后端数据交互的实现方法》:本文主要介绍SpringMVC通过ajax前后端数据交互的实现方法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价... 在前端的开发过程中,经常在html页面通过AJAX进行前后端数据的交互,SpringMVC的controll

IntelliJ IDEA 中配置 Spring MVC 环境的详细步骤及问题解决

《IntelliJIDEA中配置SpringMVC环境的详细步骤及问题解决》:本文主要介绍IntelliJIDEA中配置SpringMVC环境的详细步骤及问题解决,本文分步骤结合实例给大... 目录步骤 1:创建 Maven Web 项目步骤 2:添加 Spring MVC 依赖1、保存后执行2、将新的依赖

使用Python实现矢量路径的压缩、解压与可视化

《使用Python实现矢量路径的压缩、解压与可视化》在图形设计和Web开发中,矢量路径数据的高效存储与传输至关重要,本文将通过一个Python示例,展示如何将复杂的矢量路径命令序列压缩为JSON格式,... 目录引言核心功能概述1. 路径命令解析2. 路径数据压缩3. 路径数据解压4. 可视化代码实现详解1

Python 交互式可视化的利器Bokeh的使用

《Python交互式可视化的利器Bokeh的使用》Bokeh是一个专注于Web端交互式数据可视化的Python库,本文主要介绍了Python交互式可视化的利器Bokeh的使用,具有一定的参考价值,感... 目录1. Bokeh 简介1.1 为什么选择 Bokeh1.2 安装与环境配置2. Bokeh 基础2

Pandas统计每行数据中的空值的方法示例

《Pandas统计每行数据中的空值的方法示例》处理缺失数据(NaN值)是一个非常常见的问题,本文主要介绍了Pandas统计每行数据中的空值的方法示例,具有一定的参考价值,感兴趣的可以了解一下... 目录什么是空值?为什么要统计空值?准备工作创建示例数据统计每行空值数量进一步分析www.chinasem.cn处

如何使用 Python 读取 Excel 数据

《如何使用Python读取Excel数据》:本文主要介绍使用Python读取Excel数据的详细教程,通过pandas和openpyxl,你可以轻松读取Excel文件,并进行各种数据处理操... 目录使用 python 读取 Excel 数据的详细教程1. 安装必要的依赖2. 读取 Excel 文件3. 读