开源Superset在线设计图表框架源码解析
liuian 2025-08-31 04:04 6 浏览
目的
superset是很强大的BI分析框架,有些不满足需求的难免要二次开发,二次开发首先要读懂它的源码,基于此目的把自己阅读代码的一些分析分享给大家,让大家都superset整体的源码有个整体的认识,然后具体到哪块代码的时候,可以快速找到具体分析。
Superset是什么?
Superset 是一款由 Airbnb 开源的“现代化的企业级 BI(商业智能) Web 应用程序”,其通过创建和分享 dashboard,为数据分析提供了轻量级的数据查询和可视化方案。
支持的图表类型非常多,如下一部分:
进入正题,源码分析
后台
spuerset 后端采用 Flask-AppBuilder, Sqlachermy, celery,pandas
Flask-AppBuilder: superset 的基本框架,登录验证,权限控制
pandas:数据处理
celery:定时异步任务
sqlachermy: 数据引擎,连接DB
superset源码结构如下:
- bin: 程序的入口文件,可以不关心
- common: 程序共用的代码,暂不关心
- connectors: 数据库连接器,连接数据源有2种类型,通过ConnectorRegistry连接
- migration: superset本身的数据库 升级操作记录
- db_engine_specs,db_engines: 连接其他数据库的engines 比如mysql,pgsql等
- examples: 事例文件,不关心
- models: 数据库模型, Slice, Dashboard
- views: 视图,core.py 存放所有得superset 开头的接口
- tasks: celery 任务脚本
- security: 修改权限入口
- templates, static: 前端相关的模板, 控件代码
- app.py: superset 服务启动,初始化入口
- cli.py: spuerset 命令
- viz.py: 重要,所有得图表类型 后端数据处理入口
- extensions.py: 定义 celery, logger 等中间件
前端
superset 前端采用 React,D3
- superset-frontend/webpack.config.js : 前端入口文件
- superset-frontend/src: 前端重要文件
- superset-frontend/src/explore: 查看图表详情的页面
- superset-frontend/src/chart:根据图表属性渲染具体图表页面,里面调用了SuperChart组件,而此组件属于superset-ui前端库,会根据后台传入的属性,最终渲染出对应的图表组件。
总结
动态图表设计思路其实都是如此,前端会把各种图表先写好,内置到代码中,然后每个图表都是自己唯一标示和相应的属性,等通过拖拽设计好后,保存的时候其实就是把图表对应的属性元数据信息(描述图表的json字符串),发送给后台。 等预览图表的时候,其实就是从后台读取这些元数据信息,然后给前端组件按照这些元数据信息,找到对应的内置好的图表组件,并渲染出来,而上面的SuperChart组件其实就是superset框架中的渲染组件。
前端和后台交互源码分析
前端的代码结构中webpack.config.js 入口文件中 定义了 以src文件夹去生成打包js文件,webpack的功能
会根据不同的源码,打包成不同的文件,打包后的文件是可以直接给浏览器运行的
后台代码入口
superset/app.py
下面列出一些主要的代码片段,大部分都是这种的
appbuilder.add_link(
"SQL Editor",
label=_("SQL Editor"),
href="/superset/sqllab/",
category_icon="fa-flask",
icon="fa-flask",
category="SQL Lab",
category_label=__("SQL Lab"),
)
appbuilder.add_link(
__("Saved Queries"),
href="/savedqueryview/list/",
icon="fa-save",
category="SQL Lab",
)
appbuilder.add_link(
"Query Search",
label=_("Query History"),
href="/superset/sqllab/history/",
icon="fa-search",
category_icon="fa-flask",
category="SQL Lab",
category_label=__("SQL Lab"),
)
appbuilder.add_view(
SliceModelView,
"Charts",
label=__("Charts"),
icon="fa-bar-chart",
category="",
category_icon="",
)
appbuilder.add_view(
DashboardModelView,
"Dashboards",
label=__("Dashboards"),
icon="fa-dashboard",
category="",
category_icon="",
)
这些都是flask Appbuilder框架的内容,大概意思就是通过add_link和add_view会在界面上加入相应的菜单,如果是add_link点击菜单的时候就会访问相应的链接,比如第一个,点击“SQL Editor”菜单的时候,会访问/superset/sqllab/链接发送给后台。
然后后台处理/superset/sqllab/链接的后台代码在哪?
在superset/view/core.py文件中,代码如下:
@has_access
@event_logger.log_this
@expose("/sqllab/", methods=["GET", "POST"])
def sqllab(self) -> FlaskResponse:
"""SQL Editor"""
payload = {
"defaultDbId": config["SQLLAB_DEFAULT_DBID"],
"common": common_bootstrap_payload(),
**self._get_sqllab_tabs(g.user.get_id()),
}
form_data = request.form.get("form_data")
if form_data:
try:
payload["requested_query"] = json.loads(form_data)
except json.JSONDecodeError:
pass
payload["user"] = bootstrap_user_data(g.user)
bootstrap_data = json.dumps(
payload, default=utils.pessimistic_json_iso_dttm_ser
)
return self.render_template(
"superset/basic.html", entry="sqllab", bootstrap_data=bootstrap_data
)
上面的注解都是flask框架的东西,定义了处理/sqllab请求的方法,其中render_template是flask框架渲染模板的方法,里面传入两个参数一个entry=“sqllab”和bootstrap_data,最后会把渲染后台的页面返回给后台。
这里再详细看下模板渲染,先看下superset/basic.html这个模板文件,默认的flask框架的模板都在源码的templates目录下,这里是
templates/superset/basic.html,这里粘贴核心代码如下:
{% block body %}
<div id="app" data-bootstrap="{{ bootstrap_data }}">
<img src="/static/assets/images/loading.gif" style="width: 50px; position: absolute; top: 50%; left: 50%; transform: translate(-50%,-50%)">
</div>
{% endblock %}
// --------------------------------
{% block tail_js %}
{% if not standalone_mode %}
{{ js_bundle('menu') }}
{% endif %}
{% if entry %}
{{ js_bundle(entry) }}
{% endif %}
{% include "tail_js_custom_extra.html" %}
{% endblock %}
上面一部分的代码定义了一个id=app的div,用过前端react或vue框架的都知道,这个是前端js文件渲染的入口,无论是vue还是react生成的js文件都会绑定到一个id=app的div下面的。
下面那块代码会js_bundle(entry),其中通过上面分析entry是sqllab,他会从目录中到到前端通过webpack打包好的js_bundle文件,这里的sqllab在前面的webpack.config.js中已经定义了,这里再粘贴一下吧
可以看到里面有sqlab,最终后台代码
return self.render_template(
"superset/basic.html", entry="sqllab", bootstrap_data=bootstrap_data
)
就是根据模板把前端代码/src/sqllab/index.jsx打包生成的对应js代码,嵌入到了模板中,然后返回给前端显示了。
后续页面中的具体请求都是rest api请求,后台对应的代码如下:
结构都很类似,都有api.py,dao.py等,其中api.py就是处理页面中发起的rest api请求的(其实最终通过ajax),到时候具体问题具体分析即可。
总结
superset框架app.py中定义了界面上各个菜单按钮的功能跳转链接,然后具体链接的后台处理在views/core.py中,它会继续根据templates模板渲染出结果给前端显示,模板中会根据传入的参数来找到对应的前端webpack打包好的文件(不一定都是这样,这些只是其中的一部分)。
它这个前后端分离跟之前的还是有点区别的,并不是把打包好的前端代码通过nginx访问的,他还是通过python代码访问的,模板的方式嵌入。
相关推荐
- 小程序微信登录反映慢原来因为login和getUserProfile关系造成的
-
在我开发算盘记账APP小程序的过程中,遇到了UNIAPP开发微信小程序微信登录反映特别慢的问题。经反复查找原因,原来是因为微信登录界面代码的uni.login中包含了uni.getUserProfil...
- uniapp主题切换功能的方式终结篇(全平台兼容)
-
前面我已经给大家介绍了两种主题切换的方式,每种方式各有自己的优势与缺点,例如“scss变量+vuex”方式兼容好但不好维护与扩展,“scss变量+require”方式好维护但兼容不好,还不清楚的可点下...
- UNI又来秀了 新功能不懂玩 这份说明书带你玩遍所有潮科技
-
当您在车辆仪表盘上看到如下图标时是否一脸迷茫?是否手忙脚乱翻用户手册找不到答案?近段时间,有不少车主反馈长安UNI-T很多功能太新潮了,自己有点跟不上时代的节奏了……莫慌,本期推出长安UNI-T“AR...
- 一款商用品质的开源商城系统(Yii2+Vue2.0+uniapp)
-
一、项目简介这是一套很成熟的开源商城系统【开店星】,之前推过一次,后台感兴趣的还不少,今天再来详细介绍一下:基于Yii2+Vue2.0+uniapp框架研发,代码质量堪称商用品质,下载安装无门槛,UI...
- 惊了,这个国产软件居然这么牛,比 uniapp 还全能
-
最近跟同事闲聊,大家都在吐槽一个问题:!App是越做越像平台了,但开发却越做越痛苦了。你想加个活动页,产品说今晚上线;你想做个业务扩展,运营说要不你再写个低代码工具;你想适配鸿蒙,领导说最好做个...
- JeecgUniapp 全新版本 3.0 发布,采用 uniapp+vue3 最新架构
-
项目介绍JeecgUniapp是JeecgBoot的配套APP移动框架,项目采用Uniapp、Vue3.0、Vite、Wot-design-uni、TypeScript等最新技术栈,包括...
- AIGC+UniApp:自动生成跨平台代码实践
-
一、颠覆传统的开发革命2024年GitHub统计显示,采用AIGC辅助的UniApp项目平均开发效率提升217%。我们在某APP项目中,用ChatGPT-4o生成基础框架代码,原本需要3人日的登录模块...
- 长安引力UNI-K iDD OTA无法升级,还算问题吗?车主小题大做?
-
OTA无法升级,在我看来都不算问题。因为它本来就是锦上添花的配置!并不是雪中送炭的配置!车还可以正常开,导航用手机就可以,听歌连手机蓝牙就可以。但是要说OTA这个配置,最早是特斯拉干的。2012年特斯...
- uni-app 多环境部署方案_开发uniapp的环境配置
-
前言最近几周都在处理公司的移动业务,而为在后期能统一多端,解放自己,迎合公司的技术栈;选用了uni-app来开发。开发前期重新对公司移动业务做深入了解,重构大部分业务逻辑,也抽离出基础组件;但实际...
- 3分钟拥有一个属于自己的博客网站「腾讯云篇」
-
一、前言想要搭建一个让全世界的人都可以访问的网站,我们最少需要准备三样东西:①服务器腾讯云服务器首年低至40元/年,「链接」阿里云服务器新用户可以免费使用6个月,新人特惠_云产品推荐_云服务器-阿里云...
- 3月18号分享一个最新Cursor无限续杯的方法,亲测有效~
-
1、执行脚本MacOS&Linux系统curl-fsSLhttps://aizaozao.com/accelerate.php/https://raw.githubusercontent.co...
- 什么是IPFS,如何搭建IPFS节点_ipfs简单理解
-
IPFS是一个分布式系统,用于存储和访问文件、网站、应用程序和数据。星际文件系统(InterPlanetaryFileSystem).IPFS是一个分布式的web,点到点超媒体协议.可以...
- Claude Code:完爆 Cursor 的编程体验
-
前言最近,听说ClaudeCode这款代码辅助编写产品很强,有人把Cursor比作实习生水平,ClaudeCode比作高级工程师水平。起初不以为意,因为特殊原因,Claude无法直接访问。然而,...
- 10分钟搞定gitlab-ci自动化部署_gitlab ci 自动化部署
-
gitlab-ci是持续集成工具/自动化部署工具,类似jenkins。持续集成是将代码集成到共享存储库并尽可能早地自动构建/测试每个更改的实践-通常一天几次。概述在编码完成时都会进行打包发布...
- 「 小白玩树莓派系列」Raspberry Pi 4 Ubuntu USB 大容量存储启动指南
-
Canonical对RaspberryPi的官方支持已经走过了漫长的道路。我们现在可以在Pi安装官方支持的Ubuntu!在我之前的Pi上的Ubuntu18.04指南中,Raspb...
- 一周热门
-
-
【验证码逆向专栏】vaptcha 手势验证码逆向分析
-
Python实现人事自动打卡,再也不会被批评
-
Psutil + Flask + Pyecharts + Bootstrap 开发动态可视化系统监控
-
一个解决支持HTML/CSS/JS网页转PDF(高质量)的终极解决方案
-
再见Swagger UI 国人开源了一款超好用的 API 文档生成框架,真香
-
网页转成pdf文件的经验分享 网页转成pdf文件的经验分享怎么弄
-
C++ std::vector 简介
-
飞牛OS入门安装遇到问题,如何解决?
-
系统C盘清理:微信PC端文件清理,扩大C盘可用空间步骤
-
10款高性能NAS丨双十一必看,轻松搞定虚拟机、Docker、软路由
-
- 最近发表
-
- 小程序微信登录反映慢原来因为login和getUserProfile关系造成的
- uniapp主题切换功能的方式终结篇(全平台兼容)
- UNI又来秀了 新功能不懂玩 这份说明书带你玩遍所有潮科技
- 一款商用品质的开源商城系统(Yii2+Vue2.0+uniapp)
- 惊了,这个国产软件居然这么牛,比 uniapp 还全能
- JeecgUniapp 全新版本 3.0 发布,采用 uniapp+vue3 最新架构
- AIGC+UniApp:自动生成跨平台代码实践
- 长安引力UNI-K iDD OTA无法升级,还算问题吗?车主小题大做?
- uni-app 多环境部署方案_开发uniapp的环境配置
- 3分钟拥有一个属于自己的博客网站「腾讯云篇」
- 标签列表
-
- python判断字典是否为空 (50)
- crontab每周一执行 (48)
- aes和des区别 (43)
- bash脚本和shell脚本的区别 (35)
- canvas库 (33)
- dataframe筛选满足条件的行 (35)
- gitlab日志 (33)
- lua xpcall (36)
- blob转json (33)
- python判断是否在列表中 (34)
- python html转pdf (36)
- 安装指定版本npm (37)
- idea搜索jar包内容 (33)
- css鼠标悬停出现隐藏的文字 (34)
- linux nacos启动命令 (33)
- gitlab 日志 (36)
- adb pull (37)
- python判断元素在不在列表里 (34)
- python 字典删除元素 (34)
- vscode切换git分支 (35)
- python bytes转16进制 (35)
- grep前后几行 (34)
- hashmap转list (35)
- c++ 字符串查找 (35)
- mysql刷新权限 (34)