p85126437
/
datagear
forked from p81075629/datagear
1
0
Fork 1
Code Issues Pull Requests Releases Wiki Activity
1,898 Commits 12 Branches 0 Tags 58 MiB
JavaScript 54.4%
Java 33.1%
FreeMarker 9.6%
CSS 2.8%
Go to file
datagear bf835214a5 Merge branch 'master' of https://gitee.com/datagear/datagear.git 
Conflicts:
	README.md
 		2021-09-08 10:06:08 +08:00
datagear-analysis 系统Freemarker数值输出格式改为"number"，避免出现数值区域化问题 2021-08-23 23:32:28 +08:00
datagear-connection 系统缓存统一改为Caffeine，移除Guava 2021-08-19 11:04:27 +08:00
datagear-dataexchange v2.8.0版本标识 2021-08-10 19:05:49 +08:00
datagear-management 完善SchemaGuardService.isPermitted()说明 2021-08-31 20:21:06 +08:00
datagear-meta v2.8.0版本标识 2021-08-10 19:05:49 +08:00
datagear-persistence v2.8.0版本标识 2021-08-10 19:05:49 +08:00
datagear-util 完善数据源防护功能 2021-08-31 19:57:53 +08:00
datagear-web 修复datagear-web构建时误将dist/bin/config/applications.properties中的DataGearWorkspace配置项过滤替换的问题 2021-09-06 20:21:22 +08:00
screenshot 更新架构图 2020-11-30 17:07:46 +08:00
test [management]模块单元测试改为不依赖外部MySQL环境而新建内置Derby测试库 2021-07-07 15:04:46 +08:00
.gitignore springboot迁移 2020-10-30 21:52:02 +08:00
LICENSE 项目协议修改为开源协议LGPL-3.0 2018-11-28 09:04:50 +08:00
README.md 完善README.md 2021-09-08 10:04:05 +08:00
RELEASE.md 完善README.md 2021-09-08 10:04:05 +08:00
Roadmap.txt 补充版本开发计划 2021-09-07 19:25:08 +08:00
pom.xml 系统缓存统一改为Caffeine，移除Guava 2021-08-19 11:04:27 +08:00

README.md

DataGear

DataGear是一款开源免费的数据可视化分析平台，可自由制作任何您想要的数据可视化看板，支持接入SQL、CSV、Excel、HTTP接口、JSON等多种数据源。

系统基于Spring Boot、Jquery、ECharts等技术开发。

DataGear 2.8.0 已发布，欢迎官网下载使用！

DataGear 大屏看板模板，持续更新中...

系统特点

  • 支持接入多种数据源
    支持接入任意提供JDBC驱动的数据库，包括MySQL、Oracle、PostgreSQL、SQL Server等关系数据库，以及Elasticsearch、ClickHouse、Hive等大数据引擎

  • 支持多种格式的数据集
    支持创建SQL、CSV、Excel、HTTP接口、JSON数据集，可将数据集定义为动态参数化数据集，可添加文本框、下拉框、日期框、时间框等类型的数据集参数，为构建动态可交互图表提供支持

  • 丰富强大的图表功能
    图表可聚合多个不同格式的数据集，轻松构建同比、环比数据图表，内置折线图、柱状图、饼图、地图、雷达图、漏斗图等开箱即用的图表，并且支持自定义图表配置项，支持编写和上传自定义图表插件

  • 可自由编辑的数据可视化页面
    可视化页面采用原生的HTML网页作为模板，可自由编辑页面内容，支持导入任意HTML网页，为元素添加扩展属性即可绑定和配置图表，页面内置丰富的API，可构建图表联动、数据钻取、异步加载、交互表单等个性化的数据可视化页面

架构图

https://gitee.com/datagear/datagear/raw/master/screenshot/architecture.png

官网

http://www.datagear.tech

文档

http://www.datagear.tech/documentation

示例

https://my.oschina.net/u/4035217

源码

Gitee：https://gitee.com/datagear/datagear

Github：https://github.com/datageartech/datagear

交流

QQ群：916083747（已满）、1128360199（已满）、541252568

留言板：http://www.datagear.tech/messageboard

界面

数据管理

https://gitee.com/datagear/datagear/raw/master/screenshot/datamanage.png

SQL工作台

https://gitee.com/datagear/datagear/raw/master/screenshot/sqlpad.png

图表

https://gitee.com/datagear/datagear/raw/master/screenshot/chart.png

图表-数据集参数

https://gitee.com/datagear/datagear/raw/master/screenshot/chart-interaction.png

看板

https://gitee.com/datagear/datagear/raw/master/screenshot/template-002-dg.png

https://gitee.com/datagear/datagear/raw/master/screenshot/template-005-dg.png

https://gitee.com/datagear/datagear/raw/master/screenshot/template-006-dg.png

看板-图表联动

https://gitee.com/datagear/datagear/raw/master/screenshot/dashboard-map-chart-link.gif

看板-时序图表

https://gitee.com/datagear/datagear/raw/master/screenshot/dashboard-time-series-chart.gif

看板-钻取

https://gitee.com/datagear/datagear/raw/master/screenshot/dashboard-map-chart-hierarchy.gif

看板-表单

https://gitee.com/datagear/datagear/raw/master/screenshot/dashboard-form.gif

看板-联动异步加载图表

https://gitee.com/datagear/datagear/raw/master/screenshot/dashboard-link-load-chart.gif

模块介绍

  • datagear-analysis
    数据分析底层模块，定义数据集、图表、看板API

  • datagear-connection
    数据库连接支持模块，定义可从指定目录加载JDBC驱动、新建连接的API

  • datagear-dataexchange
    数据导入/导出底层模块，定义导入/导出指定数据源数据的API

  • datagear-management
    系统业务服务模块，定义数据源、数据分析等功能的服务层API

  • datagear-meta
    数据源元信息底层模块，定义解析指定数据源表结构的API

  • datagear-persistence
    数据源数据管理底层模块，定义读取、编辑、查询数据源表数据的API

  • datagear-util
    系统常用工具集模块

  • datagear-web
    系统web模块，定义web控制器、操作页面

依赖

Java 8+
Servlet 3.1+

编译

准备单元测试环境

  1. 安装 MySQL-8.0 数据库，并将root用户的密码设置为：root（或者修改test/config/jdbc.properties配置）

  2. 新建测试数据库，名称取为：dg_test

  3. 使用test/sql/test-sql-script-mysql.sql脚本初始化dg_test库

执行编译命令

mvn clean package

或者，也可不准备单元测试环境，直接执行如下编译命令：

mvn clean package -DskipTests

编译完成后，将在datagear-web/target/datagear-[version]-packages/内生成程序包。

调试

  1. 将datagear以maven工程导入至IDE工具

  2. 以调试模式运行datagear-web模块的启动类：org.datagear.web.DataGearApplication

  3. 打开浏览器，输入：http://localhost:50401

调试注意

在调试开发分支前（dev-*），建议先备份DataGear工作目录（[用户主目录]/.datagear）， 因为开发分支程序启动时会修改DataGear工作目录，可能会导致先前使用的正式版程序、以及后续发布的正式版程序无法正常启动。

系统启动时会根据当前版本号自动升级内置数据库（Derby数据库，位于[用户主目录]/.datagear/derby目录下），且成功后下次启动时不再自动执行，如果调试时遇到数据库异常，需要查看

datagear-management/src/main/resources/org/datagear/management/ddl/datagear.sql

文件，从中查找需要更新的SQL语句，手动执行。

然后，手动执行下面更新系统版本号的SQL语句：

UPDATE DATAGEAR_VERSION SET VERSION_VALUE='当前版本号'

例如，对于2.2.0版本，应执行：

UPDATE DATAGEAR_VERSION SET VERSION_VALUE='2.2.0'

系统自带了一个可用于为内置数据库执行SQL语句的简单工具类org.datagear.web.util.DerbySqlClient，可以在IDE中直接运行。注意：运行前需要先停止DataGear程序。