热门排行
简介
Smart Kettle是基于当前互联网热门的Springboot微服务后端架构,采用丰富的前端vue、iview等组件技术构造的kettle大数据调度服务监控平台,旨在解决企业数据抽取业务场景中,无法通过web方式配置、调度、监控kettle的痛点。
Smart Kettle是针对企业的痛点,对kettle的使用做了一些包装、优化,使其在web端也能具备基础的kettle作业、转换的配置、调度、监控,能在很大一定程度上协助企业完成不同业务场景下数据的ETL(抽取、转换、加工)的能力。
注意:本系统并非是对kettle源码的再造,而是借助kettle的API,实现kettle在web端功能华丽的转身。
功能特点:
1、它是一款超轻量级的kettle web端调度监控平台
支持作业、转换的自定义模板设置
支持作业、转换的多任务模板复制
支持作业、转换的GUI端配置同步到web端
支持作业、转换的日志自定路径配置
支持作业、转换的日志文件下载管理
支持文件库资源库配置
支持数据库资源库配置
支持SFTP/FTP/FTPS的远程资源库配置
支持资源库目录树查看
支持作业、转换的集群调度(远程子服务器调用)
支持作业、转换的GUI端配置同步到web端
支持作业、转换的调度配置
支持作业、转换的监控管理
支持作业、转换的本地执行
支持作业、转换的远程执行
支持作业、转换的定时配置
支持作业、转换的实时监控
支持kettle的web端资源库管理
支持自定义线程池设置、任务的并行处理
支持kettle 任务的告警监控、日志管理
提供丰富的业务库、字典库自定义设置
提供完整的、实时的大盘调度监控
提供系统的用户、角色、权限管理
提供Druid数据库查询脚本的实时监控能力
支持 Kettle 7.0.1+以上 版本
当前Kettle版本为9.2.0.0-179(注意:需要配置kettle-password-encoder-plugins,本系统已经集成进来,不需要再配置)
2、它的平台实现充分基于"前后端分离"思想
后端架构基于 Springboot实现
服务端可发布 REST 服务
前端架构基于 VUE,数据组件更加丰富、易于维护
客户端通过 AJAX 获取服务端数据并进行界面渲染
3、它的后端实现基于互联网最流行的微服务技术
后端架构采用自己搭建的x-common-base框架
后端封装了基于kettle的强大接口插件x-kettle-core
后端框架基于springboot+Mybatis实现
后端框架易于迁移、二次开发、方便维护
4、它的前端实现基于互联网最流行的渐进式VUE框架
功能组件化,易于二次开发维护
新手容易上手,短时间内入门
界面更加美观、组件更加丰富
环境要求
Maven3+
Jdk1.8+
Mysql5.7+