70 Star 1.3K Fork 280

GVPaizuda/snail-job

2024-08-14 09:30
5705488 opensnail 1714272985 opensnail

1.修复Oracel问题(issues/IAJRQW)
2.修复SpringContext=>SnailSpringContext(issues/IAJKDH)

Last committed message: fix(sj_1.1.2): 使用新仓库发布
2024-07-26 09:26
5705488 opensnail 1714272985 opensnail
  1. 这里是列表文本添加Oracle i18n支持
  2. 添加 python 客户端项目链接
  3. 修复任务批次删除逻辑错误
  4. Oracle DDL 对象名称不能超过30个字符(12.2之前)
  5. 修复客户端注册问题
  6. 修复表格列设置字段名异常问题
2024-07-14 23:17
5705488 opensnail 1714272985 opensnail
  1. 【信创】支持达梦数据库【新增】
  2. 更新密码策略:字母、数字、特殊字符,任意2种组成,6-20位【优化】
  3. 工作流批次、重试批次、重试日志添加时间筛选(默认查询一个月)【新增】
  4. 修复通知配置分页显示问题【BUG】
  5. github工作流添加maven cache【优化】
  6. mp自动填充createDt,updateDt字段【优化】
  7. 提取所有insertBatch xml语句到template【优化】
  8. 优化空间切换组件样式【优化】
  9. 用户列表添加[序号]、[创建时间]字段【新增】
  10. 所有搜索框允许清除【优化】
  11. 修复工作流搜索参数定义错误【BUG】
  12. 工作流批次按照任务名称查询体验【优化】
  13. 定时任务批次按照任务名称查询体验【优化】
  14. 修复前端toString()空指针问题【优化】
  15. 命名空间非活跃条目显示图标【优化】
  16. 登录界面可以做一下键盘回车登录【优化】
  17. updateBatch系列脚本增加update_dt=CURRENT_TIMESTAMP【优化】
  18. 页面路径修改 notify/scene => notify/config 【优化】
  19. 优化客户端发送消息是组为空的校验【优化】
  20. 重构钉钉消息发送工具类(优化)
  21. 工作流支持全局上下文传递(新增)
  22. 支持动态分片(Map/MapReuce)(新增)
  23. 修复oracle超过1000批量删除失败问题(BUG)
  24. 定时任务阻塞策略新增恢复类型(新增)
  25. 工作流阻塞策略新增恢复类型(新增)
  26. sj_distributed_lock 分布式锁表去掉自增主键(优化)
  27. 优化决策节点手动校验逻辑并支持手动校验按钮(优化)
  28. 工作流决策节点判定逻辑使用上下文进行判断(优化)
  29. 工作流批次详情新增实时刷新功能(新增)
  30. 工作流和定时任务实时日志新增自动刷新功能(新增)
  31. 修复实时日志展示重复问题(BUG)
  32. 重试次数支持最低为0次(优化)
  33. 登录新增验证码功能(新增)
  34. 重试场景随机和固定间隔重试间隔新增最低10s限制(优化)
  35. 任务项列列表新增任务名称字段(优化)
  36. 升级mybatis-plus版本(3.5.6->3.5.7)(升级)
  37. 修复退出登录和修改密码未重定向到登录页问题(BUG)
  38. 工作流支持页面初始化上下文信息(新增)
  39. 空间、组、重试场景等删除功能
  40. 优化其他已知问题

MYSQL变更(其他DB变更请自行同步)

全量的SQL请参考项目 /doc/sql/x.sql

ALTER TABLE `sj_distributed_lock` DROP INDEX `uk_name`;
ALTER TABLE `sj_distributed_lock` MODIFY COLUMN `id` bigint UNSIGNED NOT NULL COMMENT '主键';
ALTER TABLE `sj_distributed_lock` DROP PRIMARY KEY;
ALTER TABLE `sj_distributed_lock` ADD PRIMARY KEY (`name`) USING BTREE;
ALTER TABLE `sj_distributed_lock` DROP COLUMN `id`;
ALTER TABLE `sj_job_task` ADD COLUMN `mr_stage` tinyint NULL DEFAULT NULL COMMENT '动态分片所处阶段 1:map 2:reduce 3:mergeReduce';
ALTER TABLE `sj_job_task` ADD COLUMN `leaf` tinyint NOT NULL DEFAULT 1 COMMENT '叶子节点' AFTER `mr_stage`;
ALTER TABLE `sj_job_task` ADD COLUMN `task_name` varchar(255) NOT NULL DEFAULT '' COMMENT '任务名称';
ALTER TABLE `sj_job_task` ADD COLUMN `wf_context` text  NULL COMMENT '工作流全局上下文' ;
ALTER TABLE `sj_workflow_task_batch` ADD COLUMN `wf_context` text  NULL COMMENT '全局上下文' ;
ALTER TABLE `sj_workflow_task_batch` ADD COLUMN `version` int NOT NULL DEFAULT 1 COMMENT;
ALTER TABLE `sj_workflow` ADD COLUMN `wf_context` text  NULL COMMENT '全局上下文' ;
Last committed message: feat(sj_1.1.0): 前端打包
2024-07-07 22:44
5705488 opensnail 1714272985 opensnail

发布视频: 🔥🔥🔥一款兼具 “高性能、高颜值、高活跃” 的分布式任务调度与重试平台 1.1.0 Beta2 版本正式发布

  1. 重构钉钉消息发送工具类(优化)
  2. 工作流支持全局上下文传递(新增)
  3. 支持动态分片(Map/MapReuce)(新增)
  4. 修复oracle超过1000批量删除失败问题(BUG)
  5. 定时任务阻塞策略新增恢复类型(新增)
  6. 工作流阻塞策略新增恢复类型(新增)
  7. sj_distributed_lock 分布式锁表去掉自增主键(优化)
  8. 优化决策节点手动校验逻辑并支持手动校验按钮(优化)
  9. 工作流决策节点判定逻辑使用上下文进行判断(优化)
  10. 工作流批次详情新增实时刷新功能(新增)
  11. 工作流和定时任务实时日志新增自动刷新功能(新增)
  12. 修复实时日志展示重复问题(BUG)
  13. 重试次数支持最低为0次(优化)
  14. 登录新增验证码功能(新增)
  15. 重试场景随机和固定间隔重试间隔新增最低10s限制(优化)
  16. 任务项列列表新增任务名称字段(优化)
  17. 升级mybatis-plus版本(3.5.6->3.5.7)(升级)
  18. 修复退出登录和修改密码未重定向到登录页问题(BUG)
  19. 工作流支持页面初始化上下文信息(新增)
  20. 优化其他已知问题

MYSQL变更(其他DB变更请自行同步)

全量的SQL请参考项目 /doc/sql/x.sql

ALTER TABLE `sj_distributed_lock` DROP INDEX `uk_name`;
ALTER TABLE `sj_distributed_lock` MODIFY COLUMN `id` bigint UNSIGNED NOT NULL COMMENT '主键';
ALTER TABLE `sj_distributed_lock` DROP PRIMARY KEY;
ALTER TABLE `sj_distributed_lock` ADD PRIMARY KEY (`name`) USING BTREE;
ALTER TABLE `sj_distributed_lock` DROP COLUMN `id`;
ALTER TABLE `sj_job_task` ADD COLUMN `mr_stage` tinyint NULL DEFAULT NULL COMMENT '动态分片所处阶段 1:map 2:reduce 3:mergeReduce';
ALTER TABLE `sj_job_task` ADD COLUMN `leaf` tinyint NOT NULL DEFAULT 1 COMMENT '叶子节点' AFTER `mr_stage`;
ALTER TABLE `sj_job_task` ADD COLUMN `task_name` varchar(255) NOT NULL DEFAULT '' COMMENT '任务名称';
ALTER TABLE `sj_job_task` ADD COLUMN `wf_context` text  NULL COMMENT '工作流全局上下文' ;
ALTER TABLE `sj_workflow_task_batch` ADD COLUMN `wf_context` text  NULL COMMENT '全局上下文' ;
ALTER TABLE `sj_workflow_task_batch` ADD COLUMN `version` int NOT NULL DEFAULT 1 COMMENT;

参与者设计开发人员名单

  1. https://gitee.com/xlsea
  2. https://gitee.com/xiaowoniu168
  3. https://gitee.com/dhb52
  4. https://gitee.com/zhengweilins
  5. https://gitee.com/srzou
  6. https://gitee.com/jcwang812
2024-06-23 17:15
5705488 opensnail 1714272985 opensnail
  1. 【信创】支持达梦数据库【新增】
  2. 更新密码策略:字母、数字、特殊字符,任意2种组成,6-20位【优化】
  3. 工作流批次、重试批次、重试日志添加时间筛选(默认查询一个月)【新增】
  4. 修复通知配置分页显示问题【BUG】
  5. github工作流添加maven cache【优化】
  6. mp自动填充createDt,updateDt字段【优化】
  7. 提取所有insertBatch xml语句到template【优化】
  8. 优化空间切换组件样式【优化】
  9. 用户列表添加[序号]、[创建时间]字段【新增】
  10. 所有搜索框允许清除【优化】
  11. 修复工作流搜索参数定义错误【BUG】
  12. 工作流批次按照任务名称查询体验【优化】
  13. 定时任务批次按照任务名称查询体验【优化】
  14. 修复前端toString()空指针问题【优化】
  15. 命名空间非活跃条目显示图标【优化】
  16. 登录界面可以做一下键盘回车登录【优化】
  17. updateBatch系列脚本增加update_dt=CURRENT_TIMESTAMP【优化】
  18. 页面路径修改 notify/scene => notify/config 【优化】
  19. 优化客户端发送消息是组为空的校验【优化】
  20. 优化其他若干已知问题【优化】
2024-06-17 16:36
5705488 opensnail 1714272985 opensnail
  1. 定时任务,任务类型为切片,提交失败【BUG】
  2. 旧密码无需使用密码规则校验,非空即可【BUG】
  3. 优化携带参数路由跳转体验【优化】
  4. 修复 cron 表达式组件问题【BUG】
  5. github工作流添加maven cache【优化】
2024-06-11 08:53
5705488 opensnail 1714272985 opensnail
  1. 支持组、定时任务、工作流、重试任务、通知人导入和导出【新增】
  2. 工作流从antd迁移到soybeanjs【优化】
  3. 超级管理员不允许删除、修改权限【优化】
  4. 调整定时任务、工作流、重试场景的配置菜单排序【优化】
  5. 修复已知的前端搜索问题【BUG】
  6. 修复工作流多个决策节点场景下导致的任务节点没有触发问题【BUG】
  7. 首页任务Card添加点击动作【新增】
  8. 支持普通用户修改密码【新增】
  9. 优化客户端group配置和enabled加载顺序【优化】
  10. 修复常驻任务执行阻塞策略时无法准时开启下一次任务【BUG】
  11. 修复sqlserver数据库MP分页查询是没有带order by 导致的查询报错【BUG】
  12. 定时任务支持超时检查机制【新增】
  13. 工作流执行超时检查机制【新增】
  14. 组名称和重试场景名称支持短横线 (-) 格式【优化】
  15. 调整定时任务、重试场景、通知场景配置的表单布局【优化】
  16. 每次 “编辑” 定时任务,cron 表达式就会被重置成默认值【BUG】
  17. 修复工作流任务显示不正确【BUG】
  18. 修复 clearOfflineNode 出现死锁【BUG】
  19. 优化其他已知问题【优化】
Last committed message: feat(sj_1.0.0): 发布1.0.0正式版本
2024-06-03 09:09
5705488 opensnail 1714272985 opensnail
  1. 支持组、定时任务、工作流、重试任务、通知人导入和导出【新增】
  2. 工作流从antd迁移到soybeanjs【优化】
  3. 超级管理员不允许删除、修改权限【优化】
  4. 调整定时任务、工作流、重试场景的配置菜单排序【优化】
  5. 修复已知的前端搜索问题【BUG】
  6. 修复工作流多个决策节点场景下导致的任务节点没有触发问题【BUG】
  7. 首页任务Card添加点击动作【新增】
  8. 优化其他已知问题【优化】
  9. 优化客户端group配置和enabled加载顺序【优化】
  10. 修复常驻任务执行阻塞策略时无法准时开启下一次任务【BUG】
  11. 修复sqlserver数据库MP分页查询是没有带order by 导致的查询报错【BUG】
Last committed message: feat(sj_1.0.0): 发布beta3
2024-04-08 09:12
5705488 opensnail 1714272985 opensnail
  1. 异常重试支持实时日志【新增
  2. 新增自定义添加表前缀【新增issues
  3. server与client交互路径裸漏 希望增加通信token校验【新增issues
  4. 工作流支持看板能力【新增issues
  5. 实时日志合并功能【新增issues
  6. 支持常见数据库例如oracle sqlserver 【新增issues
  7. 优化秒级任务重复执行【优化
  8. 优化多数据源模块【优化
  9. 新增docker-compose.yaml 支持一键安装mysql、mariadb、sqlserver、oracle、postgres数据库【新增
  10. 优化分布式锁TransactionTemplate线程安全问题 【优化
  11. 废弃dbType配置,新增自动识别数据库类型【新增
Last committed message: feat(3.2.0) 升级版本
2024-03-17 20:49
5705488 opensnail 1714272985 opensnail
  1. 优化客户端重连逻辑 【新增】
  2. 新增netty重连事件、系统启动开始事件、系统启动完成事件、系统开始关闭事件、系统关闭完成事件【新增】
  3. 修改日志级别【优化】
  4. 化mysql初始化脚本【优化】
  5. pg的sql脚本出现重名索引【BUG】
  6. job_notify_config字段注释串到job_task了【BUG】
Last committed message: feat: 3.1.1
2024-03-11 12:06
5705488 opensnail 1714272985 opensnail
  1. SpringBoot版本升级至【3.2.2】【新增
  2. 工作流支持任务节点手动停止能力【新增issues
  3. 工作流支持任务节点手动重试能力【新增issues
  4. 支持两个同级方法重试【新增issues
  5. 重试支持传播机制【新增issues
  6. 管理后台,所有清空按钮无效,无法删除历史数据【BUGissues
Last committed message: feat: 3.1.0
2024-03-05 12:26
5705488 opensnail 1714272985 opensnail
  1. 修复新增定时任务配置的时候 触发类型为CORN表达式的时候 保存报错(未知触发类型)
  2. 修复Integer类型使用@NotBlank进行校验,导致出错
Last committed message: feat: 2.6.1
2024-01-30 22:29
5705488 opensnail 1714272985 opensnail
  1. 定时任务执行任务编排功能【新增issues
  2. 工作流执行手动/自动运行、复制工作流、停止等功能【新增
  3. 任务调度支持失败重试【新增issues
  4. 新增定时任务实时日志功能【新增issues
  5. dashboard Sql 优化 【优化issues
  6. 管理台组信息配置的分区下拉框无数据 【BUGissues
Last committed message: feat: 2.6.0
2023-12-11 23:42
5705488 opensnail 1714272985 opensnail
  1. 支持通过nginx代理 将应用代理到 ip/xxx/ 路径下访问【新增issues
  2. 任务调度新增手动暂停、取消、恢复执行中任务【新增issues
  3. 任务调度新增失败告警通知【新增issues
  4. Dashboard 添加任务调度数据展示【新增issues
  5. 支持namespace隔离不同业务线的应用 【新增issues
  6. 重试告警新增重试任务进入死信队列告警类型 【新增issues
  7. 修复多节点服务端存在某节点无客户端连接时,手动触发和自动触发任务失败 【BUG】
  8. 支持服务端jar包作为子服务启动【新增
  9. netty client修改http协议增加Host请求头【优化
  10. 优化服务端请求客户端路径多余/【优化
  11. 修复分片模式参数提交失败问题【BUG】
  12. 场景编辑时场景名称和组不允许编辑【优化
  13. 定时清除调度任务的历史日志 【新增issues
  14. 告警支持通知负责人配置【新增issues
Last committed message: pom: 2.5.0
2023-11-17 17:09
5705488 opensnail 1714272985 opensnail
  1. 修复分布式锁释放锁问题
Last committed message: fix: 2.3.2
2023-11-15 18:27
5705488 opensnail 1714272985 opensnail
  1. 支持分布式任务调度【新增

1.1 支持秒级任务【新增

1.2 支持集群、广播、分片任务模式【新增

1.3 支持丢弃、覆盖、并行阻塞策略【新增

1.4 支持固定时间、CRON表达式(页面可直接生成CRON表达式) 间隔时间【新增

1.5 支持失败重试【新增

1.6 支持任务超时机制【新增

1.7 简单易用的管理系统【新增

1.8 高性能任务调度,同时支持动态水平扩展【新增

1.9 同时执行 MYSQL、Mariadb、postgresSQL 三种数据库类型

....

  1. 支持重试场景执行超时时间设置【新增
  2. 支持通过动态计算提升系统获取任务的数量,提供系统的调度速率【新增
  3. 使用bucket机制优化负载均衡的机制【新增
  4. 使用时间轮优化重试任务调度,大大提高了调度的准确度【新增
  5. 通过使用不同akka的dispatcher减小任务之间的相互影响【新增
  6. 修复了分布式锁所有节点都获取锁失败的问题 【BUG】
  7. 镜像支持linux/arm64,linux/amd64两种系统架构【新增
  8. 优化客户端注册续约问题【优化
  9. 重试任务调度日志详情新增ip地址,端口,目的方便查看相关路由信息【新增
Last committed message: feat: 2.4.0
2023-09-17 22:20
5705488 opensnail 1714272985 opensnail
  1. 手动执行任务操作【新增issues
  2. bizNo支持Aviator、SPEL、QLExpress等多种表达式并通过SPI机制实现灵活扩展 【优化issues
  3. 优化客户端版本依赖【优化
  4. @Retryable注解在接口上不生效 【BUG】 issues
  5. 支持Spring Boot 3.x 【新增issues
  6. 当只有一个组时,组状态从开启到关闭,重试任务会继续执行【BUG】issues
  7. 多场景数据上报时重复生成retryTask【BUG】issues
  8. 修复迁移死信队列id重复问题【BUG】
  9. 优化控制台菜单图标【优化
  10. 修复回调执行器获取的错误问题【BUG】
  11. 其他优化项
Last committed message: feat:2.3.0
2023-08-30 23:05
5705488 opensnail 1714272985 opensnail
  1. 支持Mysql/MariaDB/PostgreSql数据库【新增】issues
  2. 对notify, scene, group, retry_task, retry_dead_letter表的操作抽象access统一收口【优化】
  3. 去除hutool-all改为按需引入【优化】
  4. 修复幂等没有过滤类型为TaskTypeEnum.RETRY和状态:RetryStatusEnum.RUNNING问题 【BUG】 issues
  5. 滑动窗口关闭时向服务端同步所有数据 【优化】
    6.修复用户删除无效问题【BUG】
    7.修复远程重试返回值为基本类型时返回异常【BUG】
  6. 客户端EasyRetryListener、RetryArgSerializer、RetrySiteSnapshotContext 使用SPI形式接入【新增】issues
  7. 死信队列支持批量回滚和批量删除 【新增】 issues
    10 其他功能优化
Last committed message: feat: 2.2.0
2023-08-17 16:14
5705488 opensnail 1714272985 opensnail
  1. 修复windows操作系统启动netty server失败问题【BUG】issues
Last committed message: feat: 2.1.1
2023-08-04 10:11
5705488 opensnail 1714272985 opensnail

v2.1.0 (2023-08-04)

  1. 新增批量新增任务功能【新增issues
  2. 重构了新增任务模型,支持客户端上报、控制台手动新增和单个新增等多种模式 【优化
  3. 修改getBlacklist NPE问题 【BUG】
  4. 删除hibernate-validator包使用spring-boot-starter-validation 【优化
  5. 优化调度日志信息 【优化issues
  6. 修复JacksonSerializerNPE问题 【BUG】
  7. 客户端支持yml、JVM参数和自动获取IP和端口三种方式 issues新增
  8. 废弃shedlock组件 issues优化
  9. 数据上报使用横向数据结构实现滑动窗口替换环形滑动窗口 【优化
  10. netty服务端接收请求改为actor模型 【优化issues
  11. 重试任务和回调任务扫描改为以id作为偏移进行滚动扫描 【优化
  12. 客户端回调接口支持SpringBean和普通类模式 【优化
  13. 负载均衡器新增负载均衡周期时间配置 【优化
  14. 优化NettyServer启动失败主线程无感知问题 issues
  15. 组配置添加字段说明文档 issues

升级指南

  1. 第一种升级方式: 将shedlock表名改为distributed_lock
  2. 第二种升级方式: 将DistributedLock类上的@TableName("distributed_lock")改为@TableName("shedlock")
Last committed message: feat: 2.1.0
Java
1
https://gitee.com/aizuda/snail-job.git
git@gitee.com:aizuda/snail-job.git
aizuda
snail-job
snail-job

Search