From ac517b2d60ac7047ca1f928acd3b325888dfd054 Mon Sep 17 00:00:00 2001 From: xuxueli <931591021@qq.com> Date: Sun, 24 Nov 2019 11:39:41 +0800 Subject: [PATCH] 192.168.99.100 --- doc/XXL-JOB官方文档.md | 68 +++++++++++++++++++++----------------- 1 file changed, 37 insertions(+), 31 deletions(-) diff --git a/doc/XXL-JOB官方文档.md b/doc/XXL-JOB官方文档.md index f948bd73..6aaac501 100644 --- a/doc/XXL-JOB官方文档.md +++ b/doc/XXL-JOB官方文档.md @@ -458,17 +458,17 @@ XXL-JOB是一个轻量级分布式任务调度平台，其核心设计目标是 spring.mail.properties.mail.smtp.starttls.required=true spring.mail.properties.mail.smtp.socketFactory.class=javax.net.ssl.SSLSocketFactory - ### xxl-job, access token + ### 调度中心通讯TOKEN [选填]：非空时启用； xxl.job.accessToken= - ### xxl-job, i18n (default empty as chinese, "en" as english) + ### 调度中心国际化配置 [选填]： 默认为空，表示中文; "en" 表示英文； xxl.job.i18n= - ## xxl-job, 调度线程池最大线程配置 + ## 调度线程池最大线程配置【必填】 xxl.job.triggerpool.fast.max=200 xxl.job.triggerpool.slow.max=100 - ### xxl-job, 日志保存天数，过期日志自动清理；限制大于等于7时生效，否则，如-1，关闭自动清理功能； + ### 调度中心日志表数据保存天数 [必填]：过期日志自动清理；限制大于等于7时生效，否则, 如-1，关闭自动清理功能； xxl.job.logretentiondays=30 @@ -548,8 +548,8 @@ docker run -e PARAMS="--spring.datasource.url=jdbc:mysql://127.0.0.1:3306/xxl_jo ### 执行器运行日志文件存储磁盘路径 [选填] ：需要对该路径拥有读写权限；为空则使用默认路径； xxl.job.executor.logpath=/data/applogs/xxl-job/jobhandler - ### 执行器日志保存天数 [选填] ：值大于3时生效，启用执行器Log文件定期清理功能，否则不生效； - xxl.job.executor.logretentiondays=-1 + ### 执行器日志文件保存天数 [选填] ： 过期日志自动清理, 限制值大于等于3时生效; 否则, 如-1, 关闭自动清理功能； + xxl.job.executor.logretentiondays=30 #### 步骤三：执行器组件配置 @@ -888,6 +888,7 @@ XXL-JOB调度模块基于自研调度组件并支持集群部署，调度数据 - xxl_job_group：执行器信息表，维护任务执行器信息； - xxl_job_info：调度扩展信息表： 用于保存XXL-JOB调度任务的扩展信息，如任务分组、任务名、机器地址、执行器、执行入参和报警邮件等等； - xxl_job_log：调度日志表： 用于保存XXL-JOB任务调度的历史信息，如调度结果、执行结果、调度入参、调度机器和执行器等等； + - xxl_job_log_report：调度日志报表：用户存储XXL-JOB任务调度日志的报表，调度中心报表功能页面会用到； - xxl_job_logglue：任务GLUE日志：用于保存GLUE更新历史，用于支持GLUE的版本回溯功能； - xxl_job_registry：执行器注册表，维护在线的执行器和调度中心机器地址信息； - xxl_job_user：系统用户表； @@ -1208,6 +1209,11 @@ docker run --name xxl-job-admin -p 8080:8080 -d xuxueli/xxl-job-admin 原生提供通用命令行任务Handler（Bean任务，"CommandJobHandler"）；业务方只需要提供命令行即可； 如任务参数 "pwd" 将会执行命令并输出数据； +### 5.22 日志自动清理 +XXL-JOB日志主要包含如下两部分，均支持日志自动清理，说明如下： +- 调度中心日志表数据：可借助配置项 "xxl.job.logretentiondays" 设置日志表数据保存天数，过期日志自动清理；详情可查看上文配置说明； +- 执行器日志文件数据：可借助配置项 "xxl.job.executor.logretentiondays" 设置日志文件数据保存天数，过期日志自动清理；详情可查看上文配置说明； + ## 六、版本更新日志 ### 6.1 版本 V1.1.x，新特性[2015-12-05] @@ -1583,31 +1589,31 @@ Tips: 历史版本(V1.3.x)目前已经Release至稳定版本, 进入维护阶段 ### 6.26 版本 v2.1.1 Release Notes[回归测试中，即将发布] -- 1. UI优化，任务列表和日志列表数据表格宽度比例调整，避免数据换行提升体验； -- 2. 登录界面取消默认填写的登录账号密码； -- 3. 执行器表属性调整，"顺序" 属性调整为整型，解决执行器数据较多时无法正确排序的问题； -- 4. 任务触发组件优化，预加载频率正常1s一次，当预加载轮空时主动休眠一个加载周期，动态降低加载频率从而降低DB压力； -- 5. 注册监控线程优化，降低死锁几率； -- 6. 调度组件优化：针对永远不会触发的Cron禁止配置和启动；任务Cron最后一次触发后再也不会触发时，比如一次性任务，主动停止相关任务； -- 7. 任务列表交互优化，支持查看任务所属执行器的注册节点； -- 8. DB重连优化，修复DB宕机重连后任务调度停止的问题，重连后自动加入调度集群触发任务调度； -- 9. 任务触发组件加载顺序调整，避免小概率情况下组件随机加载顺序导致的I18N的NPE问题; -- 10. 项目依赖升级至较新稳定版本，如spring、spring-boot、mybatis、slf4j、groovy等等； -- 11. JobThread自销毁优化，避免并发触发导致triggerQueue中任务丢失问题； -- 12. Cron在线生成工具：任务新增、编辑框通过组件在线生成Cron表达式； -- 13. Cron下次执行时间查询：支持通过界面在线查看后续连续5次执行时间； -- 14. 任务重试时参数丢失的问题修复； -- 15. 调度中心密码限制18位，修复修改密码超过18位无法登陆的问题； -- 16. 任务告警组件分页参数无效问题修复； -- 17. DB脚本默认编码改为utf8mb4，修复字符乱码问题(建议Mysql版本5.7+)； -- 18. 调度中心任务平均分配，触发组件每次获取与线程池数量相关数量的任务，避免大量任务集中在单个调度中心集群节点； -- 19. 调度中心移除SQL中的 "now()" 函数；集群部署时不再依赖DB时钟，仅需要保证调度中心应用节点时钟一致即可； -- 20. 升级xxl-rpc版本：服务端线程优化，降低线程内存开销；IpUtil优化：增加连通性校，过滤明确非法的网卡； -- 21. 调度中心回调API服务改为restful方式； -- 22. 调度中心日志删除优化，改为分页获取ID并根据ID删除的方式，避免批量删除海量日志导致死锁问题； -- 23. 调度报表优化：新增日志报表的存储表，三天内的任务日志会以每分钟一次的频率异步同步至报表中；任务报表仅读取报表数据，极大提升加载速度； -- 24. 调度中心日志自动清理功能：调度中心新增配置项（"xxl.job.logretentiondays"）日志保存天数，过期日志自动清理；解决海量日志情况下日志表慢SQL问题；限制大于等于7时生效，否则关闭清理功能，默认为30； -- 25. 调度中心新增应用健康检查功能，借助“spring-boot-starter-actuator”，相对地址 “/actuator/health”； +- 1. Cron在线生成工具：任务新增、编辑框通过组件在线生成Cron表达式； +- 2. Cron下次执行时间查询：支持通过界面在线查看后续连续5次执行时间； +- 3. 调度中心日志自动清理功能：调度中心新增配置项（"xxl.job.logretentiondays"）日志保存天数，过期日志自动清理；解决海量日志情况下日志表慢SQL问题；限制大于等于7时生效，否则关闭清理功能，默认为30； +- 4. 调度报表优化：新增日志报表的存储表，三天内的任务日志会以每分钟一次的频率异步同步至报表中；任务报表仅读取报表数据，极大提升加载速度； +- 5. 调度中心新增应用健康检查功能，借助“spring-boot-starter-actuator”，相对地址 “/actuator/health”； +- 6. DB脚本默认编码改为utf8mb4，修复字符乱码问题(建议Mysql版本5.7+)； +- 7. 调度中心任务平均分配，触发组件每次获取与线程池数量相关数量的任务，避免大量任务集中在单个调度中心集群节点； +- 8. 任务触发组件优化，预加载频率正常1s一次，当预加载轮空时主动休眠一个加载周期，动态降低加载频率从而降低DB压力； +- 9. 调度组件优化：针对永远不会触发的Cron禁止配置和启动；任务Cron最后一次触发后再也不会触发时，比如一次性任务，主动停止相关任务； +- 10. DB重连优化，修复DB宕机重连后任务调度停止的问题，重连后自动加入调度集群触发任务调度； +- 11. 注册监控线程优化，降低死锁几率； +- 12. 调度中心日志删除优化，改为分页获取ID并根据ID删除的方式，避免批量删除海量日志导致死锁问题； +- 13. 任务重试时参数丢失的问题修复； +- 14. 调度中心移除SQL中的 "now()" 函数；集群部署时不再依赖DB时钟，仅需要保证调度中心应用节点时钟一致即可； +- 15. 任务触发组件加载顺序调整，避免小概率情况下组件随机加载顺序导致的I18N的NPE问题; +- 16. JobThread自销毁优化，避免并发触发导致triggerQueue中任务丢失问题； +- 17. 调度中心密码限制18位，修复修改密码超过18位无法登陆的问题； +- 18. 任务告警组件分页参数无效问题修复； +- 19. 升级xxl-rpc版本：服务端线程优化，降低线程内存开销；IpUtil优化：增加连通性校，过滤明确非法的网卡； +- 20. 调度中心回调API服务改为restful方式； +- 21. UI优化，任务列表和日志列表数据表格宽度比例调整，避免数据换行提升体验； +- 22. 登录界面取消默认填写的登录账号密码； +- 23. 执行器表属性调整，"顺序" 属性调整为整型，解决执行器数据较多时无法正确排序的问题； +- 24. 任务列表交互优化，支持查看任务所属执行器的注册节点； +- 25. 项目依赖升级至较新稳定版本，如spring、spring-boot、mybatis、slf4j、groovy等等； ### TODO LIST