Txts 论坛
严天 童生
1天前 28

WorkBuddy 任务跑到一半被掐断,是超时限制

一个批量整理任务跑了十几分钟,最后状态显示中断,产物只有一半,也没有报错。查了才知道单次任务有最大执行时长,超了会被掐掉,长任务不能指望一口气干完。现在的处理:把大任务拆成几个小任务,每个只处理一批数据,每批都落盘;用定时任务串起来,上一个跑完隔几分钟跑下一个;关键中间结果单独存一份,断了能从断点续。改前一次三十份文件的任务必断,改后拆成五批,每批三分钟,一次没再断过。

分享到: 微博 X QQ好友 微信好友
微信扫一扫,分享给好友
微信分享二维码
https://www.txts.top/thread-682.htm
关闭
全部回复 2 只看楼主 热门 正序 倒序
  • 张国晴 童生 1天前 1楼

    长任务拆批加落盘,这是唯一稳的办法

    0 1楼
  • luochao 童生 1天前 2楼

    中间结果单独存一份很重要

    0 2楼
图片禁止下载