python - celery beat 調(diào)度如何運(yùn)行期間動(dòng)態(tài)添加任務(wù)?
問題描述
我嘗試過django-celery-beat,在admin后臺(tái)添加任務(wù),可以實(shí)現(xiàn)動(dòng)態(tài)添加任務(wù)但要重啟celery beat才生效,請(qǐng)問,有其他方試嗎?
問題解答
回答1:無法動(dòng)態(tài)添加,必須重啟 beat。
ask 回答過原因了 #3493
回答2:有個(gè)思路,你可以考慮,我目前也在嘗試這個(gè)方法,處于摸石過河階段。celery是支持定時(shí)任務(wù),但是不符合我的需求,我需要像linux下的crontab這樣動(dòng)態(tài)添加定時(shí)任務(wù),我也看了django-celery-beat,因?yàn)橛玫氖荈lask,發(fā)現(xiàn)不值得參考實(shí)現(xiàn),所以一直在看文檔搜資料,終于被我找到一種方式,celery的apply_async這個(gè)函數(shù)非常有用,它有個(gè)eta參數(shù),它的簡(jiǎn)化使用是countdown,但是eta的威力是很巨大的,因?yàn)樗唤邮躣atetime對(duì)象,比如你給定一個(gè)任務(wù)在2017-05-02 20:0:0執(zhí)行,你可以這樣使用:
job.apply_async(args=args, kwarg=kwargs, eta=datetime(2017,5,2,20,0,0))
是不是很少用,假如我有一個(gè)任務(wù)需要每天晚上八點(diǎn)執(zhí)行,我可以利用這個(gè)eta參數(shù)實(shí)現(xiàn)。偽代碼如下:
時(shí)間規(guī)則 = ’每天晚上八點(diǎn)執(zhí)行’第一次調(diào)用任務(wù),先計(jì)算最近的執(zhí)行時(shí)間,作為eta的參數(shù),調(diào)用apply_async函數(shù),然后第一次任務(wù)執(zhí)行成功,得到上次任務(wù)的eta參數(shù)值,在天的值上加一,然后把新的執(zhí)行時(shí)間作為eta的參數(shù)再次調(diào)用apply_async函數(shù),這里省略了很多判斷,自行腦補(bǔ)。循環(huán)往復(fù),是不是一直按每天晚上八點(diǎn)執(zhí)行。
這里有個(gè)非常重要的點(diǎn)是如何在任務(wù)執(zhí)行成功的時(shí)候計(jì)算下一次的執(zhí)行時(shí)間,做法如下
class MyTask(Task): def on_success(self, retval, task_id, args, kwargs):print ’task done: {0}’.format(retval)return super(MyTask, self).on_success(retval, task_id, args, kwargs) def on_failure(self, exc, task_id, args, kwargs, einfo):print ’task fail, reason: {0}’.format(exc)return super(MyTask, self).on_failure(exc, task_id, args, kwargs, einfo)@app.task(base=MyTask)def add(x, y): return x + y
它提供了任務(wù)執(zhí)行成功和失敗的函數(shù),我們只要在此基礎(chǔ)上重寫就可以了,我說的只是最核心的部分,具體怎么做有很多方法,
相關(guān)文章:
1. mysql - 分庫分表、分區(qū)、讀寫分離 這些都是用在什么場(chǎng)景下 ,會(huì)帶來哪些效率或者其他方面的好處2. javascript - ios返回不執(zhí)行js怎么解決?3. python - 爬蟲模擬登錄后,爬取csdn后臺(tái)文章列表遇到的問題4. 視頻文件不能播放,怎么辦?5. python bottle跑起來以后,定時(shí)執(zhí)行的任務(wù)為什么每次都重復(fù)(多)執(zhí)行一次?6. html5 - HTML代碼中的文字亂碼是怎么回事?7. javascript - 求幫助 , ATOM不顯示界面!!!!8. mysql 查詢身份證號(hào)字段值有效的數(shù)據(jù)9. javascript - angular使從elastichearch中取出的文本高亮顯示,如圖所示10. javascript - 為什么在谷歌控制臺(tái) 輸出1的時(shí)候,輸出的1立馬就不見了
