主頁 > 後端開發 > celery筆記七之周期/定時任務及crontab定義

celery筆記七之周期/定時任務及crontab定義

2023-06-26 08:00:23 後端開發

本文首發于公眾號:Hunter后端
原文鏈接:celery筆記七之周期/定時任務及crontab定義

periodic task,即為周期,或者定時任務,比如說每天晚上零點零分需要運行一遍某個函式,或者每隔半小時運行一遍該函式,都是這種任務的范疇,

在第一篇筆記的時候我們就介紹過 celery 的組件構成,其中有一個組件叫做 beat,就是我們定時任務的調度器,

所有的定時任務都由 beat 發出,這種情況下,你必須確保在同一個時間點只有一個 beat 任務調度器在運行,假設有兩個 beat 同時在運行,那么在檢測定時任務的時候,系統的任務就可能會被重復發起、呼叫、執行,

  1. beat_schedule 定義
  2. beat 啟動
  3. crontab介紹

1、beat_schedule 定義

我們來定義兩個定時任務,一個是 blog.tasks.add,定義為每隔 30s 執行一次,現在晚上11點45分,我們定義每天11點50分執行一次,

在進行這些操作前,我們還需要對時區有一些設定,因為我們設定的晚上11點是北京時間,而 Django 和 celery 默認是格林威治時間,

時區設定

我們使用 Django 系統,一些配置在 settigns.py 中定義,詳情可以見前幾篇筆記的 celery 與 Django 系統使用,

關于時區,Django 系統和 celery 的時區我們都設定成北京時間:

# settings.py

# django 時區設定
TIME_ZONE = "Asia/Shanghai"
USE_TZ = False

# celery 時區設定 
CELERY_TIMEZONE = "Asia/Shanghai"
CELERY_ENABLE_UTC = False
DJANGO_CELERY_BEAT_TZ_AWARE = False

定時任務定義

接下來,我們定義定時任務:

from celery.schedules import crontab

app.conf.beat_schedule = {
    'add-every-30-seconds': {
        'task': 'blog.tasks.add',
        'schedule': 30,
        'args': (16, 16),
    },
    'schedule_test_add': {
        'task': 'blog.tasks.minus',
        'schedule': crontab(minute="50", hour="23"),
    },
}

定時任務的定義是我們通過 app.conf.beat_schedule 來操作,一個任務我們定義一個 name 作為 key

在每個 task 下,分別有以下選項:

task:指向我們定義的任務,比如我們這個是指向 blog application 下 tasks.add 任務

schedule:定時任務的策略,如果直接定義一個整數,比如定義的 add-every-30-seconds task 的這個引數定義為 30,就會每隔30s 執行一次

而如果使用 crontab() 函式,則可以更自由的定義到每個月,每周,每天,每時每秒,在示例中我們定義 minute="50", hour="23" 表示每天 23點50分執行一次

更詳細的策略我們下面再詳細介紹,

args:定時任務的引數,比如 add() 函式,我們每隔 30s 執行一次,給定的兩個引數是 (16, 16),對應 add(x, y) 輸入的兩個值

2、beat 啟動

beat 的啟動方式和 worker 啟動方式一致,將 worker 改成 beat 即可:

celery -A hunter beat -l INFO

也可以指定日志的輸出檔案:

celery -A hunter beat -l INFO --logfile=/Users/hunter/python/celery_log/beat.log

當我們啟動 beat 的時候,會發現啟動的檔案夾下會有一個名為 celerybeat-schedule.db 的檔案,這個是 beat 保存在本地的上一次任務運行的時間的資料,我們也可以指定該檔案的輸出地址:

celery -A hunter beat -l INFO -s /Users/hunter/python/celery_log/celerybeat-schedule

如果我們需要運行定時任務,我們需要額外啟動兩個服務,一個是 beat,一個是 worker

一般來說我們會先啟動 worker,再啟動 beat,這樣 beat 有一些立即發出的任務就可以直接被 worker 接收然后運行,

3、crontab介紹

我們使用 crontab() 函式制定定時任務的時間策略,比如每天運行一次,或者指定周幾運行都可以實作,

如果你之前接觸過 Linux 服務器上的 crontab 服務,那么就不用擔心理解它的使用方式,如果沒有,我們可以看看下面官方檔案對著的介紹,

在 celery 里,crontab 函式通過 from celery.schedules import crontab 引入,在 beat_schedule 的定義里作為 schedule 的值,這個前面給過一個示例,

crontab 接受五個引數:

  • minute 表示分鐘,接收整數或者整數串列,范圍在0-59,或者字串表示配置的時間模式
  • hour 表示小時,接收整數或者整數串列,范圍在0-23,或者接收字串表示配置的時間模式
  • day_of_week 表示周幾,接收整數或者整數串列,范圍在0-6,其中周日是0,周六是6,或者接收字串表示配置的時間模式
  • day_of_month 表示一個月的第幾天,接收整數或者整數串列,范圍在1-31,或者接收字串表示配置的時間模式
  • month_of_year 表示一年的第幾個月,接收整數或者整數串列,范圍在1-12,或者接收字串表示配置的時間模式

minute 和 hour

minute 和 hour 直接指向一天的某個時間點,所以,這兩個引數相當于是必填,除非是某些特殊的情況,比如默認的每分鐘執行一次:

crontab()

上面的命令,什么引數也不傳,表示的是每隔一分鐘執行一次

如果我們想指定特定的時間點,比如每天晚上11點23分執行一次:

crontab(minute=23, hour=23)

如果我們想指定某一些分鐘,比如分別在 23點11分,23點25分,23點44分鐘分別執行一次,可以如下操作:

crontab(minute="11,25,44", hour=23)

如果是上面這種沒有特殊關系的時間點,我們可以這樣通過逗號分隔連接起來,如果是有特殊關系的,比如說,每隔一分鐘,或者每隔三分鐘,我們可以通過 */n 的方式來連接,

23點之內,每隔三分鐘執行一次函式可以如下操作:

crontab(minute="*/3", hour=23)

這里的每隔 n 分鐘,其實是 n 的倍數,比如說 */3 就是在 0,3,6,9,12... 等這些分鐘數上執行,

還有一種是范圍內的操作方式,比如說,23點的 10-20分鐘內每分鐘執行一次:

crontab(minute="10-20", hour=23)

那么上面的方式合并起來可不可以,比如說在23點的第5分鐘,11分鐘,51分鐘,31-40分鐘,并且每隔兩分鐘執行一次

也可以實作,把上面的方式都添加在一起,就是一個或的操作:

crontab(minute="5,11,51,10-20,*/2", hour=23)

對于分鐘的這些操作,對于小時數是同樣生效的,不過范圍在 0-23 之間,比如說指定0點,5點,8點,16點的零分執行一次,那就是:

crontab(minute=0, hour="0,5,8,16")

如果是每個小時執行一次呢,就是:

crontab(minute=0, hour="*/1")

# 當 n = 1 的時候 1可以省略,即為
crontab(minute=0, hour="*")

hour 的范圍引數和指定的小時點,像 minute 引數一樣,也是可以或操作功能那樣生效的,

day_of_week

day_of_week 引數表示周幾,當我們使用這個引數的時候,minute 和 hour 引數是同樣生效的,這里我們只演示 day_of_week 引數的作用,小時和分鐘我們都定為 0點0分,

當我們不指定這個引數的時候,即為每天,只有指定了這個引數的時候,定義的周幾才會生效,比如我們定義在周一,周三,周五三天的零點執行一次:

crontab(minute=0, hour=0, day_of_week="1,3,5")

這里,周日是0,周一是1,周二是2,依次類推,

day_of_week 的引數還可以使用英文的簡寫,這里不做介紹,因為我個人認為還是直接使用數字方便一點,

另一個需要注意的是,day_of_week 也可以使用 */n 的形式,但是周幾總共只有7個,所以我這里推薦直接用數字寫出來,

day_of_month

表示一個月的第幾天,范圍是1-31,

其使用方法和 minute、hour 使用的方式是一致的,使用范圍和 */n 的形式都可以實作,

比如我們想實作在1號,5號,7號,8號,以及每個偶數日的零點零分執行一次,可以這樣操作:

crontab(minute=0, hour=0, day_of_month="1,5,7,8,*/2")

month_of_year

表示一年的某幾個月,范圍是1-12,

和前面的使用方式一致,如果需要使用,只有12個數字,還是推薦直接定義,

如果想獲取更多后端相關文章,可掃碼關注閱讀:
image

轉載請註明出處,本文鏈接:https://www.uj5u.com/houduan/555919.html

標籤:其他

上一篇:逍遙自在學C語言 | 指標陷阱-空指標與野指標

下一篇:返回列表

標籤雲
其他(161568) Python(38248) JavaScript(25513) Java(18259) C(15238) 區塊鏈(8272) C#(7972) AI(7469) 爪哇(7425) MySQL(7266) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5875) 数组(5741) R(5409) Linux(5347) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4606) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2437) ASP.NET(2404) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) .NET技术(1984) HtmlCss(1971) 功能(1967) Web開發(1951) C++(1942) python-3.x(1918) 弹簧靴(1913) xml(1889) PostgreSQL(1881) .NETCore(1863) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 【C++】Microsoft C++、C 和匯編程式檔案

    ......

    uj5u.com 2020-09-10 00:57:23 more
  • 例外宣告

    相比于斷言適用于排除邏輯上不可能存在的狀態,例外通常是用于邏輯上可能發生的錯誤。 例外宣告 Item 1:當函式不可能拋出例外或不能接受拋出例外時,使用noexcept 理由 如果不打算拋出例外的話,程式就會認為無法處理這種錯誤,并且應當盡早終止,如此可以有效地阻止例外的傳播與擴散。 示例 //不可 ......

    uj5u.com 2020-09-10 00:57:27 more
  • Codeforces 1400E Clear the Multiset(貪心 + 分治)

    鏈接:https://codeforces.com/problemset/problem/1400/E 來源:Codeforces 思路:給你一個陣列,現在你可以進行兩種操作,操作1:將一段沒有 0 的區間進行減一的操作,操作2:將 i 位置上的元素歸零。最終問:將這個陣列的全部元素歸零后操作的最少 ......

    uj5u.com 2020-09-10 00:57:30 more
  • UVA11610 【Reverse Prime】

    本人看到此題沒有翻譯,就附帶了一個自己的翻譯版本 思考 這一題,它的第一個要求是找出所有 $7$ 位反向質數及其質因數的個數。 我們應該需要質數篩篩選1~$10^{7}$的所有數,這里就不慢慢介紹了。但是,重讀題,我們突然發現反向質數都是 $7$ 位,而將它反過來后的數字卻是 $6$ 位數,這就說明 ......

    uj5u.com 2020-09-10 00:57:36 more
  • 統計區間素數數量

    1 #pragma GCC optimize(2) 2 #include <bits/stdc++.h> 3 using namespace std; 4 bool isprime[1000000010]; 5 vector<int> prime; 6 inline int getlist(int ......

    uj5u.com 2020-09-10 00:57:47 more
  • C/C++編程筆記:C++中的 const 變數詳解,教你正確認識const用法

    1、C中的const 1、區域const變數存放在堆疊區中,會分配記憶體(也就是說可以通過地址間接修改變數的值)。測驗代碼如下: 運行結果: 2、全域const變數存放在只讀資料段(不能通過地址修改,會發生寫入錯誤), 默認為外部聯編,可以給其他源檔案使用(需要用extern關鍵字修飾) 運行結果: ......

    uj5u.com 2020-09-10 00:58:04 more
  • 【C++犯錯記錄】VS2019 MFC添加資源不懂如何修改資源宏ID

    1. 首先在資源視圖中,添加資源 2. 點擊新添加的資源,復制自動生成的ID 3. 在解決方案資源管理器中找到Resource.h檔案,編輯,使用整個專案搜索和替換的方式快速替換 宏宣告 4. Ctrl+Shift+F 全域搜索,點擊查找全部,然后逐個替換 5. 為什么使用搜索替換而不使用屬性視窗直 ......

    uj5u.com 2020-09-10 00:59:11 more
  • 【C++犯錯記錄】VS2019 MFC不懂的批量添加資源

    1. 打開資源頭檔案Resource.h,在其中預先定義好宏 ID(不清楚其實ID值應該設定多少,可以先新建一個相同的資源項,再在這個資源的ID值的基礎上遞增即可) 2. 在資源視圖中選中專案資源,按F7編輯資源檔案,按 ID 型別 相對路徑的形式添加 資源。(別忘了先把檔案拷貝到專案中的res檔案 ......

    uj5u.com 2020-09-10 01:00:19 more
  • C/C++編程筆記:關于C++的參考型別,專供新手入門使用

    今天要講的是C++中我最喜歡的一個用法——參考,也叫別名。 參考就是給一個變數名取一個變數名,方便我們間接地使用這個變數。我們可以給一個變數創建N個參考,這N + 1個變數共享了同一塊記憶體區域。(參考型別的變數會占用記憶體空間,占用的記憶體空間的大小和指標型別的大小是相同的。雖然參考是一個物件的別名,但 ......

    uj5u.com 2020-09-10 01:00:22 more
  • 【C/C++編程筆記】從頭開始學習C ++:初學者完整指南

    眾所周知,C ++的學習曲線陡峭,但是花時間學習這種語言將為您的職業帶來奇跡,并使您與其他開發人員區分開。您會更輕松地學習新語言,形成真正的解決問題的技能,并在編程的基礎上打下堅實的基礎。 C ++將幫助您養成良好的編程習慣(即清晰一致的編碼風格,在撰寫代碼時注釋代碼,并限制類內部的可見性),并且由 ......

    uj5u.com 2020-09-10 01:00:41 more
最新发布
  • celery筆記七之周期/定時任務及crontab定義

    > 本文首發于公眾號:Hunter后端 > 原文鏈接:[celery筆記七之周期/定時任務及crontab定義](https://mp.weixin.qq.com/s/sNShaRbuM2gm2qn_codaTg) periodic task,即為周期,或者定時任務,比如說每天晚上零點零分需要運行一 ......

    uj5u.com 2023-06-26 08:00:23 more
  • 逍遙自在學C語言 | 指標陷阱-空指標與野指標

    ## 前言 在C語言中,指標是一種非常強大和靈活的工具,但同時也容易引發一些問題,其中包括空指標和野指標。 本文將帶你了解這兩個概念的含義、產生原因以及如何避免它們所導致的問題。 ## 一、人物簡介 - 第一位閃亮登場,有請今后會一直教我們C語言的老師 —— 自在。 ![](https://img2 ......

    uj5u.com 2023-06-26 08:00:11 more
  • 分享一些我技術成長的感悟

    今晚來聊聊我在**技術成長**中的一些感悟,跟大家分享下。 ## BALABALA 在大學的時候,我一個計算機專業相關的證書都沒考,自認為這些證書對我以后找作業沒什么大的幫助。于是我把時間更多地花在研究八股文上,因為八股文在面試的時候是要用到的。 (**利益化**) > **我會對我做的事情利益化* ......

    uj5u.com 2023-06-26 08:00:04 more
  • python測驗開發面試常考題:裝飾器

    ### 簡介 Python 裝飾器是一個可呼叫的(函式、方法或類),它獲得一個函式物件 func_in 作為輸入,并回傳另一函式物件 func_out。它用于擴展函式、方法或類的行為。 裝飾器模式通常用于擴展物件的功能。在日常生活中,這種擴展的例子有:在槍上加一個消音器,使用不同的相機鏡頭等等。 ! ......

    uj5u.com 2023-06-26 07:59:58 more
  • Kubernetes 系列:了解 k8s 架構(一)

    ### Kubernetes 概述 當下,我們很多專案于都在`Cloud Native`(云原生)的上面,這種方法旨在使組織能夠確保可用性并快速回應和適應變化,云原生其實就是一組本質上支持在不同云環境(公共云、私有云或混合云)上大規模構建、運行和管理應用程式的實踐和技術。 云原生離不開兩個概念:`容 ......

    uj5u.com 2023-06-26 07:58:59 more
  • TomCat快速安裝使用

    # 下載 這就不多說了,直接官網下載 https://tomcat.apache.org/ 直接解壓 配置 環境變數 (提前安裝好java,配置好java的環境變數) 配置Tomcat環境變數前一定要配置好java的環境變數,尤其是JAVA_HOME 新建 `CATALINA_HOME` 環境變數, ......

    uj5u.com 2023-06-26 07:58:51 more
  • springboot~stateless4j實作狀態機

    狀態機,包括了狀態和動作,某個**狀態**下,只能執行某些**動作**,如果**動作**不匹配,狀態是不會進行變更了,這樣就保護了我們狀態欄位的準備性,不能隨意改變,必須按著我們**設計的規則**進行狀態的輪轉。 # Stateless實作的狀態機 1. **Stateless**:Stateles ......

    uj5u.com 2023-06-26 07:58:43 more
  • 專案終于上了這個資料單位轉換工具類,金額轉換太優雅了!

    來源:blog.csdn.net/qq_35387940/article/details/129167329 ## **前言** 平時做一些統計資料,經常從資料庫或者是從介面獲取出來的資料,單位是跟業務需求不一致的。 - 比如, 我們拿出來的 分, 實際上要是元 - 又比如,我們拿到的資料需要 乘以 ......

    uj5u.com 2023-06-26 07:58:23 more
  • 【python基礎】檔案-檔案路徑

    # 1.檔案路徑 我們發現不管是寫入還是寫出操作,我們提供的都是檔案名,其實這里準確說應該是檔案路徑。當我們簡單把檔案名傳遞給open函式時,Python將在當前執行程式的檔案所在的目錄中查找檔案名所代表的檔案。 根據組織檔案的方式,可能需要打開不在當前執行程式檔案所屬目錄中的檔案。如果此時我們把該 ......

    uj5u.com 2023-06-26 07:57:58 more
  • 前端學習C語言 - 初級指標

    ## 初級指標 本篇主要介紹:`指標和變數的關系`、指標型別、`指標的運算子`、空指標和野指標、`指標和陣列`、`指標和字串`、const 和指標、以及`gdb 除錯段錯誤`。 ### 基礎概念 > 指標是一種特殊的變數。存放地址的變數就是指標。 `int num = 1;` 會申請4個位元組的記憶體 ......

    uj5u.com 2023-06-26 07:57:45 more