なぜ客は2回払ったのか
長く動くジョブとは、いくつかのステップを順に進めるプログラムです。ネットショップの注文処理がその例です。途中でプロセスが落ちると、単純なリトライは最初からやり直し、終わったステップをもう一度します。
こうして客は2回請求されます。このモジュールでは、その直し方を基本から組み立てます。それが永続実行で、ワークフローエンジンの土台にある考え方です。
このレッスンが終わると
メモ
ジョブの途中でプロセスが落ちると何が起きるかを説明できる。
キーワード
| ことば | いみ |
|---|---|
| プロセス | 動いているプログラム。自分のメモリを持つ |
| クラッシュ | プロセスが予告なく止まること |
| 副作用 | プログラムの外で起きる変化。支払いなど |
| リトライ | 失敗したジョブをもう一度動かすこと |
| ジョブ | プログラムがいくつかのステップで進める仕事 |
学生が入力するセルは、このプレビューでは空白です。
ジョブは外に影響するステップの列
ラボのショップは、注文を4つのステップで受けます。在庫を確保し、カードに課金し、領収書をメールし、配送を手配します。ほとんどのステップは、プログラムの外の何かを変えます。その変化が副作用です。
プロセスが落ちると、プログラムのメモリは消えます。副作用は消えません。一度課金すれば、プログラムが何を忘れても、お金は客の口座から出ています。
ラボのファイルを一覧する
docker exec worker lsここでは表示のみで、実行されません。「ラボを開始」を押すと、自分のラボのターミナルに入力できます。
単純なジョブを動かして落とす
docker exec worker python3 naive.py order-1 --fresh --crash-after charge_cardここでは表示のみで、実行されません。「ラボを開始」を押すと、自分のラボのターミナルに入力できます。
単純なリトライは最初から始める
1つ目の Run は、reserve_stock と charge_card の done 行を2つ出し、落ちた行を出しました。プロセスはそこで、終了コード 3 で止まりました。
次の Run がリトライです。ジョブは自分が何をしたかを記録していないので、最初から始めます。確保し、課金し、メールし、手配します。そのあと、order-1 の支払いが何件あるかを PostgreSQL にたずねます。
単純なジョブをもう一度動かす
docker exec worker python3 naive.py order-1ここでは表示のみで、実行されません。「ラボを開始」を押すと、自分のラボのターミナルに入力できます。
order-1 の支払いを数える
docker exec db psql -U durable -c "SELECT workflow, amount FROM payments WHERE workflow = 'order-1'"ここでは表示のみで、実行されません。「ラボを開始」を押すと、自分のラボのターミナルに入力できます。
例:それぞれの実行がしたこと
| 実行 | 終わったステップ | それまでの支払い |
|---|---|---|
| 1、クラッシュ | reserve_stock、charge_card | 2500 が1件 |
| 2、リトライ | 4つのステップすべて | 2500 が2件 |
| 客が望んだこと | 4つのステップを1回ずつ | 2500 が1件 |
学生が入力するセルは、このプレビューでは空白です。
よくある間違い
注意
ジョブが失敗したのだから、リトライはいつも安全だと思う人が多くいます。リトライが安全なのは、どのステップも2回動いて害がないときだけです。カードへの課金はそうではないので、リトライでもう一度課金されました。
試そう:落ちる場所を動かす
STEPS = ["reserve_stock", "charge_card", "send_receipt", "book_courier"]
EFFECTS = ["charge_card", "send_receipt"]
CRASH_AFTER = 2 # 1 回目は、この数のステップのあとで落ちる
done = []
# 1 回目: 途中で落ちる。
for name in STEPS[:CRASH_AFTER]:
done.append(name)
# リトライ: 最初からやり直して、最後まで進む。
for name in STEPS:
done.append(name)
for name in EFFECTS:
print(name, "は", done.count(name), "回起きた")
# CRASH_AFTER を 3 に、次に 0 にして、もう一度実行しましょう。
落ちる場所で被害が決まる
副作用の前に落ちれば、損はありません。リトライが仕事を1回するだけです。課金のあとで落ちると、課金が繰り返されます。領収書のあとで落ちると、課金とメールが繰り返されます。
落ちる場所は選べません。停電、サーバーの交換、デプロイによる再起動が起きます。だから、ジョブ自身が何をしたかを覚えておく必要があります。レッスン 2 では、プロセスより長く残る記憶をジョブに持たせます。