Wiki・学習

大規模なLaravelレポートジョブをバッチ処理する

報告作業者は、中断後に確実に作業を再開できる方法を必要としています。行が変更されている間に数値オフセットでページングを行うと、作業がスキップされたり、繰り返されたりする可能性があります。

質問

大規模なLaravelレポートジョブをバッチ処理する

編集部の回答

報告作業者は、中断後に確実に作業を再開できる方法を必要としています。行が変更されている間に数値オフセットでページングを行うと、作業がスキップされたり、繰り返されたりする可能性があります。

カーソルには単調増加順序のインデックス付きIDを使用し、実行開始時に固定の上限値を設定します。最後に正常に実行されたカーソルとバッチ結果をトランザクション内に保持します。バッチを再試行しても同じ結果が得られるように、一意の出力キーを使用します。

結果を確認する

1つのバッチをコミットした後、プロセスを停止し、再起動します。出力レコード数と格納カーソル数を、中断せずに実行した場合と比較します。

議論

サインイン 参加する。