仕事を一度に詰め込みすぎないため、処理中の件数に上限を付けた

毎回最大500件を新しく作る方式では、前回の待機分が400件残っていても、さらに500件増える可能性があります。

必要なのは新規作成数の上限ではなく、待機中と処理中を合わせた全体の上限です。現在488件なら、追加するのは12件だけにします。

定期処理は、前の実行が終わる前に次の時刻が来ることがあります。二つの処理が同時に件数を数えると、どちらも空きがあると判断して追加しすぎる可能性があります。

実行中であることを短時間のロックで示し、重なった実行は新しい仕事を作らず終了します。

すでに利用できないと判断した商品を新しい詳細確認へ入れると、限られた処理枠を使ってしまいます。

対象を選ぶ段階で売り切れ状態を除外し、今も確認する意味がある商品へ枠を使います。

大量に投入した瞬間は仕事が進んだように見えますが、キューやデータベースへ負担が集中すると、かえって全体が遅くなります。

空いた分だけ補充する仕組みなら、処理量が増えても一定の範囲で流し続けられます。派手さはありませんが、翌朝まで安定して動かすための改善です。