仕入れ候補のページが消えたとき、単なる取得エラーで終わらせない

一時的な通信エラーなら、時間を置いて再確認する意味があります。一方、削除済みページや404は、同じURLを何度開いても商品情報が戻らない可能性が高い状態です。

両方を同じエラーとして再試行すると、処理枠を使い続け、確認したい商品が後ろへ回ります。

HTTPの状態だけでなく、ページ内の削除表示、商品が利用できないことを示す情報、売り切れ状態などを組み合わせて判断します。

商品IDが別の商品へ変わっていないかも先に確認し、単純な売り切れ判定で別商品を処理しないようにしています。

利用不能として処理できても、理由が残らなければ後から調査できません。削除、404、売り切れ表示などの根拠を短い記録として保存します。

同じ理由が増えているかをまとめて調べられるため、個別のログを一件ずつ開かずに傾向を確認できます。

監視処理は、何でも繰り返せば正確になるわけではありません。戻る可能性がある失敗と、商品が利用できない状態を分けることが大切です。

朝の検索で新しい候補を早く確認するためにも、終わった商品をきちんと処理対象から外す必要があります。