Webページの更新を監視しても、取得するたびに通知が来ると、確認が必要な変更を見分けにくくなります。何が変わったら誰が行動するのかを決め、差分の検出と通知の判断を分けます。
監視する値を絞る
料金改定を知りたいなら料金と適用日、申込受付を知りたいなら受付状態と期限を比較します。ページの取得時刻や広告の表示まで含めた全文比較では、目的と関係のない変更も拾いやすくなります。
対象URL、取得する箇所、比較する列、正常とみなす条件を一組で記録します。必要な箇所が取れなかったときは、「変更なし」にせず、取得の確認待ちへ分けてください。
条件を例で確かめる
次は架空の受付案内を監視する場合の判断例です。
- 初回取得: 基準データを保存し、初回であることを記録する
- 受付中から受付終了へ変化: 担当者へ通知する
- 本文の空白だけが変化: 通知を見送り、差分を記録する
- 受付状態が抽出できない: 通常の更新通知を保留し、取得エラーとして確認する
通知を見送る理由も条件へ含めると、通知が来ないことが正常なのか、処理が動いていないのかを調べられます。空白の整理などを入れる場合も、価格や否定表現まで消さない範囲にします。
同じ変更を繰り返し送らない
対象ID、前回と今回の値、変更を検出した時刻を保存します。通知した差分を識別できれば、次の実行で同じ内容を送るか判断できます。
送信がタイムアウトした場合は、通知先に届いている可能性があります。送信結果を確認できない状態を「未送信」と一緒にせず、照合が必要な状態として残します。HTTPの再試行の説明も、繰り返した際の作用を考慮する必要を示しています。
通知サービスが重複防止キーを提供する場合は、その有効範囲と保持期間を公式資料で確認します。ローカルのログだけで、相手側の保存まで一度きりになると保証しないようにします。
宛先と確認期限
緊急性がない更新はまとめて知らせる、対応が必要な変化だけ担当者へ知らせるなど、運用に合わせます。複数人へ同時に送る場合は、誰が確認済みとするかも決めます。
通知文には対象、変更前後、確認用URL、次に必要な作業を短くまとめます。ページ全文や個人情報を毎回転送する必要があるかは、別に判断してください。
本番へ入れる前の点検
変更なし、通知対象、見送り、抽出失敗、送信結果不明の入力を用意します。想定した判断と記録になるかを、送信を止めた状態で確認してから通知先へつなぎます。このページでは実サイトの監視や通知の送信は行っていません。
全体の構成はサイト更新の定期監視、記録の残し方はlogging入門を参考にできます。
