アカウントサーベイでSlack通知の際、Slack側で 429: Too Many Requst
エラーが発生した場合に、Slack通知が繰り返し何度も送られる
<aside> <img src="/icons/info-alternate_gray.svg" alt="/icons/info-alternate_gray.svg" width="40px" /> 前回発生した 【対応完了】2024042201 アカウントサーベイのSlack通知が多重に配信される とは類似事象ではありますが、別の事象、原因となります
</aside>
2024年5月12日12時0分
<aside> <img src="/icons/info-alternate_gray.svg" alt="/icons/info-alternate_gray.svg" width="40px" /> 本件は2024年2月8日から発生する可能性がありましたが、顕在化したのが上記日時からとなります
</aside>
暫定対応1
を実施暫定対応2
, 恒久対応
を実施し、本番にリリース。同時刻、当事象が再発しないことを確認済み2024年5月12日23時46分に恒久対応まで実施し、本番環境にて当事象が発生しないことを確認済みとなっており、5月末まで経過観察後、障害が解消しました
原因説明の前提として、デクセコでのSlack通知の仕組みについてご説明させていただきます