平素より弊社をご愛顧いただきまして誠にありがとうございます。
昨日9月14日(木)にデータ反映の遅延に関する障害が発生いたしましたので、ご報告いたします。
お客様をはじめ多くの関係者の皆様に多大なるご迷惑とご心配をお掛けいたしましたことを、深くお詫び申し上げます。
下記に判明した発生事象、発生原因および対応状況等についてご報告いたしますので、ご査収くださいますようお願い申し上げます。
障害発生期間
発生日時:9月14日(木)14時頃
復旧日時:9月15日(金)6時
発生事象
9月14日(木)にEventHub上で開催されたイベントにて異常アクセスが発生しました。
それにより、主催者または参加者が管理画面・イベントページからデータを更新しても、
画面上に反映されないという事象が発生しました。
現在、本事象(データ反映の遅延)は解消しており、障害発生期間に更新されたデータは
全て管理画面・イベントページに反映されております。
また、今回の事象による個人情報の漏洩・流出はございません。
影響範囲
EventHubで開催されたイベントで、障害発生期間中(9月14日(木)14時頃〜9月15日(金)6時)に、
主催者または参加者が管理画面・イベントページ上で行った操作
経緯
2023/9/14 13:30 EventHubで開催されたイベントにて異常アクセスが発生
2023/9/14 15:00 データ反映の遅延を検知し調査を開始
2023/9/14 17:00 再発防止の開発、影響範囲の調査開始
2023/9/14 19:30 再発防止の開発を終了
2023/9/15 06:00 障害発生時に遅延していたデータが問題なく反映されていることを確認
発生原因
デザインリニューアル後の「新デザインイベントページ」に埋め込んだVimeoの動画を参加者が視聴する際に、
特定の操作をすることで大量の視聴ログが送信されました。それにより、データベースのレプリカ同期が遅延してしまい、
レプリカを参照しているデータが更新されないことが原因で本事象が発生しました。
再発防止策
発生原因の改修とともに、今後大量の視聴ログが送信された場合でも、同様の事象が起きない処置を実装いたしました。
具体的には、一定期間内に大量のログが送信された場合、データベースに書き込まないように制限を追加いたしました。
大量ログ送付防止の対策のため視聴データの分析においては影響ありません。
この度は、お客様をはじめ多くの関係者の皆様に多大なるご迷惑とご心配をおかけいたしましたことを、深くお詫び申し上げます。
改めましてお詫び申し上げますとともに、再発防止に努めて参ります。
2023年9月15日
株式会社EventHub