【最終報告】(2024年10月1日)Acall サービス で読み込み中のままとなる事象が発生していました

Incident Report for Acall サービス稼働状況

Postmortem

本事象について、以下の通りにご報告を申し上げます。
この度はご迷惑をおかけいたしましたこと、深くお詫び申し上げます。

【概要】
Acall サービス の複数の動作で読み込み中のままとなる

【経緯】

  1. Acall サービス利用のピーク時間帯(平日朝8時以降)に数千件のワーカーインポート処理が実行された
  2. 書き込み用データベースであるライターインスタンスが高負荷状態となった
  3. リクエストに対してデータベースの処理能力が不足したことでサービスが停止した

‌【影響範囲】
Acall サービスをご利用のすべてのお客様

‌【発生日時】
2024年10月1日 10時43分頃~ 2024年10月1日 11時03分頃

‌‌

【原因】
サービス利用ピーク時において、数千件のワーカーインポート処理によりデータベースが高負荷状態となったため

‌‌【対応】
・データベースのフェイルオーバーを実施しました
・同様の事象を事前検知する仕組みと緩和策を確立しました

【再発防止策】
・ワーカーインポート処理における根本原因の調査と改善の実施

Posted Oct 09, 2024 - 14:47 JST

Resolved

本日10時50分頃から11時03分頃まで、以下の事象が発生していました。
ご迷惑をおかけし、誠に申し訳ございませんでした。
後日あらためて本件の最終報告を公開します。


【事象】
Acall サービス で読み込み中のままとなる。


【影響範囲】
Acall をご利用のすべてのお客様


【対応状況】
データベースのフェイルオーバーを実施しました。
現在は、すべてのサービスを正常にご利用いただけます。
Posted Oct 01, 2024 - 11:44 JST
This incident affected: Acall Portal, Acall Reception, Acall Meeting, Acall Gate, Acall Desktop, and Acall Mobile.