Karte.io incident

一部の管理画面と接客配信機能で障害が発生していました

Major Resolved View vendor source →

Karte.io experienced a major incident on February 8, 2025 affecting 管理画面 and 接客の配信 and 1 more component, lasting 1h 12m. The incident has been resolved; the full update timeline is below.

Started
Feb 08, 2025, 05:43 AM UTC
Resolved
Feb 08, 2025, 06:56 AM UTC
Duration
1h 12m
Detected by Pingoru
Feb 08, 2025, 05:43 AM UTC

Affected components

管理画面接客の配信チャット

Update timeline

  1. investigating Feb 08, 2025, 05:43 AM UTC

    管理画面の一部が表示されない、および一部接客の配信に失敗する障害が発生しています。 想定される主な影響は次の通りです。 ■ 対象プロジェクト - KARTE InsightとKARTE Actionを利用中の全プロジェクト ■ 発生している現象 - 管理画面の一部が表示されない - イベント応答配信でサーバサイドアクションを配信している接客(下記にあてはまるもの)が配信されない - LINE - Sendgrid - 高品質SMS(twilio) - mailgun(メール) - 自動チャットメッセージ送信 - ネイティブアプリプッシュ通知 - [KARTE TALK]オペレータアサイン - Talkリッチメッセージ送信 - Talkマルチアクション - Webhook - Salesforce Marketing Cloud(API連携) - Amazon EventBridge - KARTE Craft接客 - KARTE Talkにてエンドユーザーがメッセージを送信できない 現在、開発チームが原因を調査中です。 約1時間以内に続報を掲載します。

  2. monitoring Feb 08, 2025, 06:05 AM UTC

    本障害の解決に向けた対応を実施しました。 ■ 対象プロジェクト - KARTE InsightとKARTE Actionを利用中の全プロジェクト ■ 発生した現象 - 管理画面の一部が表示されない - イベント応答配信でサーバサイドアクションを配信している接客(下記にあてはまるもの)が配信されない - LINE - Sendgrid - 高品質SMS(twilio) - mailgun(メール) - 自動チャットメッセージ送信 - ネイティブアプリプッシュ通知 - [KARTE TALK]オペレータアサイン - Talkリッチメッセージ送信 - Talkマルチアクション - Webhook - Salesforce Marketing Cloud(API連携) - Amazon EventBridge - KARTE Craft接客 - KARTE Talkにてエンドユーザーがメッセージを送信できない ■ 原因 - 影響のあった上記機能が利用する、システム内部のデータベースへの接続ができていなかったため ■ 実施した対応 - 接続可能な状態を復旧しました - 管理画面の閲覧や一部接客が配信可能になっていることは確認が取れており、順次その他の機能についても復旧できているかを確認の上、続報を掲載いたします。

  3. resolved Feb 08, 2025, 06:56 AM UTC

    障害が解消したのでご報告します。 ■ 発生期間 2025/02/08 13:20頃〜15:21頃 ■ 対象プロジェクト - KARTE InsightとKARTE Actionを利用中の全プロジェクト ■ 発生した現象 - 管理画面の一部が表示されない - イベント応答配信でサーバサイドアクションを配信している接客(下記にあてはまるもの)が配信されない - LINE - Sendgrid - 高品質SMS(twilio) - mailgun(メール) - 自動チャットメッセージ送信 - ネイティブアプリプッシュ通知 - [KARTE TALK]オペレータアサイン - Talkリッチメッセージ送信 - Talkマルチアクション - Webhook - Salesforce Marketing Cloud(API連携) - Amazon EventBridge - KARTE Craft接客 - KARTE Talkにてエンドユーザーがメッセージを送信できない ■ 原因 - 影響のあった上記機能が利用する、システム内部のデータベースへの接続ができていなかったため ■ 実施した対応 - 接続可能な状態を復旧しました - 本事象の原因により影響のあった機能が正常に動作していることを確認しました この度はご迷惑をおかけし、大変申し訳ございませんでした。

  4. postmortem Feb 12, 2025, 07:05 AM UTC

    この度発生した一部の管理画面と接客配信機能で障害が発生していましたに関する障害について、下記の通りご報告致します。 --- **発生期間** 2025/02/08 13:20頃〜15:21頃 **対象のプロジェクト** KARTE InsightとKARTE Actionを利用中の全プロジェクト **発生した現象** * 管理画面の一部が表示されない * イベント応答配信でサーバサイドアクションを配信している接客(下記にあてはまるもの)が配信されない * LINE * Sendgrid * 高品質SMS\(twilio\) * mailgun(メール) * 自動チャットメッセージ送信 * ネイティブアプリプッシュ通知 * \[KARTE TALK\]オペレータアサイン * Talkリッチメッセージ送信 * Talkマルチアクション * Webhook * Salesforce Marketing Cloud(API連携) * Amazon EventBridge * KARTE Craft接客 * KARTE Talkにてエンドユーザーがメッセージを送信できない **発生原因** * 影響のあった上記機能が利用する、システム内部のデータベースへ接続する際に必要な証明書の期限切れにより、データベースへアクセスできませんでした **実施した対応** * データベースとの接続時に利用する証明書を更新しました * 現在発行されている証明書の期限を再度確認し、同様の障害が発生しないことを確認しました **今後の対応** * 該当データベースの証明書の期限前にアラートを見直し正しく検知できるようにしました * 証明書の更新が不要な仕組みに移行を検討しています ‌ この度はご迷惑をおかけし、大変申し訳ございませんでした。