Karte.io Outage History

Karte.io is up right now

Karte.io had 47 outages in the last 2 years totaling 1271h 13m of downtime — averaging 1.9 incidents per month.

There were 47 Karte.io outages since May 30, 2024 totaling 1271h 13m of downtime. Each is summarised below — incident details, duration, and resolution information.

Source: https://status.karte.io

Major February 8, 2025

一部の管理画面と接客配信機能で障害が発生していました

Detected by Pingoru
Feb 08, 2025, 05:43 AM UTC
Resolved
Feb 08, 2025, 06:56 AM UTC
Duration
1h 12m
Affected: 管理画面接客の配信チャット
Timeline · 4 updates
  1. investigating Feb 08, 2025, 05:43 AM UTC

    管理画面の一部が表示されない、および一部接客の配信に失敗する障害が発生しています。 想定される主な影響は次の通りです。 ■ 対象プロジェクト - KARTE InsightとKARTE Actionを利用中の全プロジェクト ■ 発生している現象 - 管理画面の一部が表示されない - イベント応答配信でサーバサイドアクションを配信している接客(下記にあてはまるもの)が配信されない - LINE - Sendgrid - 高品質SMS(twilio) - mailgun(メール) - 自動チャットメッセージ送信 - ネイティブアプリプッシュ通知 - [KARTE TALK]オペレータアサイン - Talkリッチメッセージ送信 - Talkマルチアクション - Webhook - Salesforce Marketing Cloud(API連携) - Amazon EventBridge - KARTE Craft接客 - KARTE Talkにてエンドユーザーがメッセージを送信できない 現在、開発チームが原因を調査中です。 約1時間以内に続報を掲載します。

  2. monitoring Feb 08, 2025, 06:05 AM UTC

    本障害の解決に向けた対応を実施しました。 ■ 対象プロジェクト - KARTE InsightとKARTE Actionを利用中の全プロジェクト ■ 発生した現象 - 管理画面の一部が表示されない - イベント応答配信でサーバサイドアクションを配信している接客(下記にあてはまるもの)が配信されない - LINE - Sendgrid - 高品質SMS(twilio) - mailgun(メール) - 自動チャットメッセージ送信 - ネイティブアプリプッシュ通知 - [KARTE TALK]オペレータアサイン - Talkリッチメッセージ送信 - Talkマルチアクション - Webhook - Salesforce Marketing Cloud(API連携) - Amazon EventBridge - KARTE Craft接客 - KARTE Talkにてエンドユーザーがメッセージを送信できない ■ 原因 - 影響のあった上記機能が利用する、システム内部のデータベースへの接続ができていなかったため ■ 実施した対応 - 接続可能な状態を復旧しました - 管理画面の閲覧や一部接客が配信可能になっていることは確認が取れており、順次その他の機能についても復旧できているかを確認の上、続報を掲載いたします。

  3. resolved Feb 08, 2025, 06:56 AM UTC

    障害が解消したのでご報告します。 ■ 発生期間 2025/02/08 13:20頃〜15:21頃 ■ 対象プロジェクト - KARTE InsightとKARTE Actionを利用中の全プロジェクト ■ 発生した現象 - 管理画面の一部が表示されない - イベント応答配信でサーバサイドアクションを配信している接客(下記にあてはまるもの)が配信されない - LINE - Sendgrid - 高品質SMS(twilio) - mailgun(メール) - 自動チャットメッセージ送信 - ネイティブアプリプッシュ通知 - [KARTE TALK]オペレータアサイン - Talkリッチメッセージ送信 - Talkマルチアクション - Webhook - Salesforce Marketing Cloud(API連携) - Amazon EventBridge - KARTE Craft接客 - KARTE Talkにてエンドユーザーがメッセージを送信できない ■ 原因 - 影響のあった上記機能が利用する、システム内部のデータベースへの接続ができていなかったため ■ 実施した対応 - 接続可能な状態を復旧しました - 本事象の原因により影響のあった機能が正常に動作していることを確認しました この度はご迷惑をおかけし、大変申し訳ございませんでした。

  4. postmortem Feb 12, 2025, 07:05 AM UTC

    この度発生した一部の管理画面と接客配信機能で障害が発生していましたに関する障害について、下記の通りご報告致します。 --- **発生期間** 2025/02/08 13:20頃〜15:21頃 **対象のプロジェクト** KARTE InsightとKARTE Actionを利用中の全プロジェクト **発生した現象** * 管理画面の一部が表示されない * イベント応答配信でサーバサイドアクションを配信している接客(下記にあてはまるもの)が配信されない * LINE * Sendgrid * 高品質SMS\(twilio\) * mailgun(メール) * 自動チャットメッセージ送信 * ネイティブアプリプッシュ通知 * \[KARTE TALK\]オペレータアサイン * Talkリッチメッセージ送信 * Talkマルチアクション * Webhook * Salesforce Marketing Cloud(API連携) * Amazon EventBridge * KARTE Craft接客 * KARTE Talkにてエンドユーザーがメッセージを送信できない **発生原因** * 影響のあった上記機能が利用する、システム内部のデータベースへ接続する際に必要な証明書の期限切れにより、データベースへアクセスできませんでした **実施した対応** * データベースとの接続時に利用する証明書を更新しました * 現在発行されている証明書の期限を再度確認し、同様の障害が発生しないことを確認しました **今後の対応** * 該当データベースの証明書の期限前にアラートを見直し正しく検知できるようにしました * 証明書の更新が不要な仕組みに移行を検討しています ‌ この度はご迷惑をおかけし、大変申し訳ございませんでした。

Read the full incident report →

Major January 30, 2025

KARTE Message βで障害が発生しています

Detected by Pingoru
Jan 30, 2025, 07:05 AM UTC
Resolved
Jan 30, 2025, 09:11 AM UTC
Duration
2h 5m
Affected: KARTE Message
Timeline · 4 updates
  1. investigating Jan 30, 2025, 07:05 AM UTC

    KARTE Message βで障害が発生しています。 想定される主な影響は次の通りです。 ■ 対象プロジェクト - KARTE Message βをご利用のお客様 ■ 発生している現象 - KARTE Messageß管理画面にアクセスすると、画面の読み込みに失敗します - KARTE Messageßの配信が開始されませんが、配信中のものが失敗することはございません 開発チームが復旧対応中です。 約1時間以内に続報を掲載します。

  2. monitoring Jan 30, 2025, 08:06 AM UTC

    本障害の解決に向けた対応を実施しました。 ■ 対象プロジェクト - KARTE Message βを利用中の全プロジェクト ■ 発生した現象 - KARTE Meesage βの管理画面にアクセスできない - KARTE Message ßの配信が開始されませんが、配信中のものが失敗することはございません ■ 発生時間 - 2025年 1月30日 15時15分頃〜16時37分 ■ 実施した対応 - 利用している外部モジュールのアップデートに関する対応を行いました ■ 影響範囲 - 対象となったキャンペーンの配信ステータスは配信中となっておりますが、実際には発生時間内の配信は失敗しております - 繰り返し配信の場合、次回以降の配信は正常に動作します - 繰り返し配信ではないキャンペーンの場合、手動で再実行することで配信が可能です 現在、障害の解決を確認するために監視を続けています。 約1時間以内に続報を掲載します。

  3. resolved Jan 30, 2025, 09:11 AM UTC

    障害が解消したのでご報告します。 ■ 発生期間 2025/01/30 15:15頃〜16:37 ■ 対象プロジェクト KARTE Message βを利用中の全プロジェクト ■ 発生した現象 - KARTE Message βの管理画面にアクセスできない - 配信ステータスが配信中のままとなり、発生期間内に配信開始する配信が失敗した(なお、すでに配信開始していたものについては失敗しておりません) ■ 実施した対応 - 利用している外部モジュールのアップデートに関する対応を行いました この度はご迷惑をおかけし、大変申し訳ございませんでした。 なお、本障害の詳細や事後対応については、追って記載します。

  4. postmortem Feb 05, 2025, 01:20 AM UTC

    この度発生したKARTE Message βに関する障害について、下記の通りご報告致します。 --- **発生期間** 2025年1月30日15時15分頃 〜 16時37分頃 **対象のプロジェクト** KARTE Message βを利用中の全プロジェクト **発生した現象** * KARTE Message βの管理画面にアクセスできない * 配信ステータスが配信中のままとなり、発生期間内に配信開始する配信が失敗した(なお、すでに配信開始していたものについては失敗しておりません) **発生原因** * npmの自動アップデートにより、パッケージ管理の一部として利用していた別のシステムAの挙動が変わり、弊社環境での依存関係の解決が正しく行えなくなった **実施した対応** * 利用しているパッケージ管理システムAのアップデートに関する対応を行いました **今後の対応** * 今回問題が発生したパッケージ管理システムAは今後利用せず、別のシステムに切り替えることで、npmのアップデートによる影響を受けにくくします --- この度はご迷惑をおかけしてしまい、誠に申し訳ございませんでした。

Read the full incident report →

Major November 20, 2024

KARTEの管理画面、Datahubにて障害が発生していました

Detected by Pingoru
Nov 20, 2024, 07:19 AM UTC
Resolved
Nov 20, 2024, 08:35 AM UTC
Duration
1h 16m
Affected: 管理画面KARTE DatahubKARTE Message
Timeline · 2 updates
  1. investigating Nov 20, 2024, 07:19 AM UTC

    KARTEの管理画面にて障害が発生しています。 想定される主な影響は次の通りです。 ■ 対象プロジェクト - 全プロジェクト ■ 発生している現象 - Insight、Actionの画面で表示に失敗することがあります。 - Datahubでのクエリ、ジョブフローの実行、ターゲット配信、Messageβでの配信に影響がでることがあります。 - その他の管理画面についても影響が考えられ、現在調査中です。 現在、開発チームが原因を調査中です。 進捗があり次第更新いたします。

  2. resolved Nov 20, 2024, 08:35 AM UTC

    障害が解消したのでご報告します。 ■ 発生期間 2024/11/20 15:30~16:00頃 ■ 対象プロジェクト - KARTEを利用中の全プロジェクト ■ 発生した現象 - Datahubでのクエリ、ジョブフローの実行に失敗することがありました。 - Insight、Actionの画面で表示に失敗することがありました。 (Messageβ、ターゲット配信は影響なし) ※ジョブフローの実行の失敗については、管理画面の「通知」よりご確認いただき、発生時間に失敗の通知がされていないかご確認ください。 ■ 原因 -利用しているデータベースのジョブの数や負荷が上昇した結果、処理可能な量を超えたため。 ■ 実施した対応 -高負荷な原因となっているクエリの調査を行い、一部ジョブについて停止対応を行いました ■ 今後の対応 - データベース内での処理やスケールについて、負荷が集中しないように設定値等の見直しを行います。 この度はご迷惑をおかけし、大変申し訳ございませんでした。

Read the full incident report →

Major November 1, 2024

【解決済み】KARTE Blocksのページエディタ機能で障害が発生しています

Detected by Pingoru
Nov 01, 2024, 05:00 AM UTC
Resolved
Nov 01, 2024, 08:38 AM UTC
Duration
3h 38m
Affected: KARTE Blocks
Timeline · 4 updates
  1. investigating Nov 01, 2024, 05:00 AM UTC

    KARTE Blocksのページエディタ機能で障害が発生しています。 想定される主な影響は次の通りです。 ■ 対象プロジェクト - 調査中 ■ 発生している現象 - 一部施策について、ページエディタで施策の編集を実施し保存操作をしても、編集内容が保存されないことがあります - 上記現象が確認できるプロジェクトでも、プロジェクト内の全ての施策で保存が出来ないわけではなく、通常同様に施策の編集・保存が実施できる場合もあります 現在、開発チームが原因を調査中です。 約1時間以内に続報を掲載します。

  2. investigating Nov 01, 2024, 06:23 AM UTC

    KARTE Blocksのページエディタ機能で障害が発生しています。 想定される主な影響は次の通りです。 ■ 対象プロジェクト - KARTE Blocksをご利用の全プロジェクト ■ 発生している現象 - 一部施策について、ページエディタで施策の編集を実施し保存操作をしても、編集内容が保存されないことがあります - 上記現象が確認できるプロジェクトでも、プロジェクト内の全ての施策で保存が出来ないわけではなく、通常同様に施策の編集・保存が実施できる場合もあります - 保存ができない施策でも、時間をおいて何度か保存操作を試すことで、保存に成功する可能性が高いです 引き続き、開発チームが原因を調査中です。 原因が分かり次第、追って続報をご連絡いたします。

  3. resolved Nov 01, 2024, 08:38 AM UTC

    障害が解消したのでご報告します。 ■ 発生期間 2024/10/30 12時頃〜 2024/11/1 17時頃 ■ 対象プロジェクト KARTE Blocksをご利用の全プロジェクト ■ 発生した現象 - KARTE Blocksの施策を編集した際に、保存ができないことがある ■ 原因 - ブロックを編集して保存した際に撮るスクリーンショットの取得方法の改善において、考慮漏れが存在した - その結果、スクリーンショットを取得できないケースが発生し、仕様上そういったケースではブロックの保存が行えないため、本件障害が発生した ■ 実施した対応 - スクリーンショットを取得出来なかった場合でも、ブロック自体の保存は行えるように変更した ※スクリーンショット機能は、ブロック管理における視認性を高める機能のため、取得に失敗した場合でもブロックの配信や集計には影響ありません。 この度はご迷惑をおかけし、大変申し訳ございませんでした。 なお、本障害の詳細や事後対応については、追って記載します。

  4. postmortem Nov 15, 2024, 09:17 AM UTC

    この度発生したKARTE Blocksに関する障害について、下記の通りご報告致します。 --- **発生期間** 2024/10/30 12時頃〜 2024/11/1 17時頃 **対象のプロジェクト** KARTE Blocksをご利用の全プロジェクト **発生した現象** KARTE Blocksでブロックを編集した際に、保存ができないことがある **発生原因** * ブロックを編集して保存した際に撮るスクリーンショットの取得方法の改善において、考慮漏れが存在した * その結果、スクリーンショットを取得できないケースが発生し、仕様上そういったケースではブロックの保存が行えないため、本件障害が発生した **実施した対応** * スクリーンショットを取得出来なかった場合でも、ブロック自体の保存は行えるように変更した ※スクリーンショット機能は、ブロック管理における視認性を高める機能のため、取得に失敗した場合でもブロックの配信や集計には影響ありません。 **今後の対応** * システムモニタリングを強化し、ブロックの保存に関する異常を早期に検知できるようにします。 --- この度はご迷惑をおかけしてしまい、誠に申し訳ございませんでした。

Read the full incident report →

Major October 8, 2024

固定IPアドレスから外部サービスとの連携機能(SFTP連携、Salesforce Marketing Cloud連携、Marketo定期連携)で障害が発生していました

Detected by Pingoru
Oct 08, 2024, 12:06 AM UTC
Resolved
Oct 09, 2024, 05:41 AM UTC
Duration
1d 5h
Affected: KARTE Datahub
Timeline · 6 updates
  1. investigating Oct 08, 2024, 12:06 AM UTC

    固定IPアドレスから外部サービスとの連携機能で障害が発生しています。 想定される主な影響は次の通りです。 ■ 対象プロジェクト - KARTE Datahubをご利用中のプロジェクト ■ 発生している現象 - 固定IPアドレスから外部サービスとの連携機能(SFTP連携、Salesforce Marketing Cloud連携、Marketo定期連携)を使っている場合、ジョブフロー失敗率が上昇することを確認しています。 固定IPアドレスについて: https://developers.karte.io/docs/static-server 現在、開発チームが詳しい状況と原因を調査中です。 進捗があり次第更新します。

  2. investigating Oct 08, 2024, 01:03 AM UTC

    固定IPアドレスから外部サービスとの連携機能で障害が発生しています。 現在も開発チームが原因の詳細を調査中です。詳しい状況と原因が確認でき次第追って記載します。

  3. investigating Oct 08, 2024, 03:19 AM UTC

    固定IPアドレスから外部サービスとの連携機能で障害が発生しています。 高い負荷や処理の遅延が発生していることは確認できていますが、詳しい原因の特定に至っておりません。 現在も開発チームが原因の詳細を調査中です。詳しい状況と原因が確認でき次第追って記載します。

  4. monitoring Oct 08, 2024, 07:32 AM UTC

    本障害の解決に向けた対応を実施しました。 固定IPアドレスから外部サービスとの連携機能で障害が発生しています。 想定される主な影響は次の通りです。 ■ 発生期間 - 2024/10/07 20:00頃 〜 確認中 ■ 対象プロジェクト - KARTE Datahubをご利用中のプロジェクト ■ 発生している現象 - 固定IPアドレスから外部サービスとの連携機能(SFTP連携、Salesforce Marketing Cloud連携、Marketo定期連携)を使用するジョブフローの一部で、処理の進行が著しく遅延し、ジョブフロー失敗率が上昇した。 固定IPアドレスについて: https://developers.karte.io/docs/static-server ■ 該当ジョブ確認方法 ジョブフローが失敗している可能性があるため、以下方法にてご確認ください。 - KARTE Datahub > ジョブフロー一覧画面 > 各ジョブフローのステータス - 「お知らせ・通知機能」から配信されているエラー通知 → 障害解消時点で実行中になっているジョブは、継続して実行されます。 ただし、ジョブ開始から3時間経過した場合ジョブフローの仕様によりエラーになるため、エラーになった場合は手動により再実行をお願いします。また、上記に限らずエラーになっているジョブは、必要に応じて手動による再実行をお願いします。 ■ 実施した対応 - サーバーの再起動 現在、障害の解決を確認するために監視を続けています。 進捗があり次第更新します。

  5. resolved Oct 09, 2024, 05:41 AM UTC

    障害が解消したのでご報告します。 ■ 発生期間 - 2024/10/07 20:00頃 〜 2024/10/08 12:00頃 ■ 対象プロジェクト - KARTE Datahubをご利用中のプロジェクト ■ 発生した現象 - 固定IPアドレスから外部サービスとの連携機能(SFTP連携、Salesforce Marketing Cloud連携、Marketo定期連携)を使用するジョブフローの一部で、処理の進行が著しく遅延し、ジョブフロー失敗率が上昇した ■ 原因 - 負荷の高い処理が突発的に多発し、サーバーの処理が一時的に滞ったため ■ 実施した対応 - サーバーの再起動 この度はご迷惑をおかけし、大変申し訳ございませんでした。

  6. postmortem Oct 15, 2024, 02:14 AM UTC

    この度発生した固定IPアドレスから外部サービスとの連携機能に関する障害について、下記の通りご報告致します。 --- **発生期間** * 2024/10/07 20:00頃 〜 2024/10/08 12:00頃 **対象のプロジェクト** * KARTE Datahubをご利用中のプロジェクト **発生した現象** * 固定IPアドレスから外部サービスとの連携機能(SFTP連携、Salesforce Marketing Cloud連携、Marketo定期連携)を使用するジョブフローの一部で、処理の進行が著しく遅延し、ジョブフロー失敗率が上昇した **発生原因** * 負荷の高い処理が突発的に多発し、サーバーの処理が一時的に滞ったため **実施した対応** * サーバーの再起動 **今後の対応** * ピーク時の必要リソース群を中心に監視するメトリクスの調整と、リソースマネージメントの見直しを行います。 --- この度はご迷惑をおかけしてしまい、誠に申し訳ございませんでした。

Read the full incident report →

Major September 27, 2024

「お知らせ・通知機能」で障害が発生しています

Detected by Pingoru
Sep 27, 2024, 08:46 AM UTC
Resolved
Sep 30, 2024, 01:09 AM UTC
Duration
2d 16h
Affected: 管理画面
Timeline · 5 updates
  1. investigating Sep 27, 2024, 08:46 AM UTC

    「お知らせ・通知機能」で障害が発生しています。 想定される主な影響は次の通りです。 ■ 対象プロジェクト 次のすべての条件を満たすプロジェクト - 「お知らせ・通知機能」でいずれかの機能をONにしている - ターゲット配信 - 実行開始:開始時 - ターゲット配信 - 実行完了:完了時 - ターゲット配信 - エラー:発生時 - ターゲット配信 - 強制停止:発生時 - グローバルメニューに「Talk」が表示されていない(KARTE Talkをご契約いただいていない) ■ 発生している現象 - 上記のお知らせメール通知が行われません - 管理画面の「グローバルメニュー > ベルマーク(通知)」に通知されません 現在、開発チームが原因を調査中です。 進捗があり次第更新いたします。

  2. investigating Sep 27, 2024, 09:23 AM UTC

    We are continuing to investigate this issue.

  3. investigating Sep 27, 2024, 09:50 AM UTC

    当障害で発生している現象について調査進捗があったため更新いたします。 「お知らせ・通知機能」で障害が発生しています。 想定される主な影響は次の通りです。 ■ 対象プロジェクト 次のすべての条件を満たすプロジェクト - 「お知らせ・通知機能」でいずれかの機能をONにしている - ターゲット配信 - 実行開始:開始時 - ターゲット配信 - 実行完了:完了時 - ターゲット配信 - エラー:発生時 - ターゲット配信 - 強制停止:発生時 - グローバルメニューに「Talk」が表示されていない(KARTE Talkをご契約いただいていない) ■ 発生している現象 - 上記のお知らせメール通知が行われません - 管理画面の「グローバルメニュー > ベルマーク(通知)」に通知されません ■ 発生期間 - 2024/08/29 20:10 から発生しています。 開発チームが詳しい状況と原因を継続して調査中です。 進捗があり次第更新いたします。

  4. monitoring Sep 27, 2024, 01:19 PM UTC

    当障害で発生している事象について対応を実施しました。継続して監視を実施します。 実施した対応は以下のとおりです。 ■ 発生期間 - 2024/08/29 20:10〜2024/09/27 22:05 頃 ■ 対象プロジェクト 次のすべての条件を満たすプロジェクト - 「お知らせ・通知機能」でいずれかの機能をONにしている - ターゲット配信 - 実行開始:開始時 - ターゲット配信 - 実行完了:完了時 - ターゲット配信 - エラー:発生時 - ターゲット配信 - 強制停止:発生時 - グローバルメニューに「Talk」が表示されていない(KARTE Talkをご契約いただいていない) ■ 発生していた現象 「お知らせ・通知機能」で上記の「ターゲット配信」の通知設定をONをにしていても、お知らせメール通知が行われていませんでした。 また、 管理画面の「グローバルメニュー > ベルマーク(通知)」にも通知がされていませんでした。 ■ 原因 - 「お知らせ・通知機能」のプログラムのアップデートの際に通知機能に必要なプラグインが存在するかチェックするロジックに不具合を埋め込んでしまい、通知に必要な契約をされており、かつ必要なプラグインが存在している場合でも正常に通知が行われない状態になっていました。 ■ 実施した対応 - 原因となったプログラムの修正を行いました。 継続して監視を実施し、進捗があり次第続報を掲載いたします。

  5. resolved Sep 30, 2024, 01:09 AM UTC

    障害が解消したのでご報告します。 ■ 発生期間 - 2024/08/29 20:10〜2024/09/27 22:05 頃 ■ 対象プロジェクト 次のすべての条件を満たすプロジェクト - 「お知らせ・通知機能」でいずれかの機能をONにしている - ターゲット配信 - 実行開始:開始時 - ターゲット配信 - 実行完了:完了時 - ターゲット配信 - エラー:発生時 - ターゲット配信 - 強制停止:発生時 - グローバルメニューに「Talk」が表示されていない(KARTE Talkをご契約いただいていない) ■ 発生していた現象 「お知らせ・通知機能」で上記の「ターゲット配信」の通知設定をONをにしていても、お知らせメール通知が行われていませんでした。 また、 管理画面の「グローバルメニュー > ベルマーク(通知)」にも通知がされていませんでした。 ■ 原因 - 「お知らせ・通知機能」のプログラムのアップデートの際に通知機能に必要なプラグインが存在するかチェックするロジックに不具合を埋め込んでしまい、通知に必要な契約をされており、かつ必要なプラグインが存在している場合でも正常に通知が行われない状態になっていました。 ■ 実施した対応 - 原因となったプログラムの修正を行いました。 この度はご迷惑をおかけし、大変申し訳ございませんでした。

Read the full incident report →

Critical September 17, 2024

Messageβ機能で障害が発生していました

Detected by Pingoru
Sep 17, 2024, 08:34 AM UTC
Resolved
Sep 19, 2024, 05:10 AM UTC
Duration
1d 20h
Affected: KARTE Message
Timeline · 5 updates
  1. investigating Sep 17, 2024, 05:17 AM UTC

    Messageβ機能で障害が発生しています。 想定される主な影響は次の通りです。 ■ 対象プロジェクト - KARTE Messageßをご利用中のプロジェクト ■ 発生している現象 - KARTE Messageßのキャンペーン配信開始が遅延しています。 - KARTE Messageßの一部キャンペーンが配信に失敗しております。 現在、開発チームが原因を調査中です。 約1時間以内に続報を掲載します。

  2. investigating Sep 17, 2024, 06:29 AM UTC

    KARTE Message ß のキャンペーン配信機能で障害が発生しています。 現象について詳細が判明したため更新いたします。 ■ 対象プロジェクト - KARTE Messageßをご利用中のプロジェクト ■ 発生している現象 - KARTE Messageßのメール配信キャンペーンで開始が遅延しています。 - KARTE Messageßの一部メール配信キャンペーンで配信の実行がされませんでした。 ※なお、メール配信キャンペーンの配信途中でエラーが発生し、一部のユーザーのみに配信がされたという事象は確認されませんでした。 現在も、開発チームが原因の詳細を調査中です。進捗があり次第次第追って記載します。

  3. monitoring Sep 17, 2024, 08:34 AM UTC

    ※2024/09/18 08:35頃 「対象キャンペーンの確認方法と再送の方法」について、「実行回数が1回の施策」の場合の追記を行っています 本障害の解決に向けた対応を実施しました。 配信が実行されなかったキャンペーンの再実行が可能になったため、必要に応じてご対応お願いいたします。 ■ 対象プロジェクト - KARTE Messageßをご利用中のプロジェクト ■ 発生した現象 - KARTE Messageßのメール配信キャンペーンで開始が遅延しています。 - KARTE Messageßの一部メール配信キャンペーンで配信の実行がされませんでした。 ※なお、メール配信キャンペーンの配信途中でエラーが発生し、一部のユーザーのみに配信がされたという事象は確認されませんでした。 ■ 発生期間 2024年9月17日 11時00分頃 ~ ■ 対象キャンペーンの確認方法と再送の方法 - 確認方法 キャンペーン管理画面にて、キャンペーンのステータスが「停止済み」になっているキャンペーン - 再送方法 - 実行回数が「1回」の施策の場合:該当キャンペーンを複製し、再度配信を実施 - 実行回数が「繰り返し」の施策の場合:キャンペーン編集画面にて、再送したいキャンペーンを下書き状態に戻し、再度配信予約を実施 現在、障害の解決を確認するために監視を続けています。 進捗があり次第ご報告いたします。

  4. resolved Sep 19, 2024, 05:10 AM UTC

    障害が解消したのでご報告します。 ■ 発生期間 2024/09/17 12:45頃 ~ 2024/09/17 15:25頃 ■ 対象プロジェクト - KARTE Messageßをご利用中のプロジェクト ■ 発生した現象 - KARTE Messageßのメール配信キャンペーンで開始が遅延していました。 - KARTE Messageßの一部メール配信キャンペーンで配信の実行がされませんでした。 ※ なお、「メール配信キャンペーンの配信途中でエラーが発生し一部のユーザーのみに配信がされた」という事象は確認されませんでした。 ■ 原因 - データベースの負荷が一時的に上昇しパフォーマンスが悪化してしまったため ■ 実施した対応 - データベースのパフォーマンスを一時的に引き上げました ■ 対象キャンペーンの確認方法と再送の方法 - 確認方法 - キャンペーン管理画面にて、発生期間内に配信が実行されたキャンペーンのうち、キャンペーンのステータスが「停止済み」になっているキャンペーンをご覧いただくと、当障害の影響で停止されたキャンペーンを確認可能です。 - 再送方法 - 実行回数が「1回」の施策の場合:該当キャンペーンを複製し、再度配信を実施 - 実行回数が「繰り返し」の施策の場合:キャンペーン編集画面にて、再送したいキャンペーンを下書き状態に戻し、再度配信予約を実施 この度はご迷惑をおかけし、大変申し訳ございませんでした。 なお、本障害の事後対応については、追って記載します。

  5. postmortem Sep 26, 2024, 02:06 AM UTC

    この度発生したKARTE Message ß のキャンペーン配信機能に関する障害について、下記の通りご報告致します。 --- **発生期間** 2024/09/17 12:45頃 ~ 2024/09/17 15:25頃 **対象のプロジェクト** * KARTE Messageßをご利用中のプロジェクト **発生した現象** * KARTE Messageßのメール配信キャンペーンで開始が遅延していました。 * KARTE Messageßの一部メール配信キャンペーンで配信の実行がされませんでした。 ※ なお、「メール配信キャンペーンの配信途中でエラーが発生し一部のユーザーのみに配信がされた」という事象は確認されませんでした。 **発生原因** * データベースの負荷が一時的に上昇しパフォーマンスが悪化してしまったため **実施した対応** * データベースのパフォーマンスを一時的に引き上げました **対象キャンペーンの確認方法と再送の方法** * 確認方法 * キャンペーン管理画面にて、発生期間内に配信が実行されたキャンペーンのうち、キャンペーンのステータスが「停止済み」になっているキャンペーンをご覧いただくと、当障害の影響で停止されたキャンペーンを確認可能です。 * 再送方法 * 実行回数が「1回」の施策の場合:該当キャンペーンを複製し、再度配信を実施 * 実行回数が「繰り返し」の施策の場合:キャンペーン編集画面にて、再送したいキャンペーンを下書き状態に戻し、再度配信予約を実施 **今後の対応** * 処理を分散しデータベースの負荷が上昇しにくいアーキテクチャに変更します。 --- この度はご迷惑をおかけしてしまい、誠に申し訳ございませんでした。

Read the full incident report →

Major September 7, 2024

ターゲット配信およびDatahubのジョブフロー機能で障害が発生しています

Detected by Pingoru
Sep 07, 2024, 01:12 PM UTC
Resolved
Sep 07, 2024, 02:34 PM UTC
Duration
1h 21m
Affected: KARTE Datahub
Timeline · 4 updates
  1. investigating Sep 07, 2024, 01:12 PM UTC

    原因が特定できました。 現時点で分かっていることは次の通りです。 Datahubのジョブフロー機能で障害が発生しています。 想定される主な影響は次の通りです。 ■ 対象プロジェクト - 調査中 ■ 発生している現象 - Datahubのジョブフローが失敗する ■ 原因 - ジョブフロー内で使用するCloudプロバイダーのインフラ障害 現在、開発チームが本障害の解決に向けた対応を実施しています。 約1時間以内に続報を掲載します。

  2. identified Sep 07, 2024, 02:02 PM UTC

    原因が特定できました。

  3. monitoring Sep 07, 2024, 02:33 PM UTC

    障害が解消したのでご報告します。 ■ 発生期間 2024/09/07 20:20頃 - 22:05頃 ■ 対象プロジェクト ターゲット配信、またはDatahubの以下のジョブフローを実行している全プロジェクト 対象となるジョブフローの種類 - S3インポート、エクスポート - 紐付けテーブルからのインポート ■ 発生した現象 - ターゲット配信がエラーになる - Datahubのジョブフローがエラーになる ■ 原因 - ジョブフロー内で使用するCloudプロバイダーのインフラ障害 ■ 実施した対応 - Cloudプロバイダーとのコミュニケーション この度はご迷惑をおかけし、大変申し訳ございませんでした。 なお、本障害の詳細や事後対応については、追って記載します。

  4. resolved Sep 07, 2024, 02:34 PM UTC

    障害が解消したのでご報告します。 ■ 発生期間 2024/09/07 20:20頃 - 22:05頃 ■ 対象プロジェクト ターゲット配信、またはDatahubの以下のジョブフローを実行している全プロジェクト 対象となるジョブフローの種類 - S3インポート、エクスポート - 紐付けテーブルからのインポート ■ 発生した現象 - ターゲット配信がエラーになる - Datahubのジョブフローがエラーになる ※必要に応じて再実行をお願いします ■ 原因 - ジョブフロー内で使用するCloudプロバイダーのインフラ障害 ■ 実施した対応 - Cloudプロバイダーとのコミュニケーション この度はご迷惑をおかけし、大変申し訳ございませんでした。 なお、本障害の詳細や事後対応については、追って記載します。

Read the full incident report →

Major September 4, 2024

Messageβのワンクリック購読解除機能で障害が発生していました

Detected by Pingoru
Sep 04, 2024, 05:01 AM UTC
Resolved
Sep 10, 2024, 07:37 AM UTC
Duration
6d 2h
Affected: KARTE Message
Timeline · 3 updates
  1. investigating Sep 04, 2024, 05:01 AM UTC

    Messageβのワンクリック購読解除機能で障害が発生しています。 想定される主な影響は次の通りです。 ■ 対象プロジェクト KARTE Messageのワンクリック購読解除リンクを利用している全プロジェクト ■ 発生している現象 KARTE Messageのワンクリック購読解除リンク(https://support.karte.io/post/5mAlNeG86WT709fV4BA649#3-1)を使用している場合、ワンクリック購読解除が動作せず、購読解除ができない 現在、開発チームが原因を調査中です。

  2. monitoring Sep 04, 2024, 07:27 AM UTC

    本障害の解決に向けた対応を実施しました。 ■ 発生期間 2024年08月20日00時00分〜2024年09年04日14時27分 ■ 対象プロジェクト KARTE Messageのワンクリック購読解除リンクを利用している全プロジェクト ■ 発生した現象 KARTE Messageのワンクリック購読解除リンクを使用している場合、ワンクリック購読解除が動作せず、購読解除ができない ■ 原因 メールの配信基盤APIの切り替え時に不具合が発生しておりました ■ 実施した対応 ・ 今後送信されるメールについて、KARTE Messageのワンクリック購読解除が正常に動作するようになる修正対応を実施しました ・過去、配信されたメール内のワンクリック購読解除リンクが正常に動作するようになる修正対応の実施しました ・また障害発生期間中に配信されたメールからワンクリック購読解除をしていた対象者を抽出し配信停止状態にする対応を順次行っております 現在、障害発生期間中に配信されたメールからワンクリック購読解除をしていた対象者を抽出し配信停止状態にする対応を順次行っております。完了次第、続報を掲載します。

  3. resolved Sep 10, 2024, 07:37 AM UTC

    障害発生期間中に配信されたメールからワンクリック購読解除をしていた対象者を抽出し配信停止状態にする対応が完了しましたので、ご報告いたします。 ■ 発生期間 2024年08月20日00時00分〜2024年09年04日14時27分 ■ 対象プロジェクト KARTE Messageのワンクリック購読解除リンクを利用している全プロジェクト ■ 発生した現象 KARTE Messageのワンクリック購読解除リンクを使用している場合、ワンクリック購読解除が動作せず、購読解除ができない ■ 原因 メールの配信基盤APIの切り替え時に不具合が発生しておりました ■ 実施した対応 ・ 今後送信されるメールについて、KARTE Messageのワンクリック購読解除が正常に動作するようになる修正対応を実施しました ・過去、配信されたメール内のワンクリック購読解除リンクが正常に動作するようになる修正対応の実施しました ・また障害発生期間中に配信されたメールからワンクリック購読解除をしていた対象者を抽出し配信停止状態にする対応を実施しました この度はご迷惑をおかけし、大変申し訳ございませんでした。

Read the full incident report →

Notice August 26, 2024

イベント機能で一部のイベントのトラッキング完了までに過度に時間がかかる障害が発生していました。

Detected by Pingoru
Aug 26, 2024, 03:50 AM UTC
Resolved
Aug 26, 2024, 03:50 AM UTC
Duration
Affected: イベントトラッキング管理画面解析接客の配信チャットKARTE BlocksApi v2KARTE DatahubKARTE LiveKARTE RightSupportKARTE Messageジャーニー
Timeline · 1 update
  1. resolved Aug 26, 2024, 03:50 AM UTC

    障害が解消したのでご報告します。 ■ 発生期間 2024/08/26 10:48頃〜10:55頃 ■ 対象プロジェクト - KARTE Insightを利用中の全プロジェクト - KARTE Actionを利用中の全プロジェクト ■ 発生した現象 - イベントのトラッキング完了までに過度に時間がかかるケースが一時的に増加し、一部イベントではトラッキングの欠損が発生していました。 - 一部のイベントを配信トリガーとする接客サービスの配信・実行が失敗していました。 - 欠損したイベント数の割合は、1日あたりに換算すると約0.39%に該当します。(割合は前日のイベント数との比較により算出しております。) - 配信・実行に失敗した接客アクションの割合は、1日あたりに換算すると、約0.76%に該当します。(割合は前日の接客アクションの配信・実行件数との比較により算出しております。) この度はご迷惑をおかけし、大変申し訳ございませんでした。 なお、本障害の詳細や事後対応については、追って記載します。

Read the full incident report →

Major August 21, 2024

ジョブフロー機能で障害が発生していました

Detected by Pingoru
Aug 21, 2024, 07:34 AM UTC
Resolved
Aug 21, 2024, 09:52 AM UTC
Duration
2h 17m
Affected: KARTE Datahub
Timeline · 2 updates
  1. investigating Aug 21, 2024, 07:34 AM UTC

    ジョブフロー機能で特定のジョブに失敗する障害が発生しています。 想定される主な影響は次の通りです。 ■ 発生期間 2024年8月20日14時02分頃〜現在 ■ 対象プロジェクト KARTE DatahubにてジョブフローでS3との連携を行っているプロジェクト ■ 発生している現象 以下いずれかの場合、ジョブフローが失敗することがあります - S3から1GBを超えるファイルをインポートするジョブフロー - S3へ1GBを超えるファイルを転送するジョブフロー 現在、開発チームが原因を調査中です。

  2. resolved Aug 21, 2024, 09:52 AM UTC

    障害が解消したのでご報告します。 ■ 発生期間 2024年8月20日14時02分頃〜2024年8月21日18時01分頃 ■ 対象プロジェクト KARTE DatahubにてジョブフローでS3との連携を行っているプロジェクト ■ 発生した現象 以下いずれかの場合、ジョブフローが失敗することがありました - S3から1GBを超えるファイルをインポートするジョブフロー - S3へ1GBを超えるファイルを転送するジョブフロー ■失敗したジョブフローの確認、対応方法 1.「KARTE Datahub」の管理画面 > ジョブフローより、ステータスがエラーになっていて、かつ上記条件に当てはまっているジョブフローを確認 2.該当するジョブフローをクリック後、エラーになっているジョブについて、「個別に実行」をクリックし、ジョブフローを再実行 ■ 実施した対応 2024年8月20日のジョブフロー改修前の状態に戻す作業を実施しました この度はご迷惑をおかけし、大変申し訳ございませんでした。

Read the full incident report →

Major August 13, 2024

ターゲット配信機能で一部の配信が障害により遅延していました

Detected by Pingoru
Aug 13, 2024, 10:07 AM UTC
Resolved
Aug 13, 2024, 10:07 AM UTC
Duration
Affected: イベントトラッキング管理画面解析接客の配信チャットKARTE BlocksApi v2KARTE DatahubKARTE LiveKARTE RightSupportKARTE Messageジャーニー
Timeline · 2 updates
  1. resolved Aug 13, 2024, 10:07 AM UTC

    障害が解消したのでご報告します。 ■ 発生期間 2024-08-13 16:13頃〜17:40頃 ■ 対象プロジェクト - ターゲット配信機能を利用中の全プロジェクト ■ 発生した現象 - ターゲット配信のキャンペーンの配信について、設定されている時刻よりも遅延して配信が行われる障害が発生していました。 - 配信の遅延が発生したキャンペーンは配信時刻が 2024-08-13 16:13 〜2024-08-13 17:40 に予定されていたキャンペーンです。 - 2024-08-13 19:07 現在は障害は復旧しています。 ■ 原因 - システムの不具合により配信処理が開始できず、配信が予定されていたキャンペーンについて配信処理が停滞したため。 ■ 実施した対応 - システムの不具合を解消するリリースを行い、配信処理を再開しました。 この度はご迷惑をおかけし、大変申し訳ございませんでした。 なお、本障害の詳細や事後対応については、追って記載します。

  2. postmortem Aug 14, 2024, 05:59 AM UTC

    この度発生したターゲット配信の一部キャンペーンで配信が遅延していた障害について、下記の通りご報告致します。 --- **発生期間** 2024年08月13日16時13分頃 〜 17時40分頃 **対象のプロジェクト** * ターゲット配信をご利用中の全プロジェクト **発生した現象** * ターゲット配信のキャンペーンのうち該当期間中に配信時刻が設定されていたキャンペーンの配信が最大で1時間20分程度遅延しました。 **発生原因** * キャンペーンの配信を開始する処理に不具合があり、キャンペーンの配信が設定された「実行日時」に開始されていませんでした。 **実施した対応** * 該当の不具合を修正してリリースを行いました。これにより該当期間以後のキャンペーンは正常に配信されています。 **今後の対応** * ターゲット配信の機能の監視を強化して、早期に不具合を検知できるようにします。 --- この度はご迷惑をおかけしてしまい、誠に申し訳ございませんでした。

Read the full incident report →

Major August 7, 2024

KARTE Messageβ で一部のメーラーにてスパムメッセージと誤認される事象が発生していました

Detected by Pingoru
Aug 07, 2024, 06:19 AM UTC
Resolved
Aug 16, 2024, 07:47 AM UTC
Duration
9d 1h
Affected: KARTE Message
Timeline · 3 updates
  1. monitoring Aug 07, 2024, 06:19 AM UTC

    KARTE Messageβ にて外部起因によりスパムメッセージと誤認される事象が発生していましたが、当社による対応を実施しました。 ■ 発生した現象と対象 - KARTE Messageβから送信した一部のメールにて、Gmailで表示すると、「個人情報を不正入手するために、同様のメールが使用されたことがあります。メールに含まれているリンクのクリックや添付ファイルのダウンロード、または返信に個人情報を記載することは避けてください。」という警告が表示される ■ 発生していた期間 - 7月末頃〜8/7(水)13:00 ■ 影響範囲 - KARTE Messageβをご利用の全クライアント ■ 原因 - AWS SESのトラッキングリンクがSpamリンクの可能性があるとGmailのメーラーで判定されたため ■ 実施した対応 - トラッキングリンクを別の独自のリンクへ変更した - 上記対応で事象の解決は確認できておりますが、引き続き監視を継続しています ■ 再発防止策 - 検討中 ■ 補足 - 弊社側では警告文の表示が解除されたことを確認していますが、万が一、8/7(水)13:00以降に送信したメールで警告文が表示されている場合、弊社サポートならびにサクセス担当までにご連絡ください 現在、障害の解決を確認するために監視を続けています。

  2. monitoring Aug 07, 2024, 06:19 AM UTC

    We are continuing to monitor for any further issues.

  3. resolved Aug 16, 2024, 07:47 AM UTC

    KARTE Messageβ にて配信したメールがスパムメッセージと誤認される事象が発生していましたが、当社による対応を実施しました。 ■ 発生した現象と対象 - KARTE Messageβから送信した一部のメールにて、Gmailで表示すると、「個人情報を不正入手するために、同様のメールが使用されたことがあります。メールに含まれているリンクのクリックや添付ファイルのダウンロード、または返信に個人情報を記載することは避けてください。」という警告が表示される ■ 発生していた期間 - 7月末頃〜8/7(水)13:00 ■ 影響した可能性のある範囲 - KARTE Messageβをご利用の全クライアント ■ 原因 - KARTE Messageßが配信エンジンに利用しているメール配信プロバイダーのトラッキングリンクがSpamリンクの可能性があるとGmailのメーラーで判定されたため - Gmailがスパム判定ロジックを公開していないため、トラッキングリンクがspam判定された原因は不明です ■ 実施した対応 - トラッキングリンクをKARTE独自のトラッキングリンクへ変更した ■ 本事象に対する追加対応 - トラッキングリンクがスパム判定された際の影響範囲を最小限にすべく、各社様の送信元ドメインをトラッキングリンクにもご利用いただけるような変更を実施する予定です ■ 補足 - 引き続き、弊社側では警告文の表示が解除されたことを確認していますが、万が一、8/7(水)13:00以降に送信したメールで警告文が表示されている場合、弊社サポートならびにサクセス担当までにご連絡ください 事象の解決を確認するために監視を続けておりましたが、対応を行ったのち再発が見られないため、該当事象については現時点で解消しているものとしてご報告いたします。 なお本件に対する追加対応については、実施完了後KARTEリリースノートにてご報告いたします。 何卒よろしくお願いいたします。

Read the full incident report →

Notice July 30, 2024

「エレメントビルダー(β版)」を使用している「接客アクション」の一部で「message_open」イベントが計測されない事象が発生していました

Detected by Pingoru
Jul 30, 2024, 08:16 AM UTC
Resolved
Jul 30, 2024, 08:16 AM UTC
Duration
Affected: イベントトラッキング管理画面解析接客の配信チャットKARTE BlocksApi v2KARTE DatahubKARTE LiveKARTE RightSupportKARTE Messageジャーニー
Timeline · 1 update

Read the full incident report →

Major July 16, 2024

APIv2でリクエストを正常に処理できない事象が発生しています

Detected by Pingoru
Jul 16, 2024, 04:35 PM UTC
Resolved
Jul 17, 2024, 12:54 AM UTC
Duration
8h 19m
Affected: Api v2
Timeline · 4 updates
  1. investigating Jul 16, 2024, 04:17 PM UTC

    ■ 発生した現象と対象 - KARTE API v2にてリクエストに対してリクエストを正常に処理できず、500系のエラーが返る事象が発生しています ■ 発生していた期間 - 7/17 0:20分頃~ ■ 影響範囲 - KARTE APIv2の全エンドポイント ■ 原因 - 調査中 現在、開発チームが原因を調査中です。

  2. monitoring Jul 16, 2024, 04:35 PM UTC

    障害が解消したのでご報告します。 ■ 発生した現象と対象 - KARTE API v2にてリクエストに対してリクエストを正常に処理できず、500系のエラーが返る事象が発生していました。 ■ 発生していた期間 - 2024/7/17 0:00 - 1:15 頃 ■ 影響範囲 - KARTE APIv2の全エンドポイント ■ 原因 - 調査中 この度はご迷惑をおかけし、大変申し訳ございませんでした。 なお、本障害の詳細や事後対応については、追って記載します。

  3. resolved Jul 17, 2024, 12:54 AM UTC

    This incident has been resolved.

  4. postmortem Jul 17, 2024, 09:07 AM UTC

    この度発生したAPIv2でリクエストを正常に処理できない事象に関する障害について、下記の通りご報告致します。 ‌ ---‌ **発生期間** 2024年7月17日0時0分頃 〜 1時15分頃‌ **対象のプロジェクト** KARTE APIv2を利用中の全プロジェクト **発生した現象** * KARTE API v2にてリクエストに対してリクエストを正常に処理できず、500系のエラーが返る事象が発生していました。‌ **発生原因** KARTEで利用している外部サービスにてインフラを起因とする一時的な障害が発生し、その影響を受けKARTE API v2で利用しているサーバーが高負荷を受けリクエストを正常に処理できない事象が発生しました。 **実施した対応** * サーバー台数を増強しました。 * KARTEのインフラとして利用しているサービスの提供会社への問い合わせを行い、外部サービスのインフラに問題があることを確認しました。 * 現在は外部サービスのインフラを起因とする一時的な障害について解消済みであることを確認済みです。 **‌今後の対応** * 一部のサーバー等が高負荷な状況下でも、リクエストの処理失敗率を最小限に抑えられるアーキテクチャを目指した改善を検討します。‌ --- ‌ この度はご迷惑をおかけしてしまい、誠に申し訳ございませんでした。

Read the full incident report →

Major July 16, 2024

タグv1を使ったイベントトラッキングや接客の配信等で障害が発生しています

Detected by Pingoru
Jul 16, 2024, 04:31 PM UTC
Resolved
Jul 17, 2024, 12:56 AM UTC
Duration
8h 24m
Affected: イベントトラッキング接客の配信
Timeline · 3 updates
  1. monitoring Jul 16, 2024, 04:31 PM UTC

    障害が解消したのでご報告します。 ■ 発生していた期間 - 2024/7/17 0:00 - 1:15 頃 ■ 対象のプロジェクト - タグv1を用いて、KARTE InsightやKARTE Actionを利用中の全プロジェクト ■ 発生した現象 - タグv1を使った計測でイベントトラッキングに大幅に時間がかかっていた - その結果、一部のイベントを配信トリガーとする接客サービスの配信・実行が失敗した この度はご迷惑をおかけし、大変申し訳ございませんでした。 なお、本障害の詳細や事後対応については、追って記載します。

  2. resolved Jul 17, 2024, 12:56 AM UTC

    This incident has been resolved.

  3. postmortem Jul 17, 2024, 09:08 AM UTC

    この度発生したタグv1を使ったイベントトラッキングや接客の配信に関する障害について、下記の通りご報告致します。 ‌ --- **発生期間** 2024年7月17日0時0分頃 〜 1時15分頃 **対象のプロジェクト** タグv1を用いて、KARTE InsightやKARTE Actionを利用中の全プロジェクト **発生した現象** * KARTEのイベントトラッキング(計測)機能において、計測の遅延およびイベントログへの保存失敗が発生しました。 * 本イベントデータの欠損についてはイベントログ上の欠損となり、ユーザーデータの更新は行われています。 * 1日あたりに換算するとおよそ0.26%のイベントが欠損しました。 * KARTEの接客サービスの配信・実行に遅延および一部失敗がありました。 * 1日あたりに換算するとおよそ0.47%の接客サービスの配信・実行が失敗しました。 **発生原因** KARTEで利用している外部サービスにてインフラを起因とする一時的な障害が発生し、その影響を受けイベントトラッキングで利用しているサーバが高負荷を受けトラッキング処理の遅延が発生しました。 また、この処理遅延によってイベントが長時間にわたって処理できない場合に、イベントデータがログ上欠損する可能性がありました。 **実施した対応** KARTEのインフラとして利用しているサービスの提供会社への問い合わせを行い、外部サービスのインフラに問題があることを確認しました。‌ **今後の対応** * 外部サービスの監視と異常検知時に即時対応を行うための仕組みの強化を実施します。 * 一部のサーバ等が高負荷な状況下でも、イベントトラッキング失敗率・接客配信失敗率を最小限に抑えられるアーキテクチャを目指した改善を検討します。 --- ‌ この度はご迷惑をおかけしてしまい、誠に申し訳ございませんでした。

Read the full incident report →

Notice July 9, 2024

RightSupportのアンサーの検索機能で障害が発生していました

Detected by Pingoru
Jul 09, 2024, 08:11 AM UTC
Resolved
Jul 09, 2024, 08:11 AM UTC
Duration
Affected: KARTE RightSupport
Timeline · 1 update
  1. resolved Jul 09, 2024, 08:11 AM UTC

    RightSupportにて障害が発生しておりましたが、解消したのでご報告します。 ■ 発生期間 2024/07/09 14:40頃〜15:15頃 ■ 対象プロジェクト RightSupportを利用中の全プロジェクト ■ 発生した現象 - 下記機能にてアンサーのキーワード検索がエラーになり、検索結果が表示されない - サポートアクション内アンサー検索 - サポートウィジェット内アンサー検索 - サポートサイト内のアンサー検索 ■ 原因 - 仕様上想定外の設定データによって、プロダクトアップデート時の更新処理でエラーが発生し、正常に検索ができない状態になっていました ■ 実施した対応 - 原因となったデータを修正しました - 想定外の設定データの発生を防ぐ修正を実施しました

Read the full incident report →

Major May 30, 2024

KARTEの管理画面、Messageβの配信、Datahubの一部機能にて障害が発生しています

Detected by Pingoru
May 30, 2024, 09:09 AM UTC
Resolved
May 30, 2024, 01:03 PM UTC
Duration
3h 53m
Affected: 管理画面
Timeline · 4 updates
  1. investigating May 30, 2024, 09:09 AM UTC

    KARTEの管理画面にて障害が発生しています。 想定される主な影響は次の通りです。 ■ 対象プロジェクト - 全プロジェクト ■ 発生している現象 - Insight、Actionの画面で表示に失敗することがあります。 - その他の管理画面についても影響が考えられ、現在調査中です。 現在、開発チームが原因を調査中です。 約1時間以内に続報を掲載します。

  2. investigating May 30, 2024, 10:27 AM UTC

    現在、障害解消のための対応を行い、影響の詳細調査を行っています。

  3. resolved May 30, 2024, 01:03 PM UTC

    障害が解消したのでご報告します。 ■ 対象プロジェクト - KARTEを利用中の全プロジェクト ■ 発生期間 - KARTE管理画面で表示が失敗する可能性があった期間 - 2024/05/30 17:07頃 〜 2024/05/30 18:20頃 - MessageβやDatahubで、通常よりも遅延や失敗が発生する可能性が高かった期間 - 遅延:2024/05/30 17:00頃 〜 2024/05/30 19:00頃 - 失敗:2024/05/30 18:22頃 〜 2024/05/30 19:24頃 ■ 発生した現象 - KARTEの管理画面で表示に失敗することがありました。 - 次の配信や実行に失敗する可能性、及び通常よりも時間がかかる可能性がありました。 - ターゲット配信 - Messageβ - Datahubのクエリ実行 - Datahubのジョブフロー ■ 実施した対応 - 負荷の高いSQLの実行をキャンセルしました。 この度はご迷惑をおかけし、大変申し訳ございませんでした。 なお、本障害の詳細や事後対応については、追って記載します。

  4. postmortem Jun 10, 2024, 12:04 AM UTC

    この度発生したKARTEの管理画面、Messageβの配信、Datahubの一部機能に関する障害について、下記の通りご報告致します。 --- **発生期間** * KARTE管理画面で表示が失敗する可能性があった期間 * 2024/05/30 17:07頃 〜 2024/05/30 18:20頃 * MessageβやDatahubで、通常よりも遅延や失敗が発生する可能性が高かった期間 * 遅延:2024/05/30 17:00頃 〜 2024/05/30 19:00頃 * 失敗:2024/05/30 18:22頃 〜 2024/05/30 19:24頃 **対象のプロジェクト** * KARTEを利用中の全プロジェクト **発生した現象** * KARTEの管理画面で表示に失敗することがありました。 * 次の配信や実行に失敗する可能性、及び通常よりも時間がかかる可能性がありました。 * ターゲット配信 * Messageβ * Datahubのクエリ実行 * Datahubのジョブフロー **発生原因** * 利用しているデータベースのジョブの数や負荷が上昇した結果、処理可能な量を超えたため。 **実施した対応** * 負荷の高いSQLの実行をキャンセルしました。 **今後の対応** * データベース内での処理やスケールについて、負荷が集中しないように設定値等の見直しを行います。 * 再発時に迅速に対応できるように監視を見直します。 --- この度はご迷惑をおかけしてしまい、誠に申し訳ございませんでした。

Read the full incident report →