2024/01/26 7時ごろに発生した障害について

いつもOpittaCloudをご利用いただき誠にありがとうございます。

2024/01/26 7:00ごろから同日 8:00までの間、本サービスにアクセスができない障害が発生し、ご迷惑をおかけして大変申し訳ございません。
システム障害についての調査及び原因についてご報告致します。

影響範囲・原因について

• 影響時間: 2024/01/26 05:59:06 JST - 2024/01/26 08:02:57 JST アクセス分
  • 上記期間内でも一部リクエストに対し正常にレスポンスしている場合もあります
• 影響アクセス数: 1,081アクセス
  • 弊社が利用する監視ツールによるリクエスト、提供画面の自動リロード機能によるリクエスト、リクエスト側からのリクエスト中止を含みます

本サービスが利用するデータベースサービスのメンテナンスに伴い発生したリリース作業が一定の時間内に終了しなかったために、エラーとなりました。
なお、メンテナンスとリリース作業はいずれも自動的に実行された/したものです。
データベースの自動メンテナンスは不定期ですが、サービス開始後何度か行っているメンテナンスになります。
昨年（2023年）は 02/24, 04/14, 06/30, 09/15, 11/10 にいずれも自動実行にて実施しており、特段トラブルはありませんでした。

時系列

Heroku (ヘロク) 社は本サービスが利用しているウェブサーバやデータベースサーバを提供するプラットフォームである Heroku の開発・運営会社で Salsesforce (セールスフォース) の子会社です。

• 2024-01-18 06:38 JST Heroku社より本サービスが非同期処理の管理に利用しているデータベースの自動メンテナンス（手動実行も可能なもの）を 2024-01-26 04:30:00 JST に実施予定の連絡を受ける
• 2024-01-26 04:33 JST Heroku 上にある本サービスのリリースフェーズ（新しいデータベースへの接続情報を適用するスクリプト）を開始
• 2024-01-26 04:34 JST 2024-01-26 04:33 より本サービスでエラーが発生の通知を受ける（2024-01-26 08:01 JST まで）【確認：障害対応中】
• 2024-01-26 04:35 JST Heroku社よりメンテナンスを開始した旨の通知を受ける【確認：障害対応中】
• 2024-01-26 04:36 JST Heroku社よりメンテナンスが完了した旨の通知を受ける【確認：障害対応中】
• 2024-01-26 05:05 JST Heroku にてリリースフェーズの遅延・失敗する障害が発生、影響時間は 2024-01-26 03:14 JST - 2024-01-26 04:37 JST で、2024-01-26 05:05 JST に障害解消の旨、Heroku社より発表
• 2024-01-26 05:06 JST 2024-01-26 05:05 JST 発表のエラーについて通知を受ける【確認：障害対応後】
• 2024-01-26 05:59 JST 本サービスの障害が一部発生
• 2024-01-26 05:59 JST 断続的に弊社が利用する監視ツールにてエラー検知
• 2024-01-26 07:02 JST 弊社が利用する監視ツールにてエラーを検知した旨の通知を受ける【確認：障害対応中】
• 2024-01-26 07:14 JST 弊社が利用する監視ツールにてエラー検知（以降、障害解消まで継続してエラー）
• 2024-01-26 07:17 JST 弊社が利用する監視ツールにてエラーを検知した旨の通知を受ける【確認：障害対応中】
• 2024-01-26 07:20 JST 利用者様より本サービスに接続できない旨の連絡
• 2024-01-26 08:02 JST 本サービスの障害が解消

今後の対応

上記障害を受けまして、今後、以下の策を講じることと致します。
・自動アップデートが実行される前に、障害発生してもすぐに対処できる体制・時間に手動実行にてアップデートを行います。

今回のシステム障害に関して、ご不明な点などございましたら、
以下までお問い合わせください。

【OpittaCloudお問い合わせ先】
電話：011-558-0688（平日受付時間10:00～17:00）
メール：support.opitta@eraman.net

大変ご迷惑をおかけしましたことを深くお詫び申し上げます。
今後ともOpittaCloudをよろしくお願いいたします。