[復旧済] 視聴・配信ができない問題

以下の期間において、視聴・配信ができない問題が発生しておりました。現在は復旧されております。

不具合の内容

• 視聴、配信に失敗する

発生時刻

• 2023-04-19 03:30-10:00

問題の詳細

• Castify が依存するプラットフォームのメンテナンスの実行に伴うアップデートにより、Castify アプリケーションが意図しない挙動となり、内部で利用している API サーバーが起動しなくなったため。
  • より詳細な原因としては、Castify が利用している Google Kubernetes Engine のクラスターのアップグレードにより、Castify API サーバーが依存している JVM およびライブラリの不具合が発生した形となっております。

対応

• API サーバーが利用するライブラリの一部置き換えを実施し、起動する状態としました。

今後の対策

• プラットフォームのメンテナンスについて、更新の事前通知を受け取れていなかったため、これを受け取り、事前に弊社内の開発環境にて、問題ないかどうかを確認できる体制を整えました。
• 障害通知を受け取る仕組みが不十分であったため、これを改善しました。
  • 障害の検知から担当者への架電をシステム側で繰り返す仕組みを導入しました。

ご利用の皆様にはご迷惑をお掛け致しました。よろしくお願い致します。