障害報告 : 横断検索サービスの中断について（2022年3月23日）

状況　復旧済み

発生日時　2022年3月23日 6:55～7:23（約30分間）「検索がタイムアウトになる」

発生原因　システムアップデートの適用に伴う運用障害

- 2022年3月23日 6:53　アップデート適用（自動的なシステムオペレーション）
- 2022年3月23日 6:55　障害検出・アラートを送出（エラー率約20%）
- 2022年3月23日 7:17　自動切り替えを開始 (*1)（エラー率約40%）
- 2022年3月23日 7:20　有人による対応を開始（エラー率約80%）
- 2022年3月23日 7:23　障害箇所を特定し復旧完了

• 通常のシステムオペレーション中（自動的なアップデート適用）に想定していないエラーが発生したことにより、一時的に検索結果を応答できない状況となりました。この障害は影響のあった30分間のAPI全体アクセスの最大80%程度に影響しました。
• 今回の障害は、障害箇所が事前に想定されていなかったため自動復旧メカニズムが動作しませんでした。このため長時間のサービス中断が発生しました。同じケースで自動復旧メカニズムが動作するよう、改修を予定しています。
• *1の自動切り替えは、適切なデータセンターが選択できなかったため有効に機能しませんでした。
• 同技術基盤を利用している「学校図書館支援プログラム」においても一時的に検索ができない状態となりました。

2022年5月21日 17:20：対策が完了しました