大量アラートを「53%削減」 サーバ300台を運用する情シスは何を変えた?:エンジニアの負荷を大幅軽減
約300台のサーバを運用するオープンハウスグループでは、大量に届くアラートへの対応が担当者の負担となっていた。そこで監視運用の仕組みを見直し、アラート数を約53%削減した。同社は監視の運用をどう変えたのか。
システムの安定稼働に欠かせない監視だが、アラートが増え過ぎれば、その対応で運用担当者の業務が圧迫されることになる。不動産事業を展開するオープンハウスグループも、事業が急速に成長する中、それを支えるサーバの運用において同様の課題を抱えていた。
同社の情報システム部でインフラ運用を担うチームでは、監視ツールから発出される大量のアラートから重要なものを判別するのに、多大な労力を割かざるを得ない状況だったという。そこで同社は、アラートの集約や通知、対応プロセスの見直しに取り組んだ。
約300台のサーバ運用、大量アラートが課題に
インシデント管理ツールを提供するPagerDutyは2026年7月8日、オープンハウスグループの本導入事例を発表した。これによればオープンハウスグループは、PagerDutyの導入後、2週間足らずで本稼働を開始した。
オープンハウスグループの情報システム部に属するインフラストラクチャGでは、グループ全体のITインフラや約300台に及ぶサーバの運用を担っている。監視ツールが発する大量のアラートがメールに一括して届く運用となっており、その中から重要度の高いものを見分ける作業に多くの時間と労力が費やされ、担当者の負荷は増大していたという。重要なアラートをいち早く見極め、必要に応じて上位者へ迅速に引き継ぐことも課題となっていた。
そこで同社は、インシデント対応をさらに迅速化し、運用監視体制をより高度化するためにツールの導入を検討。複数のツールを比較検討し、PagerDutyのインシデント管理ツールを導入。Amazon Web Services(AWS)やGoogle Cloudの複数のクラウドサービス環境をまたいでアラートを一元的に集約できる点や、担当者に自動で通知が届く点、AIによる自動グルーピング機能を備える点などを評価した。
アラートを約53%削減、「対応に追われる運用」から脱却
オープンハウスグループはPagerDutyの導入後、まずAIが関連するアラートを自動でグルーピングする機能を活用し、重複したアラートや不要な通知を削減した。直近45日間で総アラート数は1885件から884件へと約53%減少し、エンジニアの負荷を大幅に軽減できたという。
アラート発生時の対応プロセスも見直した。あらかじめ設定したスケジュールに基づいて、その時間帯の担当者にピンポイントで自動で通知する仕組みを整備。誰が対応しているのかもコンソール上で把握できるようになり、チーム間の連携が円滑になった。担当者によらず一定の手順でアラートに対応できる体制を整え、運用の標準化にもつながった。
PagerDutyの導入後は、未解決のアラートに対してチーム内で自然にフォローし合う組織文化が醸成された。サイレント障害のような小さな予兆を早い段階で捉え、重大な障害につながる前に対処する体制も整備できたという。
オープンハウスグループは今後、アラートをきっかけに外部システムの処理を呼び出すWebhookなどを活用し、一次対応や復旧作業の自動化に取り組む。AIOpsによる予兆検知も進める方針だ。
Copyright © ITmedia, Inc. All Rights Reserved.
関連記事
「運用エンジニアは“燃え尽き予備軍”をやめるべし」 PagerDuty会長が語るインシデント対応“進化論”
ひとたび起きたシステム障害で信頼を失墜し、さらには復旧後にも残る影響で多大な損失を招きかねない時代だ。AIによる自動化も広がる今、運用プロセスやエンジニアはどうあるべきか。インシデント管理ツールベンダーPagerDutyのジェニファー・テハダ会長(前CEO)は、エンジニアの燃え尽き症候群を生む体制から脱却し、全員が「ビルダー」になるべきだと語る。その真意とは。
「月間1万アラート地獄」から脱却、NTTドコモが5年で実現した“運用の進化”とは
PagerDutyはNTTドコモによるインシデント管理ツール導入事例を発表した。同社は5年間の継続的な改善によって、アラート削減や初動対応時間の短縮などの成果を創出してきた。
仮想CTOが怒号、疑似SNSで炎上 インシデント対応を「eSports」に? 企業対抗でバトル
想像するだけで胃が痛くなるインシデント対応を、あえてeSportsのように競技化した企業対抗バトルが開催された。なぜインシデント対応を“エンタメ”に昇華したのか。仮想CTOの怒号が飛び、疑似SNSが炎上したコンテストの模様と、企画の裏側に迫った。
猶予は5分 Googleは生成AIで障害対応をどう効率化しているか
Googleは、「Gemini CLI」を活用してインシデント対応を高速化する実践手法を公開した。アラートの受信から緩和策の実行、根本原因の特定、事後検証報告(ポストモーテム)の作成までの全工程にわたって活用しているという。