概要
同社は、世界有数の統合型物理セキュリティプラットフォームを開発しています。Windows上のRabbitMQクラスターでリーダー選出の遅延が発生し、数時間に及ぶダウンタイムを招いていました。
課題
RabbitMQの既知のバグにより、高負荷時にリーダー選出が数時間遅れ、セキュリティプラットフォームの運用に深刻なダウンタイムが生じていました。Windowsベースの環境が運用をさらに複雑にしており、厳しく管理されたデプロイ環境で安定性を維持しながら、Linuxへの移行を計画する必要がありました。
環境
WindowsベースのRabbitMQ環境、お客様が定めた環境上の制約、DNSベースのフェイルオーバーを備えたロードバランス構成のクラスター。
アプローチ
AceMQは、バージョンのパッチ適用、ロードバランサーの構成、トラブルシューティングのトレーニング、Linuxへの移行計画を対象に、的を絞ったコンサルティング時間を提供しました。この支援には、RabbitMQの再起動とトラブルシューティング手順を再現可能な形でまとめたプレイブックも含まれています。
ソリューション
- リーダー選出のバグを解消する、RabbitMQの特定バージョンのパッチを特定
- 本番展開前のステージング環境でのテスト戦略を設計
- クライアントの安定性を高めるため、DNSベースのロードバランサーを構成
- サポート担当者向けに、再現可能なRabbitMQ再起動のプレイブックを作成
- 社内サポートチーム向けのトラブルシューティング研修プログラムを作成
- Kubernetesの検討を含め、WindowsからLinuxへの移行パスを計画
結果
お客様は重大なリーダー選出の問題を解決し、社内でトラブルシューティングできる体制を整えたうえで、運用効率を高めるためのWindowsからLinuxへの明確な移行パスを手にしました。