概要
Azure Functions環境の健全性は、トリガー設計で決まります。Service Bus、Event Hubs、Storage Queuesのどれを選ぶかは、順序保証、スループット、配信セマンティクスに関する判断です。そして関数ごとの同時実行設定こそが、スケールする関数アプリが呼び出し先を押しつぶすのを防ぎます。
課題
トリガーの選定は、根拠を文書化しないままケースごとに行われていました。順序が重要な出荷イベントがセッションに対応していないトリガー上で動いていたため、ステータス更新が順不同で適用されることがありました。ホストの同時実行設定がデフォルトのままだったため、関数アプリが激しくスケールアウトし、下流のAPIのレート制限を使い切ってしまうこともありました。有害メッセージ(ポイズンメッセージ)の処理は一部の関数にしか実装されておらず、障害が黙って破棄されることもありました。
環境
Service Bus、イベントストリーム、外部パートナーのAPIを統合するAzure Functionsと、セルフホストのメッセージング基盤。お客様のイベントアーキテクチャはAceMQが設計し、プラットフォームはMicrosoftが運用しています。
アプローチ
AceMQは、各イベントフローの順序、スループット、配信の要件を整理し、根拠を文書化したうえで特定のトリガータイプに割り当てました。そのうえで、ホストレベルと関数ごとの同時実行数を下流の処理能力に合わせて設定しました。環境がクラウドのメッセージングとセルフホストのブローカーの両方にまたがっているため、両者の境界があいまいにならないよう明示的に設計しました。
ソリューション
- 順序、スループット、配信保証に基づき、各イベントフローに適したトリガータイプを選定
- エンティティ単位の順序が必要な出荷フローに、セッション対応のメッセージングを採用
- 下流のAPIとデータベースの処理能力に合わせて、ホストと関数ごとの同時実行数の上限を設定
- すべての関数アプリで、ポイズンメッセージの処理とデッドレターの確認方法を標準化
- クラウドのメッセージングとセルフホストのブローカーの境界と、両者をつなぐブリッジのパターンを定義
- リトライとトレーシングが一貫して機能するよう、冪等性と相関IDの規約を確立
結果
出荷ステータスの順不同な更新はなくなり、下流のパートナーAPIがバースト的なスケールアウトでレート制限にかかることもなくなりました。すべての関数アプリに、一貫した文書化済みの障害時の経路が用意されています。