Kafka

素のオープンソースApache Kafkaでも商用サポートは受けられるのか

Tyler Eastridge

執筆:Tyler Eastridge(オペレーション責任者)

LinkedIn · 更新日:

TOPIC LOGopen-source · self-managedP1/P2N / N-1 VERSION COVERAGEOpen-Source Kafka Support
このページの内容

Confluent Platformでもマネージドクラウドサービスでもなく、Apache Software Foundationのディストリビューションをそのまま使ってApache Kafkaを運用している場合でも、答えはイエスです。その構成に対応した商用サポートがあります。これは、Kafkaエコシステムのマーケティングが示唆するよりもずっとよくある状況です。

本記事では、まさにこの構成で運用しているエンタープライズとの実際の契約をもとに、オープンソースのKafkaに対する商用サポートが実際にどのようなものかを解説します。

Confluentを使わず、素のオープンソースKafkaを本番環境で運用している企業は実際にあるのか

はい。思われているよりも一般的で、相応の規模でも運用されています。ある通信事業者は、自社のデプロイを明確に「素のオープンソースKafka」と説明していました。地方のネットワークインフラ全体にわたるアラームとイベントの管理のためのメッセージングパイプラインとして使っており、商用プラットフォームではなくコミュニティ版のディストリビューションを運用しているからこそ、アーキテクチャのサポート、運用の安定性に関する助言、既存環境の全面的な監査を求めていました。

これは正当かつ安定したKafkaの運用方法です。Apacheディストリビューションは、世界最大級のデータ基盤でも使われている本番品質のソフトウェアです。商用プラットフォームではなく素のKafkaを使う場合に変わるのは、問題が起きたときに誰に連絡するかです。そして、まさにその空白を埋めるのが独立系の商用サポートです。

オープンソースのKafkaに対する商用サポートには、実際に何が含まれるのか

確立されたエンタープライズ向けメッセージングサポートの手法をそのまま手本にした、包括的なオープンソースのKafkaサポートモデルには、一般に次のものが含まれます。

  • P1/P2インシデントのエスカレーション。重大な本番障害と、緊急度の低い運用上の質問とで対応のティアを分け、汎用的なチケットキューではなく明確なエスカレーションパスを用意します。
  • NおよびN-1バージョンの互換性サポート。現在のバージョンと、その直前のメジャーバージョンをカバーするため、サポート期間内に留まるためだけに緊急のアップグレードを強いられることがありません。
  • デプロイのヘルスチェック。クラスターの設定がベストプラクティスに沿っているかを体系的にレビューし、インシデントにつながる前に問題を発見します。
  • アーキテクチャの助言。事後対応の障害修理だけでなく、クラスターのサイジング、トピック/パーティションの設計、レプリケーション戦略、トポロジーの判断について、KafkaのSMEに相談できます。
  • ダウンタイムをほぼゼロに抑えるローリングパッチ適用。クラスター全体のメンテナンス時間帯ではなく、ローリングアップグレードを前提にしたパッチ適用の手法で、日常的なセキュリティパッチやバグ修正の適用中も継続的な可用性を目指します。
  • 柔軟なパッチ提供形式。TAR.GZバンドルのような標準的なパッケージ形式に加え、場合によってはピンポイントの修正向けにJAR単位のパッチも提供します。自社のデプロイ自動化に合わせて、パッチの適用方法を柔軟に選べます。

このモデルは、確立されたエンタープライズサポートの手法を踏襲しています。P1/P2のエスカレーションとアーキテクチャの助言、NおよびN-1バージョンにわたる互換性、デプロイを検証するヘルスチェック、そしてローリングパッチ適用とセキュリティパッチの緊急対応によって、ダウンタイムをほぼゼロに抑えることを目指すサポートです。

こうしたサポートを実際に提供するのは、どのようなチームか

たまたまKafkaも扱う汎用的なインフラエンジニアではなく、Kafka専任のSMEを擁するサポートプロバイダーを選んでください。ある実際のエンタープライズ向けKafkaサポートの契約では、Kafka専任の専門家を幅広いエンジニアリングチームが支える体制が示されており、相応の本番規模でKafkaを運用する大手エンタープライズ顧客での直接の経験がありました。

この違いは運用上重要です。Kafkaの障害モード(コントローラー/ブローカーの競合、ISRの縮小、コンシューマーグループのリバランスの嵐、レプリケーション遅延)に対処するには、kafka-topics.shのCLIに慣れているだけでなく、さまざまな本番トポロジーを見てきた経験から培われるパターン認識が必要だからです。

Confluent、Redpanda、マネージドサービスに移行しなくてもサポートを受けられるか

はい。素のApache Kafkaに対する独立系の商用サポートでは、プラットフォームの移行は不要です。これはとくに、次のような組織にとって価値があります。

  • プラットフォームのロックインを避けるために、意図的にApacheディストリビューションを選んでいる
  • マネージドサービス(MSK、Confluent Cloud)がアーキテクチャ上適さない、オンプレミスやセルフマネージドのクラウド環境でKafkaを運用している
  • 特定のベンダーのリリースサイクルや機能セットに縛られず、任意のKafkaバージョンと構成で自由に運用したい
  • 単にまだプラットフォームを決めておらず、検討している間の運用サポートがほしい

この種の契約を検討していたある組織が、サポートに求めていたのはまさにこれでした。既存の素のKafka環境をそのまま運用し続けながら、24/7の運用サポートと専門家の助言を受け、プラットフォーム移行の判断は、具体的なビジネス上の必要性で実際に正当化されるまで先送りにする、というものです。

オープンソースKafkaのサポート料金は、Confluentやマネージドサービスと比べてどうか

構造的には、独立系のオープンソースKafkaサポートは一般に、ブローカー単位やデータのスループットに基づくライセンスモデルではなく、サポートのティアとカバー範囲(応答時間のSLA、チケット数、コンサルティングの利用可否)を軸に価格が設定されます。一部の商用プラットフォームのライセンスモデルのようにサポート費用がクラスターのデータ量に直接連動しないため、Kafkaのワークロードが変動する組織や成長中の組織にとっては、費用を予測しやすい傾向があります。

ConfluentのSchema RegistryやksqlDBといった特定のプラットフォーム機能ではなく、主にサポート体制を目的としてConfluentやマネージドクラウドのKafkaサービスを検討しているなら、プラットフォームの移行を決める前に、既存のオープンソース環境に対する独立系サポートの見積もりを代替案として取っておく価値があります。

プランに応じた15分からの対応目標。専任のシニアエンジニアが担当。

お問い合わせ

継続的な契約ではなく、いま起きている本番の問題だけを助けてほしい場合は

独立系を含むほとんどのKafkaサポートプロバイダーは、入り口として範囲限定のアセスメントを提供しています。長期的なサポート契約を最初から求めることなく、特定の問題または全般的なヘルスチェックに焦点を当てた、期間固定(一般的には2〜3週間)のレビューです。

継続的な関係を結ぶ前に相性を確かめる方法として、これは理にかなっています。実際の本番の問題(繰り返し発生するプロデューサータイムアウト、リバランスの嵐、原因不明のスループットの頭打ちなど)を持ち込んで診断と解決をしてもらい、その対応の質を評価してから、継続的なサポートが自社にとって意味があるかを判断すればよいのです。

自社のKafka環境は、商用サポートを受けるには小さすぎる、あるいは特殊すぎるか

通常はそんなことはありません。商用のKafkaサポート契約の対象は、特定のワークロード(アラーム/イベントのパイプラインやトランザクション処理など)を支える単一クラスターのデプロイから、大規模なマルチクラスターのエンタープライズ環境まで幅広くあります。決め手となるのはたいてい、クラスターの絶対的な規模ではなく、Kafkaが自社の業務にとってビジネス上重要かどうかです。

Kafkaがクリティカルパス上にあり、計画外の停止や性能低下が実際にビジネスに影響するなら、クラスターが3ノードであれ30ノードであれ、独立系の専門家によるサポートを検討する価値があるというサインです。

Kafkaサポートの選択肢を検討する

オープンソースのKafkaを運用していて、自社の環境に商用サポートを導入すると実際にどうなるのかを知りたいとお考えですか?選択肢を検討中であれば、AceMQはプラットフォームの移行を必要としない独立系のKafkaサポートを提供しています。カバー範囲や自社に合うかどうかについて、率直にお話ししましょう。AceMQのエンジニアにご相談ください。

この記事の背景にある課題が、進行中のインシデントではなく、パーティション戦略、サイジング、セキュリティ設計、移行といったアーキテクチャの問題であれば、AceMQのKafkaコンサルティングが専任のシニアエンジニアを担当に付けます。

本記事は、Kafkaサポート購入ガイドの全6ステップのうち2番目です。このガイドでは、契約がカバーする範囲から、署名前に決めておくべき問いまで、判断の流れに沿って解説しています。

よくある質問

Confluentを使わず、素のオープンソースKafkaを本番環境で運用している企業は実際にあるのですか?

はい、相応の規模でも運用されています。Confluent Platformやマネージドクラウドサービスではなく、コミュニティ版のApacheディストリビューションを運用している組織は珍しくなく、何か障害が起きたときに誰に連絡すればよいのかという空白を埋めるために、独立系の商用サポートが存在しているほどです。

オープンソースのKafkaに対する商用サポートには、実際に何が含まれますか?

包括的なモデルでは一般に、P1/P2インシデントのエスカレーション、NおよびN-1バージョンの互換性、デプロイのヘルスチェック、クラスターのサイジングとトポロジーに関するアーキテクチャの助言、ダウンタイムをほぼゼロに抑えるローリングパッチ適用に加え、TAR.GZバンドルやJAR単位のパッチといった柔軟なパッチ提供形式が含まれます。

こうしたサポートを実際に提供するのは、どのようなチームですか?

たまたまKafkaも扱う汎用的なインフラエンジニアではなく、Kafka専任のSMEがいるかを確認してください。Kafkaの障害モードに対処するには、CLIに慣れているだけでなく、数多くの本番トポロジーを見てきた経験から培われるパターン認識が必要です。

Confluent、Redpanda、マネージドサービスに移行しなくてもサポートを受けられますか?

はい。素のApache Kafkaに対する独立系の商用サポートでは、プラットフォームの移行は不要です。これは、ベンダーロックインを避けたい組織、オンプレミスやセルフマネージドで運用している組織、あるいはまだプラットフォームを決めかねている組織にとって重要です。

オープンソースKafkaのサポート料金は、Confluentやマネージドサービスと比べてどうですか?

独立系のサポートは一般に、ブローカー単位やスループットに基づくライセンスモデルではなく、サポートのティアとカバー範囲(応答時間のSLA、チケット数、コンサルティングの利用可否)を軸に価格が設定されます。そのため、変動するワークロードや成長中のワークロードでは費用を予測しやすい傾向があります。

継続的な契約ではなく、いま起きている本番の問題だけを助けてほしい場合は?

独立系を含むほとんどのKafkaサポートプロバイダーは、継続契約の前段階として、負担の少ない入り口となる範囲限定のアセスメント(一般的には2〜3週間の期間固定のレビュー)を提供しています。

自社のKafka環境は、商用サポートを受けるには小さすぎる、あるいは特殊すぎるでしょうか?

通常はそんなことはありません。契約の対象は、単一クラスターのデプロイから大規模なマルチクラスター環境まで幅広く、決め手となるのはたいていクラスターの規模ではなく、Kafkaがビジネスにとって重要かどうかです。

素のオープンソースKafkaは、本番環境でKafkaを運用する安定した一般的な方法です。商用プラットフォームを使わない場合に変わるのは、障害が起きたときに誰に連絡するかということだけです。

無料相談

お客様のKafka クラスターを専門家がチェックします

本番環境のインシデント対応、移行の計画、アーキテクチャのセカンドオピニオンなど、どのようなご相談にもAceMQのチームが対応します。売り込みは一切なく、ご質問に的確にお答えします。

メールで問い合わせる