1. Home
2. Platform
3. 管理
4. Kafka の運用

Self-Balancing Clusters

• Self-Balancing の概要
  • Self-Balancing Clusters とは
  • Self-Balancing により Kafka の運用を簡素化する方法
  • Self-Balancing と Auto Data Balancer
  • Self-Balancing Clusters のしくみ
    • Self-Balancing Cluster のアーキテクチャ
    • Self-Balancing Clusters の有効化
    • クラスターの "バランス" およびバランス調整をトリガーするもの
    • リードブローカー（コントローラー）が削除される、または見つからない場合の動作
    • ブローカーが Cruise Control を活用する方法
    • Self-Balancing で作成および使用される内部トピックの種類
    • 制限
  • 構成とモニタリング
    • バランサーのステータスを取得する
    • Control Center の使用
    • Kafka サーバーのプロパティとコマンド
    • バランス調整のモニタリング用メトリクス
  • レプリカ配置とラック構成
    • ラック
    • レプリカ配置とマルチリージョンクラスター
    • キャパシティ
    • 分散
    • バランス調整の失敗のデバッグ
  • セキュリティに関する考慮事項
  • トラブルシューティング
    • Self-Balancing オプションが Control Center に表示されない
    • ブローカーのメトリクスが Control Center に表示されない
    • Control Center に反映されるコンシューマーラグ
    • Self-Balancing の初期化中にブローカーの削除の試行に失敗する
    • ブローカーの削除が、オフラインのパーティションのために完了できない
    • 除外トピックが多すぎるため、Self-Balancing で問題が発生する
  • おすすめの関連情報
• クイックスタートデモ（Docker）
  • デモについて
  • セットアップと対象範囲
  • 各サービスの起動
  • デモシナリオの実行
    • 不均等な負荷
    • 拡張
    • 縮小
    • ブローカーのエラー
  • 強制停止
  • おすすめの関連情報
• チュートリアル: ブローカーの追加と削除
  • 前提条件
  • Kafka ブローカーの構成
    • Control Center 用の Metrics Reporter の有効化
    • Self-Balancing のレプリケーション係数の構成
    • Self-Balancing が有効であることの検証
    • ファイルの保存
    • 5 つのブローカーがあるクラスターの基本構成の作成
    • REST エンドポイントとアドバタイズされたリスナーを使用する Control Center の構成
  • Confluent Platform の起動、トピックの作成とテストデータの生成
  • コマンドラインの使用
    • ブローカーのステータスとトピックデータの検証
    • ブローカーの削除
    • ブローカーの追加（再起動）
  • Control Center の使用
    • ブローカーのステータスとトピックデータの検証
    • ブローカーの削除
    • ブローカーの追加（再起動）
  • シャットダウンとクリーンアップのタスク
  • おすすめの関連情報
• 構成オプションとコマンド
  • ブローカーでの Self-Balancing の構成
    • confluent.balancer.enable
    • confluent.balancer.heal.uneven.load.trigger
    • confluent.balancer.heal.broker.failure.threshold.ms
    • confluent.balancer.throttle.bytes.per.second
    • confluent.balancer.disk.max.load
    • confluent.balancer.disk.max.replicas
    • confluent.balancer.exclude.topic.names
    • confluent.balancer.exclude.topic.prefixes
    • confluent.balancer.topic.replication.factor
  • Self-Balancing の内部トピック
  • Control Center の必須構成
    • Control Center のプロパティファイルでの REST エンドポイントの構成
    • Kafka ブローカーでの REST エンドポイントの認証の構成（セキュアなセットアップ）
  • サンプル: ブローカー構成のオンザフライでのアップデート
    • Self-Balancing の有効化または無効化
    • バランス調整のトリガー条件の設定
    • カスタムスロットルの設定または削除
  • kafka-rebalance-cluster を使用したバランサーのモニタリング
    • バランサーのステータスを取得する
    • ワークロード最適化ステータスを取得する（AnyUnevenLoad）
  • kafka-remove-brokers
    • フラグ
    • 例
    • ブローカーの削除のフェーズ
    • Self-Balancing の初期化
    • ブローカー削除タスクの優先度
  • おすすめの関連情報
• パフォーマンスとリソースの使用状況
  • ブローカーの追加よる、パーティションが多数ある小さなクラスターの拡張
    • テストの説明
    • クラスターの構成
    • パフォーマンスの結果
  • 多くのパーティションがある大規模クラスターのスケーラビリティテスト
    • テストの説明
    • クラスターの構成
    • パフォーマンスの結果
  • コントローラーの定期的な再生
    • テストの説明
    • クラスターの構成
    • パフォーマンスの結果