TiDB Binlogクラスタの操作

このドキュメントでは、次の TiDB Binlogクラスター操作について説明します。

  • PumpとDrainerノードの状態
  • PumpまたはDrainerプロセスの開始または終了
  • binlogctl ツールを使用するか、TiDB で SQL 操作を直接実行して、TiDB Binlogクラスターを管理する

PumpまたはDrainerの状態

PumpまたはDrainerの状態の説明:

  • online : 通常稼働
  • pausing : 一時停止中
  • paused : 停止中
  • closing : オフライン プロセス中
  • offline : オフラインです

ノート:

PumpまたはDrainerノードの状態情報は、サービス自体によって維持され、配置Driver(PD) に定期的に更新されます。

PumpまたはDrainerプロセスの開始と終了

Pump

  • 開始中: 開始すると、 PumpノードはすべてのDrainerノードにonline状態で通知します。通知が成功した場合、 Pumpノードはその状態をonlineに設定します。それ以外の場合、 Pumpノードはエラーを報告し、状態をpausedに設定してプロセスを終了します。
  • 終了: Pumpノードは、プロセスが正常に終了する前にpausedまたはofflineの状態に入ります。プロセスが異常終了した場合 ( kill -9コマンド、プロセスpanic、クラッシュが原因)、ノードはまだonline状態です。
    • 一時停止: killコマンド ( kill -9ではなく) を使用するか、 Ctrl + Cを押すか、binlogctl ツールでpause-pumpコマンドを使用して、 Pumpプロセスを一時停止できます。一時停止命令を受け取った後、 Pumpノードはその状態をpausingに設定し、binlog 書き込み要求の受信を停止し、binlog データのDrainerノードへの提供を停止します。すべてのスレッドが安全に終了した後、 Pumpノードはその状態をpausedに更新し、プロセスを終了します。
    • オフライン:Pumpプロセスを閉じるには、binlogctl ツールでoffline-pumpコマンドを使用する必要があります。オフライン命令を受信した後、 Pumpノードはその状態をclosingに設定し、binlog 書き込み要求の受信を停止します。 Pumpノードは、すべての binlog データがDrainerノードによって消費されるまで、binlog をDrainerノードに提供し続けます。次に、 Pumpノードは状態をofflineに設定し、プロセスを終了します。

Drainer

  • 開始: 開始すると、 Drainerノードはその状態をonlineに設定し、 offline状態にないすべてのPumpノードから binlog をプルしようとします。 binlog の取得に失敗した場合は、試行を続けます。
  • 終了: Drainerノードは、プロセスが正常に終了する前にpausedまたはofflineの状態に入ります。プロセスが異常終了した場合 ( kill -9 、プロセスpanic、クラッシュが原因)、 Drainerノードはまだonline状態です。
    • 一時停止: killコマンド ( kill -9ではありません) を使用するか、 Ctrl + Cを押すか、binlogctl ツールでpause-drainerコマンドを使用して、 Drainerプロセスを一時停止できます。一時停止命令を受け取った後、 Drainerノードはその状態をpausingに設定し、 Pumpノードからのバイナリログのプルを停止します。すべてのスレッドが安全に終了した後、 Drainerノードはその状態をpausedに設定し、プロセスを終了します。
    • オフライン: Drainerプロセスを閉じるには、binlogctl ツールでoffline-drainerコマンドを使用する必要があります。オフライン命令を受け取った後、 Drainerノードはその状態をclosingに設定し、 Pumpノードからのバイナリログのプルを停止します。すべてのスレッドが安全に終了した後、 Drainerノードはその状態をofflineに更新し、プロセスを終了します。

Drainerの状態を一時停止、終了、確認、および変更する方法については、 binlogctl ガイドを参照してください。

Drainerを使用してPump / binlogctlを管理します

binlogctlは、次の機能を備えた TiDB Binlogの操作ツールです。

  • PumpやDrainerの状態を確認する
  • PumpまたはDrainerの一時停止または終了
  • PumpやDrainerの異常時の対応

binlogctlの詳しい使い方はbinlogctl の概要を参照。

SQL ステートメントを使用してPumpまたはDrainerを管理する

binlog 関連の状態を表示または変更するには、TiDB で対応する SQL ステートメントを実行します。

  • binlog が有効になっているかどうかを確認します。

    show variables like "log_bin";
    +---------------+-------+ | Variable_name | Value | +---------------+-------+ | log_bin | 0 | +---------------+-------+

    値が0の場合、binlog が有効になります。値が1の場合、binlog は無効になります。

  • すべてのPumpノードまたはDrainerノードのステータスを確認します。

    show pump status;
    +--------|----------------|--------|--------------------|---------------------| | NodeID | Address | State | Max_Commit_Ts | Update_Time | +--------|----------------|--------|--------------------|---------------------| | pump1 | 127.0.0.1:8250 | Online | 408553768673342237 | 2019-05-01 00:00:01 | +--------|----------------|--------|--------------------|---------------------| | pump2 | 127.0.0.2:8250 | Online | 408553768673342335 | 2019-05-01 00:00:02 | +--------|----------------|--------|--------------------|---------------------|
    show drainer status;
    +----------|----------------|--------|--------------------|---------------------| | NodeID | Address | State | Max_Commit_Ts | Update_Time | +----------|----------------|--------|--------------------|---------------------| | drainer1 | 127.0.0.3:8249 | Online | 408553768673342532 | 2019-05-01 00:00:03 | +----------|----------------|--------|--------------------|---------------------| | drainer2 | 127.0.0.4:8249 | Online | 408553768673345531 | 2019-05-01 00:00:04 | +----------|----------------|--------|--------------------|---------------------|
  • 異常な状況でPumpまたはDrainerノードの状態を変更する

    change pump to node_state ='paused' for node_id 'pump1';
    Query OK, 0 rows affected (0.01 sec)
    change drainer to node_state ='paused' for node_id 'drainer1';
    Query OK, 0 rows affected (0.01 sec)

    上記の SQL ステートメントを実行すると、binlogctl のupdate-pumpつまたはupdate-drainerのコマンドと同じように機能します。上記の SQL ステートメントは、 PumpまたはDrainerノードが異常な状態にある場合にのみ使用してください。

ノート:

  • TiDB v2.1.7 以降のバージョンで binlog が有効になっていて、 PumpまたはDrainerの実行ステータスがサポートされているかどうかを確認します。
  • PumpまたはDrainerのステータスの変更は、TiDB v3.0.0-rc.1 以降のバージョンでサポートされています。この機能は、PD に保存されているPumpまたはDrainerノードのステータスの変更のみをサポートします。ノードを一時停止または閉じるには、 binlogctlツールを使用します。