Redis がブロックされる状況は何ですか?-Redis-php.cn

Redis がブロックされる状況は何ですか?

王林

リリース： 2023-05-26 18:16:23

転載

1544 人が閲覧しました

不適切なコマンドを使用すると、クライアントブロックが発生します:

これらのコマンド複雑さは O(n) で、場合によってはテーブル全体がスキャンされることがあります。n が増加すると、時間の複雑さが増加し、クライアントがブロックされます。

Redis が RDB スナップショットを取得すると、システム関数 fork() が呼び出され、一時ファイルとトリガー条件の書き込みを完了する子スレッドが作成されることは誰もが知っています。設定ファイルに設定を保存します。

設定に達すると、bgsave コマンドがトリガーされてスナップショットが作成されます。このメソッドはメインスレッドをブロックしませんが、save コマンドを手動で実行するとメインスレッドで実行されます。ブロッキングメインスレッド。

大量の書き込み操作があり、同期永続性が設定されている場合、Redis が AOF ログを直接記録する場合

appendfsync always

ログイン後にコピー

つまり、データが保存されるたびに、変更が発生すると、すぐにディスクに記録されますが、ディスクへの書き込みには時間がかかり、パフォーマンスも低下するため、メインスレッドがブロックされる場合があります。

fork はファイルを書き換えるためのサブスレッドを作成します。BGREWRITEAOF コマンドを実行すると、Redis サーバーは AOF を維持します。書き換えバッファ。子スレッドによる新しい AOF ファイルの作成中にサーバーによって実行されたすべての書き込みコマンドが記録されます。
子スレッドが新しい AOF ファイルの作成作業を完了すると、サーバーは書き換えバッファ内のすべての内容を新しい AOF ファイルの末尾に追加します。 AOF ファイルの保存データベースの状態は、既存のデータベースの状態と一致します。
最後に、サーバーは古い AOF ファイルを新しい AOF ファイルに置き換えて、AOF ファイルの書き換え操作を完了します。

ステップ 2 でブロッキングが発生します。バッファ内の新しいデータを新しいファイルに書き込むときに、ブロッキングが発生します。

AOF のロギングは、リレーショナルデータベースのようにコマンド実行前にログを記録するのではなく（障害回復を容易にするため）、コマンドを実行してから記録する方法を使用します。ログ。

その理由は、AOF ログではコマンドの構文チェックが実行されないため、追加のチェックオーバーヘッドが軽減され、現在のコマンドの実行はブロックされませんが、次の操作がブロックされる可能性があるためです。

これは、AOF ログもメインスレッドで実行されるためです . ログファイルをディスクに書き込むときにディスク書き込み圧力が高いと、ディスク書き込みが非常に遅くなります。以降の操作が実行できなくなります。

大きなキーとは、キーの値が非常に大きいことを意味するのではなく、キーに対応する値が非常に大きいことを意味します。

大きなキーによって引き起こされるブロックの問題は次のとおりです:

クライアントタイムアウトのブロック: Redis 実行コマンドはシングルスレッドであるため、実行にはより時間がかかります。大きなキーを操作すると、Redis がブロックされ、クライアントの観点からは、長い間応答がなくなることになります。
ネットワーク輻輳の原因: 大きなキーを取得するたびに、生成されるネットワークトラフィックが大きくなります。キーのサイズが 1 MB で、1 秒あたりのアクセス数が 1000 の場合、この場合、1 秒あたり 1000MB のトラフィックが生成され、これは通常のギガビットネットワークカードを搭載したサーバーにとっては致命的です。
ワーカースレッドのブロック: del を使用して大きなキーを削除すると、ワーカースレッドがブロックされ、後続のコマンドを処理できなくなります。

Redis に付属する --bigkeys パラメーターを使用してビッグキーを見つける場合は、次のオプションを選択するのが最善です。スレーブノードこのコマンドをマスターノードで実行すると、マスターノードが ブロックされるためです。

redis-rdb-tools: RedisのRDBスナップショットファイルを分析するためのPython言語で書かれたツール
このツールは rdb_bigkeys と呼ばれ、Go 言語で書かれており、Redis の RDB スナップショットファイルを分析するために使用でき、より高いパフォーマンスを備えています。

大きなキーの削除

削除操作の本質は、キーと値のペアが占有しているメモリ領域を解放することです。

メモリの解放は最初のステップにすぎません。メモリ空間をより効率的に管理するために、アプリケーションがメモリを解放するとき、

オペレーティングシステムは、解放されたメモリブロックを空きメモリブロックのリンクリストに挿入する必要があります。 、その後の管理と再配布用。このプロセス自体にはある程度の時間がかかり、現在メモリを解放しているアプリケーションを ブロックします。

そのため、一度に大量のメモリが解放されると、空きメモリブロックのリンクリストの動作時間が増加し、それに応じて Redis

メインスレッドのブロックが発生します。メインスレッドがブロックされると、他のすべてのリクエストがタイムアウトになる可能性があり、タイムアウトが増えると Redis 接続が枯渇し、さまざまな例外が発生します。