目次
 memcache实现分布式锁
Zookeeper实现分布式缓存
次の表に要約します。 Zookeeper と Redis 分散ロックの長所と短所:
ホームページ データベース Redis Redis で分散ロックを実装するときは何に注意する必要がありますか? 【注意事項まとめ】

Redis で分散ロックを実装するときは何に注意する必要がありますか? 【注意事項まとめ】

Mar 04, 2022 pm 04:21 PM
redis 分散ロック

Redis で分散ロックを実装する場合、何に注意する必要がありますか?以下の記事では、Redis を分散ロックとして使用する際の注意点をまとめてお伝えしますので、ご参考になれば幸いです。

Redis で分散ロックを実装するときは何に注意する必要がありますか? 【注意事項まとめ】

Redis は分散ロックを実装します

分散ロックを読んでいるときに最近ある記事を目にしました特に良い記事です私自身の理解のために処理しました:

Redis 分散ロック実装の 3 つのコア要素:

1. ロック

最も簡単な方法は、setnx を使用することです指示。キーはロックの一意の識別子で、ビジネスに応じて名前が付けられます。値は現在のスレッドのスレッド ID です。 [関連する推奨事項: Redis ビデオ チュートリアル ]

たとえば、製品のフラッシュ セール アクティビティをロックする場合は、キーに「lock_sale_ID」という名前を付けることができます。また、値は何に設定されていますか?一時的に 1 に設定できます。ロックの疑似コードは次のとおりです。

setnx(key, 1)スレッドが setnx を実行して 1 を返した場合、キーが元々存在しなかったことを意味します。ロックの場合、他のスレッドが setnx を実行して 0 を返した場合、キーはすでに存在し、スレッドはロックの取得に失敗したことを意味します。

2. ロック解除

ロックしたい場合は、ロックを解除する必要があります。ロックを取得したスレッドがタスクを完了したら、他のスレッドが参加できるようにロックを解放する必要があります。ロックを解除する最も簡単な方法は、del 命令 # を実行することです。疑似コードは次のとおりです:

del(key)Afterロックを解放すると、他のスレッドは引き続き setnx コマンドを実行してロックを取得できます。

3. ロック タイムアウト

ロック タイムアウトとは何を意味しますか?ロックを取得したスレッドがタスクの実行中に停止し、明示的にロックを解放する時間がなかった場合、リソースは永久にロックされ、他のスレッドは二度とアクセスできなくなります。

したがって、setnx のキーにはタイムアウト期間を設定して、明示的に解放されなくても、一定時間が経過するとロックが自動的に解放されるようにする必要があります。 setnx はタイムアウト パラメーターをサポートしていないため、追加の命令が必要です。疑似コードは次のとおりです:

expire(key, 30)まとめると、3 番目のステップになります。分散ロック実装の最初のバージョンの疑似コードは次のとおりです:

if(setnx(key,1) == 1){
    expire(key,30)
    try {
        do something ......
    }catch()  {  }  finally {
       del(key)
    }

}
ログイン後にコピー

上記の疑似コードには 3 つの致命的な問題があるためです:

1. setnx と期限切れの非アトミック性

極端なシナリオを想像してください。スレッドが setnx を実行すると、ロックの取得に成功します。

setnx は実行に成功し、そして期限切れコマンドを実行する前に、ノード 1 Duang がハングアップします。

if(setnx(key,1) == 1){  //此处挂掉了.....
    expire(key,30)
    try {
        do something ......
    }catch()
  {
  }
  finally {
       del(key)
    }
 
}
ログイン後にコピー

この方法では、ロックには有効期限が設定されておらず、「不滅」になり、他のスレッドはロックを取得できなくなります。

どうすれば解決できますか? setnx 命令自体は、受信タイムアウト期間をサポートしていません。Redis 2.6.12 以降では、set 命令にオプションのパラメーターが追加されます。疑似コードは次のとおりです: set (key, 1, 30, NX), setnx 命令 を置き換えることができます。

#2. タイムアウト後に del を使用すると、他のスレッドのロックが誤って削除されてしまいます

##別の極端なシナリオでは、スレッドがロックの取得に成功し、タイムアウトが 30 秒に設定されているとします。

何らかの理由でスレッド A の実行が非常に遅く、30 秒経過しても実行が終了しない場合、ロックは有効期限が切れると自動的に解放され、スレッド B がロックを取得します。

その後、スレッド A がタスクを完了し、スレッド A は del 命令を実行してロックを解放します。ただし、この時点ではスレッド B の実行は完了していません。

スレッド A は、スレッド B によって追加されたロックを実際に削除します。

この状況を回避するにはどうすればよいですか? del がロックを解放する前に、現在のロックが自分で追加したロックかどうかを確認することができます。

具体的な実装としては、ロック時の値として現在のスレッドIDを使用し、キーに対応する値が自分のスレッドのIDであることを確認してから削除することができます。

加锁:
String threadId = Thread.currentThread().getId()
set(key,threadId ,30,NX)
doSomething.....
 
解锁:
if(threadId .equals(redisClient.get(key))){
    del(key)
}
ログイン後にコピー

ただし、これを行うと、

if 判定とロック解除が 2 つの独立した操作であり、アトミックではないという新たな問題が発生します。 私たちは皆、究極を追求するプログラマーであるため、この部分は Lua スクリプトを使用して実装する必要があります:

String luaScript = 'if redis .call('get', KEYS[1]) == ARGV[1] then return redis.call('del', KEYS[1]) else return 0 end' ;

##redisClient.eval(luaScript , Collections.singletonList(key) , Collections.singletonList(threadId));このように、検証と削除のプロセスはアトミックな操作です。

3.

同時実行の可能性

还是刚才第二点所描述的场景,虽然我们避免了线程A误删掉key的情况,但是同一时间有A,B两个线程在访问代码块,仍然是不完美的。

怎么办呢?我们可以让获得锁的线程开启一个守护线程,用来给快要过期的锁“续航”

当过去了29秒,线程A还没执行完,这时候守护线程会执行expire指令,为这把锁“续命”20秒。守护线程从第29秒开始执行,每20秒执行一次。

当线程A执行完任务,会显式关掉守护线程。

另一种情况,如果节点1 忽然断电,由于线程A和守护线程在同一个进程,守护线程也会停下。这把锁到了超时的时候,没人给它续命,也就自动释放了。

memcache实现分布式锁

首页top 10, 由数据库加载到memcache缓存n分钟
微博中名人的content cache, 一旦不存在会大量请求不能命中并加载数据库
需要执行多个IO操作生成的数据存在cache中, 比如查询db多次
问题
在大并发的场合,当cache失效时,大量并发同时取不到cache,会同一瞬间去访问db并回设cache,可能会给系统带来潜在的超负荷风险。我们曾经在线上系统出现过类似故障。

解决方法

if (memcache.get(key) == null) {
// 3 min timeout to avoid mutex holder crash
if (memcache.add(key_mutex, 3 * 60 * 1000) == true) {
value = db.get(key);
memcache.set(key, value);
memcache.delete(key_mutex);
} else {
 
sleep(50);
retry();
}
}
ログイン後にコピー

在load db之前先add一个mutex key, mutex key add成功之后再去做加载db, 如果add失败则sleep之后重试读取原cache数据。为了防止死锁,mutex key也需要设置过期时间。伪代码如下

Zookeeper实现分布式缓存

Zookeeper的数据存储结构就像一棵树,这棵树由节点组成,这种节点叫做Znode

Znode分为四种类型:

  • 1.持久节点 (PERSISTENT)

默认的节点类型。创建节点的客户端与zookeeper断开连接后,该节点依旧存在 。

  • 2.持久节点顺序节点(PERSISTENT_SEQUENTIAL)

所谓顺序节点,就是在创建节点时,Zookeeper根据创建的时间顺序给该节点名称进行编号:

  • 3.临时节点(EPHEMERAL)

和持久节点相反,当创建节点的客户端与zookeeper断开连接后,临时节点会被删除:

  • 4.临时顺序节点(EPHEMERAL_SEQUENTIAL)

顾名思义,临时顺序节点结合和临时节点和顺序节点的特点:在创建节点时,Zookeeper根据创建的时间顺序给该节点名称进行编号;当创建节点的客户端与zookeeper断开连接后,临时节点会被删除。

Zookeeper分布式锁恰恰应用了临时顺序节点。具体如何实现呢?让我们来看一看详细步骤:

  • 获取锁

首先,在Zookeeper当中创建一个持久节点ParentLock。当第一个客户端想要获得锁时,需要在ParentLock这个节点下面创建一个临时顺序节点 Lock1

之后,Client1查找ParentLock下面所有的临时顺序节点并排序,判断自己所创建的节点Lock1是不是顺序最靠前的一个。如果是第一个节点,则成功获得锁。

这时候,如果再有一个客户端 Client2 前来获取锁,则在ParentLock下载再创建一个临时顺序节点Lock2

Client2查找ParentLock下面所有的临时顺序节点并排序,判断自己所创建的节点Lock2是不是顺序最靠前的一个,结果发现节点Lock2并不是最小的。

したがって、Client2 は、Lock1 を監視するために、Lock1 よりも上位にのみランク付けされたノードに Watcher を登録します。ノードが存在するかどうか。 これは、Client2 がロックの取得に失敗し、待機状態に入ったことを意味します。

この時点で、別のクライアント Client3 がロックを取得しに来た場合は、ParentLock シーケンスで一時的なロックをダウンロードして作成します。ノードロック3

Client3ParentLock の下にあるすべての一時シーケンス ノードを見つけて並べ替え、作成したノード Lock3# を決定します。 ## は順序の最初のものですか? ノード Lock3 が最小ではないことがわかります。

したがって、

Client3 は、Lock2 を監視するために、それよりも上位にのみランク付けされているノード Lock2Watcher を登録します。ノードが存在するかどうか。これは、Client3 もロックの取得に失敗し、待機状態に入ったことを意味します。

このようにして、

Client1 がロックを取得し、Client2Lock1 Client3 を監視します。 Lock2 を聴きました。これは、Java の ReentrantLock が依存する AQS (AbstractQueuedSynchronizer) とよく似た、待機キューを形成するだけです。

#ロックの解放
  • ロックを解放するには 2 つの状況があります:

1. タスクが完了すると、クライアントはリリースを表示します。

タスクが完了すると、

Client1

は削除ノード Lock1 を呼び出す指示を表示します。 。

2. タスクの実行中にクライアントがクラッシュします

ロックを取得しました

Client1

タスクの実行中に、Duang の A がクラッシュした場合Zookeeper サーバーを切断します。一時ノードの特性に従って、関連ノード Lock1 は自動的に削除されます。

Client2

Lock1 の存在状況を監視しているため、Lock1 ノードが削除されると、 ,Client2 にはすぐに通知されます。このとき、Client2 は、ParentLock 配下のすべてのノードを再度クエリして、自身が作成したノード Lock2 が現在の最小ノードであるかどうかを確認します。それが最小の場合、Client2 が自然にロックを取得します。

同様に、タスクの完了またはノードのクラッシュにより

Client2

がノード Lock2 も削除する場合、Cient3 通知されます。

最終的に、

Client3

はロックを正常に取得しました。

Zookeeper と Redis 分散ロックの比較

次の表に要約します。 Zookeeper と Redis 分散ロックの長所と短所:

##プログラミング関連の知識の詳細については、次を参照してください:プログラミングの概要

! !

以上がRedis で分散ロックを実装するときは何に注意する必要がありますか? 【注意事項まとめ】の詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。

このウェブサイトの声明
この記事の内容はネチズンが自主的に寄稿したものであり、著作権は原著者に帰属します。このサイトは、それに相当する法的責任を負いません。盗作または侵害の疑いのあるコンテンツを見つけた場合は、admin@php.cn までご連絡ください。

ホットAIツール

Undresser.AI Undress

Undresser.AI Undress

リアルなヌード写真を作成する AI 搭載アプリ

AI Clothes Remover

AI Clothes Remover

写真から衣服を削除するオンライン AI ツール。

Undress AI Tool

Undress AI Tool

脱衣画像を無料で

Clothoff.io

Clothoff.io

AI衣類リムーバー

AI Hentai Generator

AI Hentai Generator

AIヘンタイを無料で生成します。

ホットツール

メモ帳++7.3.1

メモ帳++7.3.1

使いやすく無料のコードエディター

SublimeText3 中国語版

SublimeText3 中国語版

中国語版、とても使いやすい

ゼンドスタジオ 13.0.1

ゼンドスタジオ 13.0.1

強力な PHP 統合開発環境

ドリームウィーバー CS6

ドリームウィーバー CS6

ビジュアル Web 開発ツール

SublimeText3 Mac版

SublimeText3 Mac版

神レベルのコード編集ソフト(SublimeText3)

Redisクラスターモードの構築方法 Redisクラスターモードの構築方法 Apr 10, 2025 pm 10:15 PM

Redisクラスターモードは、シャードを介してRedisインスタンスを複数のサーバーに展開し、スケーラビリティと可用性を向上させます。構造の手順は次のとおりです。異なるポートで奇妙なRedisインスタンスを作成します。 3つのセンチネルインスタンスを作成し、Redisインスタンスを監視し、フェールオーバーを監視します。 Sentinel構成ファイルを構成し、Redisインスタンス情報とフェールオーバー設定の監視を追加します。 Redisインスタンス構成ファイルを構成し、クラスターモードを有効にし、クラスター情報ファイルパスを指定します。各Redisインスタンスの情報を含むnodes.confファイルを作成します。クラスターを起動し、CREATEコマンドを実行してクラスターを作成し、レプリカの数を指定します。クラスターにログインしてクラスター情報コマンドを実行して、クラスターステータスを確認します。作る

Redisコマンドの使用方法 Redisコマンドの使用方法 Apr 10, 2025 pm 08:45 PM

Redis指令を使用するには、次の手順が必要です。Redisクライアントを開きます。コマンド(動詞キー値)を入力します。必要なパラメーターを提供します(指示ごとに異なります)。 Enterを押してコマンドを実行します。 Redisは、操作の結果を示す応答を返します(通常はOKまたは-ERR)。

単一のスレッドレディスの使用方法 単一のスレッドレディスの使用方法 Apr 10, 2025 pm 07:12 PM

Redisは、単一のスレッドアーキテクチャを使用して、高性能、シンプルさ、一貫性を提供します。 I/Oマルチプレックス、イベントループ、ノンブロッキングI/O、共有メモリを使用して同時性を向上させますが、並行性の制限、単一の障害、および書き込み集約型のワークロードには適していません。

Redisのソースコードを読み取る方法 Redisのソースコードを読み取る方法 Apr 10, 2025 pm 08:27 PM

Redisソースコードを理解する最良の方法は、段階的に進むことです。Redisの基本に精通してください。開始点として特定のモジュールまたは機能を選択します。モジュールまたは機能のエントリポイントから始めて、行ごとにコードを表示します。関数コールチェーンを介してコードを表示します。 Redisが使用する基礎となるデータ構造に精通してください。 Redisが使用するアルゴリズムを特定します。

Redisデータをクリアする方法 Redisデータをクリアする方法 Apr 10, 2025 pm 10:06 PM

Redisデータをクリアする方法:Flushallコマンドを使用して、すべての重要な値をクリアします。 FlushDBコマンドを使用して、現在選択されているデータベースのキー値をクリアします。 [選択]を使用してデータベースを切り替え、FlushDBを使用して複数のデータベースをクリアします。 DELコマンドを使用して、特定のキーを削除します。 Redis-CLIツールを使用してデータをクリアします。

Redisのすべてのキーを表示する方法 Redisのすべてのキーを表示する方法 Apr 10, 2025 pm 07:15 PM

Redisのすべてのキーを表示するには、3つの方法があります。キーコマンドを使用して、指定されたパターンに一致するすべてのキーを返します。スキャンコマンドを使用してキーを繰り返し、キーのセットを返します。情報コマンドを使用して、キーの総数を取得します。

Redisキューの読み方 Redisキューの読み方 Apr 10, 2025 pm 10:12 PM

Redisのキューを読むには、キュー名を取得し、LPOPコマンドを使用して要素を読み、空のキューを処理する必要があります。特定の手順は次のとおりです。キュー名を取得します:「キュー:キュー」などの「キュー:」のプレフィックスで名前を付けます。 LPOPコマンドを使用します。キューのヘッドから要素を排出し、LPOP Queue:My-Queueなどの値を返します。空のキューの処理:キューが空の場合、LPOPはnilを返し、要素を読む前にキューが存在するかどうかを確認できます。

Redisでサーバーを開始する方法 Redisでサーバーを開始する方法 Apr 10, 2025 pm 08:12 PM

Redisサーバーを起動する手順には、以下が含まれます。オペレーティングシステムに従ってRedisをインストールします。 Redis-Server(Linux/Macos)またはRedis-Server.exe(Windows)を介してRedisサービスを開始します。 Redis-Cli ping(Linux/macos)またはRedis-Cli.exePing(Windows)コマンドを使用して、サービスステータスを確認します。 Redis-Cli、Python、node.jsなどのRedisクライアントを使用して、サーバーにアクセスします。

See all articles