Heim > Datenbank > Redis > Hauptteil

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

咔咔
Freigeben: 2020-06-02 10:19:57
Original
1971 Leute haben es durchsucht

Ich glaube, dass viele Freunde bereits die Master-Slave-Replikation konfiguriert haben, aber sie haben kein tiefes Verständnis für den Workflow und die häufigen Probleme der Redis-Master-Slave-Replikation. Kaka verbrachte dieses Mal zwei Tage damit, alle Wissenspunkte zur Redis-Master-Slave-Replikation zusammenzustellen.

Die zur Implementierung dieses Artikels erforderliche Umgebung

centos7.0

redis4.0


1. Was ist Redis-Master-Slave-Replikation?


Master-Slave-Replikation bedeutet, dass es jetzt zwei Redis-Server gibt und die Daten eines Redis mit der anderen Redis-Datenbank synchronisiert werden. Ersterer wird als Master-Knoten bezeichnet, letzterer als Slave-Knoten. Daten können nur in einer Richtung vom Master zum Slave synchronisiert werden.


Aber im tatsächlichen Prozess ist es unmöglich, nur zwei Redis-Server für die Master-Slave-Replikation zu haben, was bedeutet, dass jeder Redis-Server als Master-Knoten (Master) bezeichnet werden kann )


Im folgenden Fall ist unser Slave3 sowohl der Slave-Knoten des Masters als auch der Master-Knoten des Slaves.


Verstehen Sie zunächst dieses Konzept und lesen Sie weiter unten weiter, um weitere Einzelheiten zu erfahren.

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme


2. Warum ist Redis Master-Slave-Replikation erforderlich?


Angenommen, wir haben jetzt einen Redis-Server, der sich in einem eigenständigen Zustand befindet.


Das erste Problem, das in diesem Fall auftritt, ist, dass der Server ausfällt, was direkt zu Datenverlust führt. Wenn das Projekt mit RMB zusammenhängt, kann man sich die Konsequenzen vorstellen.


Die zweite Situation ist das Speicherproblem. Wenn nur ein Server vorhanden ist, wird der Speicher definitiv seinen Höhepunkt erreichen. Es ist unmöglich, einen Server unendlich zu aktualisieren.

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Als Reaktion auf die beiden oben genannten Probleme werden wir einige weitere Server vorbereiten und die Master-Slave-Replikation konfigurieren. Speichern Sie Daten auf mehreren Servern. Und stellen Sie sicher, dass die Daten jedes Servers synchronisiert sind. Selbst wenn ein Server ausfällt, hat dies keine Auswirkungen auf die Nutzung durch die Benutzer. Redis kann weiterhin eine hohe Verfügbarkeit und redundante Datensicherung erreichen.


An dieser Stelle sollten sich viele Fragen stellen: Wie verbindet man Master und Slave? Wie synchronisiere ich Daten? Was passiert, wenn der Master-Server ausfällt? Machen Sie sich keine Sorgen, lösen Sie Ihre Probleme Stück für Stück.

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme


3. Die Rolle der Redis-Master-Slave-Replikation


Wir haben oben darüber gesprochen, warum wir die Master-Slave-Replikation von Redis verwenden. Die Rolle der Master-Slave-Replikation besteht also darin, zu erklären, warum sie verwendet wird.


  1. Lassen Sie uns dieses Diagramm weiterhin verwenden, um darüber zu sprechen
  2. Der erste Punkt ist die Datenredundanz, die eine Hot-Sicherung von Daten realisiert und Persistenz darstellt. Ein anderer Weg.
  3. Der zweite Punkt betrifft den Ausfall einzelner Maschinen. Wenn ein Problem mit dem Master-Knoten auftritt, kann der Dienst vom Slave-Knoten bereitgestellt werden, der der Slave ist, wodurch eine schnelle Wiederherstellung nach Ausfällen erreicht wird, was eine Dienstredundanz darstellt.
  4. Der dritte Punkt ist die Trennung von Lesen und Schreiben. Der Master-Server wird hauptsächlich zum Schreiben und der Slave hauptsächlich zum Lesen von Daten verwendet, was die Auslastung des Servers verbessern kann. Gleichzeitig kann die Anzahl der Slave-Knoten je nach Bedarfsänderung hinzugefügt werden.
  5. Der vierte Punkt ist der Lastausgleich. In Verbindung mit der Trennung von Lesen und Schreiben stellt der Master-Knoten Schreibdienste bereit, und die Slave-Knoten stellen Lesedienste bereit, um die Serverlast zu teilen mehr Lesevorgänge durch mehrere Slave-Knoten. Durch die gemeinsame Nutzung der Leselast können die Parallelität und die Auslastung des Redis-Servers erheblich erhöht werden.
  6. Der fünfte Punkt ist der Eckpfeiler der Hochverfügbarkeit. Die Master-Slave-Replikation ist die Grundlage für die Sentinel- und Cluster-Implementierung. Wir können also sagen, dass die Master-Slave-Replikation der Eckpfeiler der Hochverfügbarkeit ist.


Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme


4. Konfigurieren Sie die Redis-Master-Slave-Replikation


Sagt So viel: Lassen Sie uns zunächst einfach einen Master-Slave-Replikationsfall konfigurieren und dann über die Implementierungsprinzipien sprechen.


Der Redis-Speicherpfad lautet: usr/local/redis


Die Protokoll- und Konfigurationsdateien werden gespeichert in: usr/local /redis/data


Zuerst konfigurieren wir zwei Konfigurationsdateien, nämlich redis6379.conf und redis6380.conf

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Ändern Sie die Konfigurationsdatei, hauptsächlich um den Port zu ändern. Um die Anzeige zu erleichtern, sind die Namen von Protokolldateien und persistenten Dateien mit ihren jeweiligen Ports gekennzeichnet.

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Öffnen Sie dann zwei Redis-Dienste, einen mit Port 6379 und einen mit Port 6380. Führen Sie den Befehl redis-server redis6380.conf aus und verwenden Sie dann redis-cli -p 6380, um eine Verbindung herzustellen. Da der Standardport von Redis 6379 ist, können wir einen anderen Redis-Server starten und redis-server redis6379.conf direkt verwenden und dann redis-cli verwenden, um eine direkte Verbindung herzustellen.

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Zu diesem Zeitpunkt haben wir erfolgreich zwei Redis-Dienste konfiguriert, einer ist 6380 und der andere ist 6379. Dies dient nur zur Demonstration. In der tatsächlichen Arbeit muss es auf zwei verschiedenen Servern konfiguriert werden.


Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme


1. Verwenden Sie die Client-Befehlszeile, um


Wir müssen zunächst ein Konzept haben, das heißt, bei der Konfiguration der Master-Slave-Replikation werden alle Vorgänge auf dem Slave-Knoten, also dem Slave, ausgeführt.


Dann führen wir einen Befehl als

vom Slave-Knoten aus. Sobald er ausgeführt wird, bedeutet dies, dass wir verbunden sind.

slaveof 127.0.0.1 6379

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige ProblemeTesten wir zunächst, ob die Master-Slave-Replikation implementiert ist. Führen Sie zwei

auf dem Master-Server aus, und dann kann der Slave6380-Port erfolgreich abgerufen werden, was bedeutet, dass unsere Master-Slave-Replikation konfiguriert wurde. Die Implementierung der Produktionsumgebung ist jedoch nicht das Ende der Welt. Später wird die Master-Slave-Replikation weiter optimiert, bis eine hohe Verfügbarkeit erreicht ist.


Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme


2. Verwenden Sie die Konfigurationsdatei, um


Bevor Sie die Konfigurationsdatei verwenden, um die Master-Slave-Replikation zu starten! Zuerst müssen Sie die vorherige Verbindung über die Client-Befehlszeile trennen und

auf dem Slave-Host ausführen, um die Master-Slave-Replikation zu trennen. slaveof no one

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Wo kann ich überprüfen, ob der Slave-Knoten die Verbindung zum Master-Knoten getrennt hat? Geben Sie die Befehlszeile

auf dem Client des Masterknotens ein, um info


anzuzeigen

Dieses Bild zeigt die Informationen, die durch Eingabe von info auf dem Client des Master-Knotens gedruckt werden, nachdem der Slave-Knoten verwendet wurde, um über die Client-Befehlszeile eine Verbindung zum Master-Knoten herzustellen. Sie können sehen, dass es eine Information über Slave0 gibt .

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Dieses Bild wird auf dem Masterknoten gedruckt, nachdem slaveof no one auf dem Slaveknoten ausgeführt wurde, was anzeigt, dass der Slaveknoten mit dem Master kommuniziert hat Knoten Getrennt. info

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

startet den Redis-Dienst gemäß der Konfigurationsdatei,

redis-server redis6380.conf


Danach Nach dem Neustart des Knotens können Sie die Verbindungsinformationen des Slave-Knotens direkt auf dem Master-Knoten anzeigen.

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Testdaten, vom Masterknoten geschriebene Dinge werden weiterhin automatisch vom Slaveknoten synchronisiert.

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme


3. Starten Sie beim Starten des Redis-Servers


Diese Konfigurationsmethode ist ebenfalls sehr einfach. Starten Sie beim Starten des Redis-Servers direkt die Master-Slave-Replikation und führen Sie den Befehl aus: redis-server --slaveof host port.


4. Sehen Sie sich die Protokollinformationen an, nachdem die Master-Slave-Replikation gestartet wurde


Dies sind die Protokollinformationen von Masterknoten

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Dies sind die Informationen des Slave-Knotens, einschließlich der Verbindungsinformationen des Master-Knotens und der RDB-Snapshot-Speicherung.

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme


5. Funktionsprinzip der Master-Slave-Replikation


1. Drei Phasen der Master-Slave-Replikation


Der gesamte Workflow der Master-Slave-Replikation ist in die folgenden drei Phasen unterteilt. Jedes Segment hat seinen eigenen internen Arbeitsablauf, daher werden wir über drei Prozessprozesse sprechen.


  • Verbindungsaufbauprozess: Dieser Prozess ist der Prozess der Verbindung von Slave zu Master
  • Datensynchronisationsprozess: Es ist der Prozess, bei dem der Master Daten mit dem Slave synchronisiert
  • Befehlsweitergabeprozess: Es handelt sich um wiederholte Synchronisierungsdaten
    Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme


2. Phase 1: Verbindungsaufbauprozess


Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Das obige Bild zeigt einen vollständigen Workflow zum Aufbau einer Master-Slave-Replikationsverbindung. Beschreiben Sie dann den oben genannten Arbeitsablauf in kurzen Worten.


    Adresse und Port des Masters einstellen, Master-Informationen speichern
  1. Eine Socket-Verbindung herstellen (was diese Verbindung bewirkt, wird weiter unten beschrieben)
  2. Kontinuierlich Ping-Befehl senden
  3. Authentifizierung
  4. Slave-Port-Informationen senden


Während des Verbindungsaufbaus speichert der Slave-Knoten die Adresse und den Port des Masters und der Master-Knoten speichert den Port des Slave-Knotens.


3. Phase 2: Datensynchronisationsprozess


Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Dieses Bild beschreibt detailliert den Datensynchronisationsprozess, wenn der Slave-Knoten zum ersten Mal eine Verbindung zum Master-Knoten herstellt.


Wenn der Slave-Knoten zum ersten Mal eine Verbindung zum Master-Knoten herstellt, führt er zunächst eine vollständige Kopie durch. Diese vollständige Kopie ist unvermeidlich.


Nachdem die vollständige Replikation abgeschlossen ist, sendet der Masterknoten die Daten im Replikations-Backlog-Puffer, und dann führt der Slave-Knoten bgrewriteaof aus, um die Daten wiederherzustellen teilweise Replikation.


Zu diesem Zeitpunkt werden drei neue Punkte erwähnt: vollständige Kopie, teilweise Kopie und Kopierpufferrückstand. Diese Punkte werden in den folgenden FAQ ausführlich erläutert.


Die dritte Stufe: Befehlsausbreitungsphase


Wenn die Master-Datenbank geändert wird und die Daten auf dem Master- und Slave-Server inkonsistent sind, werden die Master- und Slave-Daten synchronisiert, um konsistent zu sein. Dieser Vorgang wird als Befehlsweitergabe bezeichnet.


Der Master sendet den empfangenen Datenänderungsbefehl an den Slave, und der Slave führt den Befehl nach Erhalt des Befehls aus, um die Master-Slave-Daten konsistent zu machen.


Teilweises Kopieren während der Befehlsweitergabephase


  • tritt während der Befehlsweitergabephase auf Wenn die Netzwerkverbindung getrennt wird oder das Netzwerk zittert, geht die Verbindung verloren (Verbindung verloren)
  • Zu diesem Zeitpunkt schreibt der Masterknoten weiterhin Daten in den Replbackbuffer (Replikationspuffer-Backlog-Bereich)
  • Der Slave-Knoten wird weiterhin versuchen, eine Verbindung zum Master herzustellen
  • Wenn der Slave-Knoten seine Runid und seinen Replikationsoffset an den Master-Knoten sendet und den pysnc-Befehl zur Synchronisierung ausführt
  • Wenn der Wenn der Master feststellt, dass der Offset innerhalb des Kopierpufferbereichs liegt, wird der Befehl „Fortfahren“ zurückgegeben. Und senden Sie die Daten im Kopierpuffer an den Slave-Knoten.
  • Der Slave-Knoten empfängt Daten und führt bgrewriteaof aus, um die Daten wiederherzustellen


Detaillierte Einführung in das Prinzip der Master-Slave-Replikation (vollständig). (Replikation + teilweise Replikation)


Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Dieser Prozess ist die vollständigste Prozesserklärung der Master-Slave-Replikation. Lassen Sie uns jeden Schritt des Prozesses kurz vorstellen


  1. Befehl vom Knoten psync ? 1 psync runid offset senden, um das entsprechende runid zum Anfordern von Daten zu finden. Hier können Sie jedoch berücksichtigen, dass der Slave-Knoten beim ersten Herstellen einer Verbindung das runid 和 offset des Master-Knotens überhaupt nicht kennt. Der zum ersten Mal gesendete Befehl lautet also psync ? 1, was bedeutet, dass ich alle Daten des Masterknotens haben möchte.
  2. Der Masterknoten beginnt mit der Ausführung von bgsave, um die RDB-Datei zu generieren und den aktuellen Replikationsoffset-Offset aufzuzeichnen
  3. Zu diesem Zeitpunkt sendet der Masterknoten seine eigene Runid und seinen eigenen Offset über die +FULLRESYNC-Runid Offset-Befehl zum Senden der RDB über den Socket an den Slave-Knoten.
  4. Der Slave-Knoten empfängt +FULLRESYNC, speichert die Runid und den Offset des Master-Knotens, löscht dann alle aktuellen Daten, empfängt die RDB-Datei über den Socket und beginnt mit der Wiederherstellung der RDB-Daten.
  5. Nach der vollständigen Replikation hat der Slave-Knoten die Runid und den Offset des Masterknotens erhalten und beginnt mit dem Senden von Anweisungen psync runid offset
  6. Der Masterknoten empfängt die Anweisungen, bestimmt, ob die Runid übereinstimmt, und bestimmt, ob der Offset in den Puffer kopiert wird.
  7. Der Master-Knoten stellt fest, dass entweder Runid oder Offset nicht erfüllt sind, und kehrt zu Schritt 2 zurück, um mit der vollständigen Replikation fortzufahren. Die Runid-Nichtübereinstimmung ist hier möglicherweise nur auf den Neustart des Slave-Knotens zurückzuführen. Die Nichtübereinstimmung des Offsets (Offset) ist der Überlauf des Replikations-Backlogs. Wenn die Runid- oder Offset-Prüfung erfolgreich ist und der Offset des Slave-Knotens mit dem Offset des Master-Knotens übereinstimmt, wird er ignoriert. Wenn die Runid- oder Offset-Prüfung erfolgreich ist und sich der Offset des Slave-Knotens vom Offset unterscheidet, wird der +CONTINUE-Offset (dieser Offset gehört zum Master-Knoten) gesendet und die Daten vom Slave-Knoten-Offset zum Master-Knoten-Offset gesendet Der Replikationspuffer wird über den Socket gesendet.
  8. Empfangen Sie +CONTINUE vom Knoten und speichern Sie den Offset des Masters. Führen Sie nach dem Empfang der Informationen über den Socket bgrewriteaof aus, um die Daten wiederherzustellen.


1-4 sind Vollexemplare, 5-8 sind Teilexemplare


In Schritt 3 des Masterknotens hat der Masterknoten während des Master-Slave-Replikationszeitraums Clientdaten empfangen und der Offset des Masterknotens hat sich geändert. An jeden Slave werden nur Änderungen gesendet. Dieser Sendevorgang wird als Heartbeat-Mechanismus bezeichnet


7. Heartbeat-Mechanismus


Während der Befehlsweitergabephase müssen der Masterknoten und der Slaveknoten immer Informationen austauschen. Ändern und verwenden Sie den Heartbeat-Mechanismus für die Wartung, um die Verbindung zwischen dem Master-Knoten und dem Slave-Knoten online zu halten.


  • Master Heartbeat
    • Befehl: ping
    • wird standardmäßig alle 10 Sekunden ausgeführt . Es wird durch den Parameter repl-ping-slave-period bestimmt
    • Die Hauptsache ist, festzustellen, ob der Slave-Knoten online ist
    • Sie können die Informationsreplikation verwenden, um das Intervall von zu überprüfen Verbindungszeit nach der Anmietung des Slave-Knotens. Wenn die Verzögerung 0 oder 1 ist, handelt es sich um einen normalen Zustand.
  • Slave-Heartbeat-Aufgabe
    • Befehl: replconf ack {offset}
    • Einmal pro Sekunde ausführen
    • Die Hauptaufgabe besteht darin, seinen eigenen Replikationsoffset an den Masterknoten zu senden, den neuesten Datenänderungsbefehl vom Masterknoten zu erhalten und außerdem festzustellen, ob der Masterknoten online ist.


Vorsichtsmaßnahmen während der Heartbeat-Phase

Um die Datenstabilität zu gewährleisten, wird der Masterknoten wann Die Anzahl der Tropfen oder die Verzögerung ist zu hoch. Jegliche Informationssynchronisierung wird abgelehnt.


Es gibt zwei Parameter für die Konfigurationsanpassung:


min-slaves-to-write 2


min-slaves-max-lag 8


dies Die beiden Parameter zeigen an, dass nur noch 2 Slave-Knoten übrig sind. Wenn die Verzögerung des Slave-Knotens mehr als 8 Sekunden beträgt, schaltet der Master-Knoten die Master-Funktion zwangsweise aus und stoppt die Datensynchronisierung.


Was passiert dann, wenn der Master-Knoten die Daten und die Verzögerungszeit des hängenden Slave-Knotens kennt? Im Heartbeat-Mechanismus sendet der Slave jede Sekunde den Befehl perlconf ack. Dieser Befehl kann den Offset, die Verzögerungszeit des Slave-Knotens und die Anzahl der Slave-Knoten übertragen.


Drei Kernelemente der Teilreplikation


1. Laufende ID des Servers


Schauen wir uns zunächst an, was diese Lauf-ID ist. Sie können sie sehen, indem Sie den Info-Befehl ausführen. Wir können dies auch sehen, wenn wir uns die Startprotokollinformationen oben ansehen.


Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Redis generiert beim Start automatisch eine zufällige ID (hier ist zu beachten, dass die ID bei jedem Start anders ist), die aus 40 zufälligen Hexadezimalzeichenfolgen besteht und zur eindeutigen Identifizierung eines Redis-Knotens dient .


Wenn die Master-Slave-Replikation zum ersten Mal gestartet wird, sendet der Master seine Runid an den Slave und der Slave speichert die ID des Masters. Wir können den Info-Befehl verwenden um es anzuzeigen


Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme


Bei Trennung und erneuter Verbindung sendet der Slave Diese ID wird an den Master gesendet. Wenn die vom Slave gespeicherte Runid mit der aktuellen Runid des Masters übereinstimmt, versucht der Master, eine teilweise Replikation zu verwenden (ein weiterer Faktor dafür, ob dieser Block erfolgreich kopiert werden kann, ist der Offset). Wenn sich die vom Slave gespeicherte Runid von der aktuellen Runid des Masters unterscheidet, wird die vollständige Kopie direkt durchgeführt.


2. Kopierrückstandspuffer


Der Kopierpufferrückstand ist eine First-In-First-Out-Warteschlange. Benutzerspeicher Master-Befehlsdatensätze zum Sammeln von Daten. Der Standardspeicherplatz des Kopierpuffers beträgt 1 MB.


Sie können repl-backlog-size 1mb in der Konfigurationsdatei ändern, um die Puffergröße entsprechend Ihrem eigenen Serverspeicher zu steuern.


Was genau speichert der Kopierpuffer?


Wenn wir einen Befehl als set name kaka ausführen, können wir die Persistenzdatei anzeigen, um

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme anzuzeigen

Dann ist der Kopierrückstandspuffer die gespeicherte Menge persistenter Daten, getrennt durch Bytes, und jedes Byte hat seinen eigenen Offset. Dieser Versatz ist auch der Kopierversatz (Offset)

Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Warum heißt es dann, dass der Rückstand des Kopierpuffers zu einer vollständigen Kopie führen kann? 🎜>


In der Befehlsweitergabephase speichert der Masterknoten die gesammelten Daten im Replikationspuffer und sendet sie dann an den Slaveknoten. Hier entsteht das Problem, wenn die Datenmenge auf dem Master-Knoten in einem Moment extrem groß ist und den Speicher des Replikationspuffers überschreitet, werden einige Daten verdrängt, was zu Dateninkonsistenzen zwischen dem Master-Knoten und dem Slave führt Knoten. Um eine vollständige Kopie zu erstellen. Wenn die Puffergröße nicht richtig eingestellt ist, kann es zu einer Endlosschleife kommen. Der Slave-Knoten kopiert immer vollständig, löscht die Daten und kopiert dann vollständig.


3. Kopierversatz (Offset)


Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Der Master-Knoten-Replikationsoffset besteht darin, einen Datensatz einmal an den Slave-Knoten zu senden, und der Slave-Knoten soll einmal einen Datensatz empfangen.


wird verwendet, um Informationen zu synchronisieren, die Unterschiede zwischen dem Master-Knoten und dem Slave-Knoten zu vergleichen und die Datennutzung wiederherzustellen, wenn der Slave getrennt wird.


Dieser Wert ist der Offset vom Kopierpufferrückstand.


9. Häufige Probleme bei der Master-Slave-Replikation


1. Master-Knoten-Neustartproblem (interne Optimierung)


Wenn der Master-Knoten neu startet, ändert sich der Wert von runid, was dazu führt, dass alle Slave-Knoten eine vollständige Replikation durchführen.


Wir müssen dieses Problem nicht berücksichtigen, solange wir wissen, wie das System optimiert ist.


Nachdem die Master-Slave-Replikation eingerichtet ist, erstellt der Masterknoten die Master-Replid-Variable. Die generierte Strategie ist dieselbe wie die Runid, mit einer Länge von 41 Bits und eine Runid-Länge von 40 Bits werden dann an den Slave-Knoten gesendet.


Wenn der Befehl zum Speichern des Herunterfahrens auf dem Masterknoten ausgeführt wird, wird eine RDB-Persistenz durchgeführt und die Runid und der Offset werden in der RDB-Datei gespeichert. Sie können den Befehl redis-check-rdb verwenden, um diese Informationen anzuzeigen.


Funktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme

Laden Sie die RDB-Datei nach dem Neustart des Masterknotens und laden Sie die Repl-ID und den Repl-Offset in der Datei in den Speicher. Auch wenn alle Slave-Knoten als die vorherigen Master-Knoten betrachtet werden.


2. Der Netzwerk-Interrupt-Offset des Slave-Knotens überschreitet die Grenze, was zu einer vollständigen Replikation führt


Aufgrund einer schlechten Netzwerkumgebung , der Slave-Knoten-Knoten-Netzwerkausfall. Der Replikations-Backlog-Pufferspeicher ist zu klein, was zu einem Datenüberlauf führt. Wenn der Slave-Knoten-Offset die Grenze überschreitet, erfolgt eine vollständige Replikation. Dadurch kann es zu wiederholten Vollkopien kommen.


Lösung: Ändern Sie die Größe des Replikations-Backlog-Puffers: repl-backlog-size


Setup-Empfehlung: Testen Sie die Master-Verbindung Zeit des Slave-Knotens, erhält die durchschnittliche Gesamtzahl der vom Master-Knoten pro Sekunde generierten Befehle write_size_per_second


Kopierpufferspeicherplatzeinstellung = 2 Master-Slave-Verbindungszeit Master Die Gesamtmenge der vom Knoten pro Sekunde generierten Daten


3. Häufige Netzwerkunterbrechungen


Aufgrund der CPU des Master-Knotens ist die Auslastung zu hoch oder der Slave-Knoten ist häufig verbunden. Das Ergebnis dieser Situation ist, dass verschiedene Ressourcen des Masterknotens stark belegt sind, einschließlich, aber nicht beschränkt auf Puffer, Bandbreite, Verbindungen usw.


Warum sind die Ressourcen des Masterknotens stark belegt?


Im Heartbeat-Mechanismus sendet der Slave-Knoten jede Sekunde einen Befehl replconf ack an den Master-Knoten.

Der Slave-Knoten hat eine langsame Abfrage ausgeführt, die viel CPU beansprucht

Der Master-Knoten hat jede Sekunde die Replikations-Timing-Funktion replicationCron aufgerufen, und dann hat der Slave-Knoten lange Zeit nicht geantwortet.


Lösung:


Slave-Knoten-Timeout-Freigabe festlegen


Parameter festlegen: repl-timeout


Dieser Parameter ist standardmäßig auf 60 Sekunden eingestellt . Lassen Sie den Slave nach 60 Sekunden los.


4. Dateninkonsistenzproblem


Aufgrund von Netzwerkfaktoren sind die Daten mehrerer Slave-Knoten inkonsistent. Es gibt keine Möglichkeit, diesen Faktor zu vermeiden.


Es gibt zwei Lösungen für dieses Problem:


Die ersten Daten erfordern eine hochkonsistente Konfiguration des Redis-Servers Verwendet einen Server sowohl zum Lesen als auch zum Schreiben. Diese Methode ist auf eine kleine Datenmenge beschränkt und die Daten müssen hochkonsistent sein.


Der zweite überwacht den Offset der Master- und Slave-Knoten. Wenn die Verzögerung des Slave-Knotens zu groß ist, wird der Zugriff des Clients auf den Slave-Knoten vorübergehend blockiert. Setzen Sie den Parameter auf „slave-serve-stale-data ja|nein“. Sobald dieser Parameter gesetzt ist, kann er nur auf einige wenige Befehle reagieren, wie z. B. „Info Slaveof“.


10. Zusammenfassung


Dieser Artikel erklärt hauptsächlich, was Master-Slave-Replikation ist und die drei Hauptaspekte des Masters -Slave-Replikation. Phasen, Arbeitsabläufe und die drei Kernkomponenten der Teilreplikation. Heartbeat-Mechanismus während der Befehlsweitergabephase. Abschließend werden häufige Probleme bei der Master-Slave-Replikation erläutert.

Das obige ist der detaillierte Inhalt vonFunktionsprinzip der Redis-Master-Slave-Replikation und häufige Probleme. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!

Verwandte Etiketten:
Quelle:php.cn
Erklärung dieser Website
Der Inhalt dieses Artikels wird freiwillig von Internetnutzern beigesteuert und das Urheberrecht liegt beim ursprünglichen Autor. Diese Website übernimmt keine entsprechende rechtliche Verantwortung. Wenn Sie Inhalte finden, bei denen der Verdacht eines Plagiats oder einer Rechtsverletzung besteht, wenden Sie sich bitte an admin@php.cn
Beliebte Tutorials
Mehr>
Neueste Downloads
Mehr>
Web-Effekte
Quellcode der Website
Website-Materialien
Frontend-Vorlage