Méthodes de cohérence du cache Redis et des données MySQL
Cause de la demande
Dans les scénarios commerciaux à forte concurrence, la base de données constitue dans la plupart des cas le maillon le plus faible pour l’accès des utilisateurs simultanés. Par conséquent, vous devez utiliser redis pour effectuer une opération de mise en mémoire tampon afin que la requête puisse d'abord accéder à redis au lieu d'accéder directement à des bases de données telles que MySQL.
Ce scénario métier résout principalement le problème de lecture des données du cache Redis. Les opérations commerciales sont généralement effectuées selon le processus de la figure ci-dessous.
Il n'y a généralement aucun problème lors de la lecture de l'étape du cache, mais une fois qu'elle implique des mises à jour des données : mises à jour de la base de données et du cache, des problèmes de cohérence des données entre le cache (Redis) et la base de données (MySQL) sont susceptibles de se produire.
Que vous écriviez d'abord dans la base de données MySQL, puis supprimiez le cache Redis ; ou que vous supprimiez d'abord le cache, puis écriviez dans la base de données, une incohérence des données peut se produire. Donnez un exemple :
1. Si le cache Redis est supprimé et qu'un autre thread vient lire avant d'avoir le temps d'écrire dans la base de données MySQL et constate que le cache est vide, il lit les données de la base de données et les écrit dans le cache. , le cache contient des données sales.
2. Si la bibliothèque est écrite en premier et que le thread écrivant la bibliothèque plante avant que le cache ne soit supprimé et que le cache n'est pas supprimé, une incohérence des données se produira également.
Étant donné que l'écriture et la lecture sont simultanées et que l'ordre ne peut pas être garanti, il y aura une incohérence des données entre le cache et la base de données.
Tathagata le résout ? Voici deux solutions, faciles d’abord puis difficiles, choisies en fonction des coûts métiers et techniques.
Solutions de mise en cache et de cohérence des bases de données
1. La première option : adopter une stratégie de double suppression différée
Effectuez l'opération redis.del (clé) avant et après l'écriture de la bibliothèque et définissez un délai d'attente raisonnable.
Le pseudo code est le suivant
écriture vide publique (clé de chaîne, données d'objet){
redis.delKey(clé);
db.updateData(data);
Discussion.sleep(500);
redis.delKey(clé);
}
2. Les étapes spécifiques sont :
1) Supprimez d'abord le cache
2) Écrivez à nouveau la base de données
3) Dormez pendant 500 millisecondes
4) Supprimez à nouveau le cache
Alors, comment ces 500 millisecondes sont-elles déterminées et pendant combien de temps doit-il dormir ?
Vous devez évaluer la logique métier fastidieuse de lecture des données de votre projet. Le but de ceci est de garantir que la demande de lecture se termine et que la demande d'écriture peut supprimer les données sales mises en cache causées par la demande de lecture.
Bien entendu, cette stratégie doit également prendre en compte la synchronisation fastidieuse entre Redis et la base de données maître-esclave. Le temps de sommeil final pour l'écriture des données : ajoutez quelques centaines de millisecondes au temps nécessaire à la lecture de la logique métier des données. Par exemple : dormir 1 seconde.
3.Définir le délai d'expiration du cache
Théoriquement, fixer un délai d'expiration pour le cache est une solution pour garantir une cohérence éventuelle. Toutes les opérations d'écriture sont soumises à la base de données. Tant que le délai d'expiration du cache est atteint, les demandes de lecture ultérieures liront naturellement les nouvelles valeurs de la base de données et rempliront le cache.
4. Inconvénients de ce plan
En combinant la stratégie de double suppression + le paramètre de délai d'expiration du cache, le pire des cas est que les données soient incohérentes pendant le délai d'expiration, ce qui augmente également le temps d'écriture des requêtes.
2. La deuxième solution : cache de mise à jour asynchrone (mécanisme de synchronisation basé sur l'abonnement à binlog)
1. Idée technique globale :
Consommation incrémentielle d'abonnement MySQL binlog + file d'attente de messages + mise à jour incrémentielle des données vers redis
1) Lire Redis : les données chaudes sont essentiellement dans Redis
2) Écriture de MySQL : l'ajout, la suppression et la modification sont toutes des opérations sur MySQL
3) Mettre à jour les données Redis : binlog des opérations de données MySQ à mettre à jour vers Redis
2.Mise à jour Redis
1) Les opérations sur les données sont principalement divisées en deux blocs :
L'un est à plein volume (écrivez toutes les données sur Redis en même temps)
L'un est incrémentiel (mise à jour en temps réel)
Ce dont nous parlons ici est l'incrément, qui fait référence à la mise à jour, à l'insertion et à la suppression des données modifiées de MySQL.
2) Après avoir lu le binlog, analysez-le et utilisez la file d'attente de messages pour transmettre et mettre à jour les données du cache Redis de chaque station.
De cette façon, une fois que de nouvelles opérations d'écriture, de mise à jour, de suppression et autres se produisent dans MySQL, les messages liés au binlog peuvent être transmis à Redis, et Redis mettra à jour Redis en fonction des enregistrements du binlog.
En fait, ce mécanisme est très similaire au mécanisme de sauvegarde maître-esclave de MySQL, car la sauvegarde maître-esclave de MySQL assure également la cohérence des données via binlog.
Ici, vous pouvez utiliser canal (un framework open source d'Alibaba) en combinaison, grâce auquel vous pouvez vous abonner au binlog de MySQL. Canal imite la demande de sauvegarde de la base de données esclave de MySQL, afin que la mise à jour des données de Redis obtienne le même effet.
Bien sûr, pour l'outil push de messages ici, vous pouvez également utiliser d'autres tiers : kafka, RabbitMQ, etc. pour implémenter les mises à jour push de Redis.
Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!

Outils d'IA chauds

Undresser.AI Undress
Application basée sur l'IA pour créer des photos de nu réalistes

AI Clothes Remover
Outil d'IA en ligne pour supprimer les vêtements des photos.

Undress AI Tool
Images de déshabillage gratuites

Clothoff.io
Dissolvant de vêtements AI

AI Hentai Generator
Générez AI Hentai gratuitement.

Article chaud

Outils chauds

Bloc-notes++7.3.1
Éditeur de code facile à utiliser et gratuit

SublimeText3 version chinoise
Version chinoise, très simple à utiliser

Envoyer Studio 13.0.1
Puissant environnement de développement intégré PHP

Dreamweaver CS6
Outils de développement Web visuel

SublimeText3 version Mac
Logiciel d'édition de code au niveau de Dieu (SublimeText3)

MySQL est un système de gestion de la base de données relationnel open source, principalement utilisé pour stocker et récupérer les données rapidement et de manière fiable. Son principe de travail comprend les demandes des clients, la résolution de requête, l'exécution des requêtes et les résultats de retour. Des exemples d'utilisation comprennent la création de tables, l'insertion et la question des données et les fonctionnalités avancées telles que les opérations de jointure. Les erreurs communes impliquent la syntaxe SQL, les types de données et les autorisations, et les suggestions d'optimisation incluent l'utilisation d'index, les requêtes optimisées et la partition de tables.

MySQL est choisi pour ses performances, sa fiabilité, sa facilité d'utilisation et son soutien communautaire. 1.MySQL fournit des fonctions de stockage et de récupération de données efficaces, prenant en charge plusieurs types de données et opérations de requête avancées. 2. Adoptez l'architecture client-serveur et plusieurs moteurs de stockage pour prendre en charge l'optimisation des transactions et des requêtes. 3. Facile à utiliser, prend en charge une variété de systèmes d'exploitation et de langages de programmation. 4. Avoir un solide soutien communautaire et fournir des ressources et des solutions riches.

La position de MySQL dans les bases de données et la programmation est très importante. Il s'agit d'un système de gestion de base de données relationnel open source qui est largement utilisé dans divers scénarios d'application. 1) MySQL fournit des fonctions efficaces de stockage de données, d'organisation et de récupération, en prenant en charge les systèmes Web, mobiles et de niveau d'entreprise. 2) Il utilise une architecture client-serveur, prend en charge plusieurs moteurs de stockage et optimisation d'index. 3) Les usages de base incluent la création de tables et l'insertion de données, et les usages avancés impliquent des jointures multiples et des requêtes complexes. 4) Des questions fréquemment posées telles que les erreurs de syntaxe SQL et les problèmes de performances peuvent être déboguées via la commande Explication et le journal de requête lente. 5) Les méthodes d'optimisation des performances comprennent l'utilisation rationnelle des indices, la requête optimisée et l'utilisation des caches. Les meilleures pratiques incluent l'utilisation des transactions et des acteurs préparés

Apache se connecte à une base de données nécessite les étapes suivantes: Installez le pilote de base de données. Configurez le fichier web.xml pour créer un pool de connexion. Créez une source de données JDBC et spécifiez les paramètres de connexion. Utilisez l'API JDBC pour accéder à la base de données à partir du code Java, y compris l'obtention de connexions, la création d'instructions, les paramètres de liaison, l'exécution de requêtes ou de mises à jour et de traitement des résultats.

Pour améliorer les performances de la base de données PostgreSQL dans Debian Systems, il est nécessaire de considérer de manière approfondie le matériel, la configuration, l'indexation, la requête et d'autres aspects. Les stratégies suivantes peuvent optimiser efficacement les performances de la base de données: 1. Extension de mémoire d'optimisation des ressources matérielles: la mémoire adéquate est cruciale pour cacher les données et les index. Stockage à grande vitesse: l'utilisation de disques SSD SSD peut considérablement améliorer les performances d'E / S. Processeur multi-core: utilisez pleinement les processeurs multi-core pour implémenter le traitement des requêtes parallèles. 2. Paramètre de base de données Tuning Shared_Buffers: Selon le réglage de la taille de la mémoire du système, il est recommandé de le définir à 25% -40% de la mémoire système. work_mem: contrôle la mémoire des opérations de tri et de hachage, généralement définies sur 64 Mo à 256m

Dans Debian Systems, les appels du système ReadDir sont utilisés pour lire le contenu des répertoires. Si ses performances ne sont pas bonnes, essayez la stratégie d'optimisation suivante: simplifiez le nombre de fichiers d'annuaire: divisez les grands répertoires en plusieurs petits répertoires autant que possible, en réduisant le nombre d'éléments traités par appel ReadDir. Activer la mise en cache de contenu du répertoire: construire un mécanisme de cache, mettre à jour le cache régulièrement ou lorsque le contenu du répertoire change et réduire les appels fréquents à Readdir. Les caches de mémoire (telles que Memcached ou Redis) ou les caches locales (telles que les fichiers ou les bases de données) peuvent être prises en compte. Adoptez une structure de données efficace: si vous implémentez vous-même la traversée du répertoire, sélectionnez des structures de données plus efficaces (telles que les tables de hachage au lieu de la recherche linéaire) pour stocker et accéder aux informations du répertoire

Guide de fonctionnement du champ dans MySQL: Ajouter, modifier et supprimer les champs. Ajouter un champ: alter table table_name Ajouter Column_name data_type [pas null] [Default default_value] [Clé primaire] [Auto_increment] Modifier le champ: alter table table_name modifie Column_name data_type [pas null] [default default_value] [clé primaire]

Lors du déploiement de Gitlab sur Debian, vous avez une variété de bases de données à choisir. Selon les résultats de la recherche, ce qui suit est plusieurs sélections de base de données courantes et leurs informations connexes: SQLite Fonctionnalités: SQLite est un système de gestion de base de données intégré léger avec une conception simple, un petit espace et facile à utiliser, et aucun serveur de base de données indépendant n'est requis. Scénarios applicables: adaptés aux petites applications ou applications qui doivent s'exécuter sur des appareils intégrés. Caractéristiques de MySQL: MySQL est un système de gestion de base de données relationnel open source, largement utilisé dans les sites Web et les applications.
