Redis stocke les journaux et les articles populaires

Une variété de structures de données peuvent être implémentées à l'aide du type de données liste de Redis, qui peut être considéré comme un tableau d'index en PHP. Il peut implémenter diverses structures de données telles que des piles, des files d'attente et des files d'attente de messages. Aujourd'hui, je voudrais vous présenter comment utiliser Redis pour enregistrer les journaux système et les listes d'articles populaires.

Stockage des journaux

Comme nous le savons tous, les journaux nginx ne seront pas automatiquement coupés par défaut. Ils seront toujours stockés dans un fichier et. Nous devons effectuer nous-mêmes l'opération de coupe des grumes. En plus de nginx, les journaux sont utilisés à de nombreux endroits. Lorsque quelque chose ne va pas, les journaux sont l’un des principaux moyens par lesquels nous recherchons des indices.

Nous prévoyons maintenant d'écrire les journaux système sur Redis. Les journaux quotidiens seront enregistrés dans une liste pour éviter qu'un seul fichier journal ne soit trop volumineux.

L'idée de base est d'écrire les informations du journal quotidien dans une liste séparée, puis d'effectuer une tâche planifiée. La fonction de la tâche planifiée est de supprimer la liste des journaux d'il y a 1 mois et de la conserver. . dans un fichier texte, puis supprimez la liste des journaux d'il y a 1 mois dans Redis pour éviter que Redis n'occupe trop de mémoire.

Vous pouvez utiliser la fonction de compression pour compresser les informations du journal afin de réduire l'utilisation de la mémoire. De plus, maintenez une liste pour stocker les noms de clé de la liste de journaux afin de faciliter la récupération des noms de clé de la liste de journaux. Le pseudo code pour stocker les journaux est le suivant :

$log = ... // 日志信息
// 日志列表键名
$key = 'log:'.strtotime(date('Y-m-d'));

// 维护一个键名列表
if (!$redis->exists($key)) {
 $listlogkey = 'log:key';
 $redis->rpush($listlogkey, $key);
}

// 日志信息存放到redis中
$redis->rpush($key, $log);

Le code de la tâche planifiée est le suivant :

$lastMonth = strtotime("-30 day");

while ($logkey =  $redis->lpop('log:key')) {
    $logTime = explode(':', $logkey)[1];
    
    if ($logTime < $lastMonth) {
        // 从日志列表里去日志信息，一次取50条
        for ($start = 0, $end = 49;true;$start +=50, $end+=50) {
            $logs = $redis->lrange($logkey, $start, $end);
            if (!$logs) break;
            // 将日志信息解压缩，然后追加写入文本文件中
             ……
             
            // 删除该日志列表
            $redis->del($logkey);
        }   
    } else {
        // 一个月之内的，重新push到左侧
        $redis->lpush(&#39;log:key&#39;, $logkey);
        exit;
    }
}

Il y a quelques points à noter ici si le journal persistant échoue, ou le journal. est au cours du mois dernier, vous devez repousser le nom de la clé de la liste des journaux à partir de la gauche. De plus, lorsque vous récupérez des journaux à partir de la liste des journaux, ne les récupérez pas tous en même temps, car cela pourrait facilement entraîner un blocage de Redis. À chaque fois, prenez un certain nombre (comme 50) et sortez-les en boucle.

Stockage des identifiants d'actualités populaires

Ici, je ne publierai pas le code, mais parlerai principalement des idées. J'avais l'habitude de créer un système avec une fonction de menu, comprenant la semaine la plus chaude d'aujourd'hui et la semaine la plus chaude de janvier. À cette époque, notre site Web avait beaucoup de trafic, mais en quelques jours, le site Web est tombé en panne. La raison en est le problème de requête lente de MySQL. Parce que ce morceau de SQL inclut le regroupement, COUNT(), le jugement conditionnel, etc.

Laissez-moi vous parler de notre solution : écrire une procédure stockée mysql et appeler régulièrement la procédure stockée. La fonction de cette procédure stockée est de filtrer les articles les plus populaires aujourd'hui, cette semaine et janvier, de prendre respectivement 100 ID d'article et de stocker leurs ID d'article dans la file d'attente Redis. Pour les articles les plus populaires, nous affichons uniquement le top 100. De cette façon, notre système n'aura pas de requêtes lentes.

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!