Redis 클러스터 구축 및 재배포 모니터링 및 배포

redis 클러스터 구축 및 모니터링 환경

마스터 3개와 슬레이브 3개로 구성된 클러스터 달성. 독립형 가상 머신 IP: 192.168.40.128

기본 클러스터 구축

간단한 다운로드

• wget http://download 통해 .redis.io/releases/redis-4.0.10.tar.gzwget http://download.redis.io/releases/redis-4.0.10.tar.gz

• 解压缩 tar zxvf redis-4.0.10.tar.gz

• 指定安装路径，切换root用户执行make && make PREFIX=/usr/local/redis install，可能出现权限不够的问题，sudo同样会报错，直接使用root进行操作。

---

安装编译工具

• sudo apt-get update

• sudo apt-get install gcc

• sudo apt-get install make

• sudo apt-get install tcl

---

创建redis集群文件夹

• 因为是/usr，所以始终都是在root权限下进行操作

• cd /usr/local/redis

• mkdir cluster

• cd cluster

• mkdir 7000 7001 7002 7003 7004 7005

---

修改配置文件

复制redis conf内的config文件复制到六个文件夹中，并且修改以下内容

# 端口号  
port 7000  
# 后台启动  
daemonize yes  
# 开启集群  
cluster-enabled yes  
#集群节点配置文件  
cluster-config-file nodes-7000.conf  
# 集群连接超时时间  
cluster-node-timeout 5000  
# 进程pid的文件位置  
pidfile /home/ubuntu/redis-4.0.10/pid/redis-7000.pid
#工作文件夹
dir "/home/ubuntu/redis-4.0.10/working"
# 开启aof  
appendonly yes  
# aof文件路径  
appendfilename "appendonly-7005.aof"  
# rdb文件路径  
dbfilename dump-7000.rdb

redis 的配置文件中的bind指定的是redis服务器的网卡ip，也就是redis服务器的ip

---

启动脚本

• cd /home/ubuntu/redis-4.0.10/

• touch start.link.sh为了操作简单,创建脚本

• 修改启动脚本，为

#!/bin/bash
export BASE_FLOD="/usr/local/redis"
{BASE_FLOD}/bin/redis-server /usr/local/redis/cluster/7000/redis.conf
/usr/local/redis/bin/redis-server /usr/local/redis/cluster/7001/redis.conf
/usr/local/redis/bin/redis-server /usr/local/redis/cluster/7002/redis.conf
/usr/local/redis/bin/redis-server /usr/local/redis/cluster/7003/redis.conf
/usr/local/redis/bin/redis-server /usr/local/redis/cluster/7004/redis.conf
/usr/local/redis/bin/redis-server /usr/local/redis/cluster/7005/redis.conf
#cd src
#./redis-trib.rb create --replicas 1 192.168.40.128:7000 192.168.40.128:7001 192.168.40.128:7002 192.168.40.128:7003 192.168.40.128:7004 192.168.40.128:7005

其中注释的是为了简化初始启动的，ip需要跟每个节点配置的redis.conf 中bind 属性绑定的一致,启动后可以通过ps -ef | grep redis命令查询对应的线程是否启动

---

集群启动

• 关联程序使用的ruby写的，所以要搭建rudy的运行环境，需要安装rudbygem

• sudo apt-get install ruby rubygems -y

• gem install redis,运行到这里会感觉十分慢，需要耐心等待，在redis安装目录下，src文件夹redis-trib.rb

• 运行redis-trib.rb create --replicas 1 192.168.40.128:7000 192.168.40.128:7001 192.168.40.128:7002 192.168.40.128:7003 192.168.40.128:7004 192.168.40.128:7005,检查配置的信息是否有错误，没有直接yes就可以. [OK] All 16384 slots covered.代表接群启动成功。

---

节点查看，重启

查看集群运行状态：使用命令./redis-trib.rb check 192.168.40.128:7000，进行集群的状态检查

---

性能测试

自带测试工具redis-benchmark

• redis-benchmark -h 192.168.40.128 -p 6379 -c 100 -n 100000100个并发连接，100000个请求，检测 host 为 localhost 端口为6379的 redis 服务器性能。

• redis-benchmark -h 192.168.40.128 -p 6379 -q -d 100测试存取大小为100字节的数据包的性能。

• redis-benchmark -t set,lpush -n 100000 -q只测试某些操作的性能。

• redis-benchmark -n 100000 -q script load "redis.call(‘set’,’foo’,’bar’)"只测试某些数值存取的性能。

---

集群密码设置

集群搭建初始不需要密码，启动完成后，先看每个节点的配置文件是否有读写权限，如果没有读写权限，需要chmod修改的读写权限，通过

./redis-cli -c -p port
config set masterauth password
config set requirepass password
config rewrite

分别连接每个节点进行设置
若要重启发现连接不上，修改启动脚本 redis-.sh 99行，配置启动脚本密码启动
@r = Redis.new(:host => @info[:host], :port => @info[:port], :timeout => 60,:password => "yangfan@1995")

---

tar zxvf redis-4.0.10.tar.gz

---

압축 해제 설치 지정 경로 및 스위치 루트 사용자가 make && make PREFIX=/usr/local/redis install을 실행하면 권한이 부족하다는 문제가 있을 수 있습니다. Sudo는 루트를 직접 사용하여 작동한다는 오류를 보고합니다.

1. 컴파일 도구 설치

2. sudo apt-get 업데이트🎜🎜🎜🎜sudo apt-get install gcc🎜🎜🎜🎜sudo apt-get install make🎜🎜🎜🎜sudo apt-get install tcl🎜🎜🎜🎜redis 클러스터 폴더를 생성합니다🎜🎜🎜🎜/usr이므로 , 따라서 항상 루트 권한으로 작동하세요🎜🎜🎜🎜cd /usr/local/redis🎜🎜🎜🎜mkdir 클러스터🎜🎜🎜🎜cd 클러스터 </code >🎜🎜🎜🎜<code>mkdir 7000 7001 7002 7003 7004 7005🎜🎜🎜🎜구성 파일 수정🎜🎜redis conf의 구성 파일을 6개 폴더에 복사하고, 다음 내용을 수정합니다🎜 Redis 구성 파일의

   /*
    *集群连接测试
    */
   
   @Test
   public void testJedisCluster() {
       Set<HostAndPort> nodes = new LinkedHashSet<>();
       //所有主机节点ip和端口
       nodes.add(new HostAndPort("192.168.40.128", 7000));
       nodes.add(new HostAndPort("192.168.40.128", 7001));
       nodes.add(new HostAndPort("192.168.40.128", 7002));
       nodes.add(new HostAndPort("192.168.40.128", 7003));
       nodes.add(new HostAndPort("192.168.40.128", 7004));
       nodes.add(new HostAndPort("192.168.40.128", 7005));
       //没有密码
       //JedisCluster cluster = new JedisCluster(nodes);
       //添加密码调用
       JedisCluster cluster = new JedisCluster(nodes, 5000, 5000, 10, "yangfan@1995", new GenericObjectPoolConfig());
       //cluster.zadd("test_1", String.valueOf(""),"id_2");
       System.out.println(cluster.zscore("test_1", "id_1"));
       try {
           cluster.close();
       } catch (IOException e) {
           e.printStackTrace();
       }
   }

   🎜bind는 Redis 서버의 네트워크 카드 IP를 지정합니다. 이는 Redis 서버의 IP입니다. 이는 Redis 서버🎜🎜🎜Startup script🎜🎜🎜🎜cd /home/ubuntu/redis-4.0 .10/ 🎜🎜🎜🎜start.link.sh를 터치작업을 간단하게 하려면 🎜🎜🎜🎜 스크립트를 만들고 시작 스크립트를 🎜🎜

   "RedisServers":
   [
       {
       "server": "192.168.40.128",
       "port" : 7000,
       "password" : "yangfan@1995"
       },
       //...多个监听
   ],
   
   "DataStoreType" : "redis",
   
   "RedisStatsServer": //存储的redis监听接口
   {
       "server" : "127.0.0.1",
       "port" : 6379
   },
   
   "SqliteStatsStore" :
   {
       "path":  "/home/ubuntu/redis-4.0.10/working/redislive.db" //进行存储的文件
   } }

   🎜로 수정하세요. 초기 시작을 단순화하기 위한 것입니다. 시작 후 ps -ef | grep redis 명령을 사용하여 해당 스레드가 있는지 확인할 수 있습니다. 시작됨🎜🎜🎜클러스터 시작🎜🎜 🎜🎜관련 프로그램은 Ruby로 작성되어 있으므로 루디 운영 환경을 구축하려면 rudbygem🎜🎜🎜🎜sudo apt-get install ruby ​​​​rubygems -y<를 설치해야 합니다. /code>🎜🎜🎜🎜gem install redis, run 여기서는 매우 느리게 느껴지므로 redis 설치 디렉터리에서 <code>redis-trib.rb create --replicas 1 192.168.40.128을 실행하세요. src 폴더 redis-trib.rb🎜🎜🎜🎜에 7000 192.168. 163 84 슬롯이 포함되어 있습니다.는 그룹 액세스가 성공적으로 시작되었음을 의미합니다. 🎜🎜🎜🎜노드를 확인하고 다시 시작🎜🎜클러스터 실행 상태 확인: ./redis-trib.rb check 192.168.40.128:7000 명령을 사용하여 클러스터 상태를 확인하세요. Cluster🎜🎜🎜 성능 테스트🎜

   내장 테스트 도구 redis-benchmark

   🎜🎜🎜redis-benchmark -h 192.168.40.128 -p 6379 -c 100 -n 100000100 동시 연결 수, 100000 호스트가 localhost이고 포트가 6379인 Redis 서버의 성능을 감지하기 위한 요청이 이루어졌습니다. 🎜🎜🎜🎜redis-benchmark -h 192.168.40.128 -p 6379 -q -d 100100바이트 크기의 데이터 패킷에 액세스하는 성능을 테스트합니다. 🎜🎜🎜🎜redis-benchmark -t set,lpush -n 100000 -q특정 작업의 성능만 테스트하세요. 🎜🎜🎜🎜redis-benchmark -n 100000 -q script load "redis.call('set','foo','bar')"특정 숫자 액세스의 성능만 테스트합니다. 🎜🎜🎜🎜클러스터 비밀번호 설정🎜🎜시작이 완료된 후 먼저 각 노드의 구성 파일에 읽기 및 쓰기 권한이 있는지 확인하십시오. 읽기 및 쓰기 권한은 chmod로 수정해야 합니다. 권한은 🎜rrreee🎜를 통해 각 노드에 별도로 연결하여 설정할 수 있습니다.
   다시 시작하고 연결에 도달할 수 없는 경우 99번째 줄을 수정하세요. 시작 스크립트 redis-.sh를 시작하고 시작 스크립트 비밀번호를 시작하도록 구성
   @r = Redis.new(:host => @info[:host], :port => @info[: port], :timeout => 60,:password => "yangfan@1995") 🎜🎜🎜코드 테스트🎜rrreee🎜🎜마스터-슬레이브 모드, 센트리 및 클러스터 간의 관계🎜🎜🎜🎜 마스터-슬레이브 모드는 복제 및 지속성 관계와 마스터-슬레이브 백업 관계를 지정합니다🎜🎜🎜🎜센티넬: 마스터 데이터베이스가 발생할 때 서비스가 비정상적으로 중단된 후 개발자는 슬레이브 데이터베이스를 수동으로 선택하여 마스터 데이터베이스로 업그레이드할 수 있습니다. 시스템이 계속 서비스를 제공할 수 있도록 합니다. 이는 주로 마스터-슬레이브 복제 중에 마스터-슬레이브 관계를 수동으로 전환하는 문제를 해결하기 위한 탐지 도구이며 자동으로 마스터-슬레이브를 전환할 수 있습니다. 🎜

3. 使用哨兵，redis每个实例也是全量存储，每个redis存储的内容都是完整的数据，浪费内存且有木桶效应。为了最大化利用内存，可以采用集群，就是分布式存储。即每台redis存储不同的内容，共有16384个slot。每个redis分得一些slot，hash_slot = crc16(key) mod 16384 找到对应slot，键是可用键，如果有{}则取{}内的作为可用键，否则整个键是可用键集群至少需要3主3从，且每个实例使用不同的配置文件，主从不用配置，集群会自己选。

监控部署

RedisLive搭建部署

---

运行环境部署

1. git clone https://github.com/kumarnitin/RedisLive.git
   下载redislive,解压缩unzip -o -d /home/ubuntu/ RedisLive-master.zip

2. 进入src文件夹，复制example文件，编辑

   "RedisServers":
   [
       {
       "server": "192.168.40.128",
       "port" : 7000,
       "password" : "yangfan@1995"
       },
       //...多个监听
   ],
   
   "DataStoreType" : "redis",
   
   "RedisStatsServer": //存储的redis监听接口
   {
       "server" : "127.0.0.1",
       "port" : 6379
   },
   
   "SqliteStatsStore" :
   {
       "path":  "/home/ubuntu/redis-4.0.10/working/redislive.db" //进行存储的文件
   } }

3. ubuntu@ubuntu:~/redis-4.0.10$ mkdir pid  
ubuntu@ubuntu:~/redis-4.0.10$ mkdir log  
ubuntu@ubuntu:~/redis-4.0.10$ mkdir working
     //保存aof，rdb，node-config文件。

4. RedisLive分为两部分，其中一部分为监控脚本，另一部分为web服务，所以需要分别启动。`./redis-monitor.py
     --duration=120`./redis-live.py

Q&A

1. redis.clients.jedis.exceptions.JedisNoReachableClusterNodeException: No reachable node in cluster redis node的redis.conf 绑定ip设置为指定的redis节点ip，启动集群时只用指定ip启动，不使用192.168.40.128

2. connect refuse  关闭防火墙

3. No module named redis

• 查看python位置 which python

• 先备份 sudo cp /usr/bin/python /usr/bin/python_cp

• 删除 sudo rm /usr/bin/python

• 默认设置成python3.5，创建链接 sudo ln -s /usr/bin/python3.5 /usr/bin/python

相关推荐：

Redis集群搭建全记录

Redis集群部署及常用的操作命令

위 내용은 Redis 클러스터 구축 및 재배포 모니터링 및 배포의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!