Redis自动化安装以及集群实现

发布时间 - 2025-07-09 00:00:00    点击率:

redis实例安装与自动化集群实现

安装说明:自动解压安装包,并在指定路径编译安装。将配置文件模板复制到Redis实例的目录下,并根据端口号修改配置文件。

所需文件:配置文件、当前shell脚本、安装包。

参数说明:

  • 参数1(basedir):Redis安装包路径
  • 参数2(installdir):安装实例路径
  • 参数3(installfilename):安装包名称
  • 参数4(port):安装实例的端口号
#!/bin/bash
set -e
if [ $# -lt 4 ]; then
  echo "$(basename $0): Missing script argument"
  echo "$(basename $0) [installfilename] [port]"
  exit 9
fi
PortInUse=`netstat -anp | awk '{print $4}' | grep $4 | wc -l`
if [ $PortInUse -gt 0 ]; then
  echo "ERROR" $4 "Port is used by another process!"
  exit 9
fi
basedir=$1
installdir=$2
installfilename=$3
port=$4
cd $basedir
tar -zxvf $installfilename.tar.gz &>/dev/null 2>&1 &
cd $installfilename
mkdir -p $installdir
make PREFIX=$installdir install
sleep 1
scp $basedir/redis.conf $installdir
sed -i "s/instance_port/$port/g" $installdir/redis.conf
sleep 1
cd $installdir
./bin/redis-server redis.conf &>/dev/null 2>&1 &

配置文件模板:

################################## INCLUDES ####################################
include /path/to/local.conf
# include /path/to/other.conf

################################## MODULES ###################################### loadmodule /path/to/my_module.so

loadmodule /path/to/other_module.so

################################## NETWORK ##################################### bind 127.0.0.1 & your ip port instance_port tcp-backlog 511 timeout 0 tcp-keepalive 300

################################# GENERAL ##################################### daemonize yes supervised no pidfile ./redis_instance_port.pid loglevel notice logfile ./redis_log.log databases 16 always-show-logo yes

################################ SNAPSHOTTING ################################ save 900 1 save 300 10 save 60 10000

stop-writes-on-bgsave-error yes rdbcompression yes rdbchecksum yes dbfilename dump.rdb dir ./

################################# REPLICATION ################################## masterauth replica-serve-stale-data yes replica-read-only yes repl-diskless-sync no repl-diskless-sync-delay 5 repl-disable-tcp-nodelay no replica-priority 100

################################## SECURITY ################################### requirepass your_password

################################### CLIENTS ##################################### maxclients 10000

############################## MEMORY MANAGEMENT ################################# maxmemory

maxmemory-policy noeviction

maxmemory-samples 5

replica-ignore-maxmemory yes

############################# LAZY FREEING #################################### lazyfree-lazy-eviction no lazyfree-lazy-expire no lazyfree-lazy-server-del no replica-lazy-flush no

############################## APPEND ONLY MODE ############################### appendonly no

appendfilename "appendonly.aof"

appendfsync always

appendfsync everysec

appendfsync no

no-appendfsync-on-rewrite no auto-aof-rewrite-percentage 100 auto-aof-rewrite-min-size 64mb aof-load-truncated yes aof-use-rdb-preamble yes

################################ LUA SCRIPTING ############################### lua-time-limit 5000

################################ REDIS CLUSTER ############################### cluster-enabled yes

cluster-replica-validity-factor 10

cluster-require-full-coverage yes

cluster-replica-no-failover no

########################## CLUSTER DOCKER/NAT support ########################

################################## SLOW LOG ################################### slowlog-log-slower-than 10000 slowlog-max-len 128

################################ LATENCY MONITOR ############################## latency-monitor-threshold 0

############################# EVENT NOTIFICATION ############################## notify-keyspace-events ""

############################### ADVANCED CONFIG ############################### hash-max-ziplist-entries 512 hash-max-ziplist-value 64 list-max-ziplist-size -2 list-compress-depth 0 set-max-intset-entries 512 zset-max-ziplist-entries 128 zset-max-ziplist-value 64 hll-sparse-max-bytes 3000 stream-node-max-bytes 4096 stream-node-max-entries 100 activerehashing yes client-output-buffer-limit normal 0 0 0 client-output-buffer-limit replica 256mb 64mb 60 client-output-buffer-limit pubsub 32mb 8mb 60

client-query-buffer-limit 1gb

proto-max-bulk-len 512mb

hz 10 dynamic-hz yes aof-rewrite-incremental-fsync yes rdb-save-incremental-fsync yes

########################### ACTIVE DEFRAGMENTATION #######################

Enabled active defragmentation

activedefrag yes

Minimum amount of fragmentation waste to start active defrag

active-defrag-ignore-bytes 100mb

Minimum percentage of fragmentation to start active defrag

active-defrag-threshold-lower 10

Maximum percentage of fragmentation at which we use maximum effort

active-defrag-threshold-upper 100

Minimal effort for defrag in CPU percentage

active-defrag-cycle-min 5

Maximal effort for defrag in CPU percentage

active-defrag-cycle-max 75

Maximum number of set/hash/zset/list fields that will be processed from

the main dictionary scan

active-defrag-max-scan-fields 1000

安装示例:

sh redis_install.sh /usr/local/redis/ /usr/local/redis5/redis9008/ redis-5.0.4 9008

Redis实例的目录结构:

基于Python的Redis自动化集群实现:

基于Python的自动化集群实现,初始化节点为node_1~node_6,节点实例需要为集群模式,三主三从,自动化集群,分配slots,加入从节点,约3秒钟完成。

import redis

master

node_1 = {'host': '127.0.0.1', 'port': 9001, 'password': ''} node_2 = {'host': '127.0.0.1', 'port': 9002, 'password': ''} node_3 = {'host': '127.0.0.1', 'port': 9003, 'password': '***'}

slave

node_4 = {'host': '127.0.0.1', 'port': 9004, 'password': ''} node_5 = {'host': '127.0.0.1', 'port': 9005, 'password': ''} node_6 = {'host': '127.0.0.1', 'port': 9006, 'password': '***'}

redis_conn_1 = redis.StrictRedis(host=node_1["host"], port=node_1["port"], password=node_1["password"]) redis_conn_2 = redis.StrictRedis(host=node_2["host"], port=node_2["port"], password=node_2["password"]) redis_conn_3 = redis.StrictRedis(host=node_3["host"], port=node_3["port"], password=node_3["password"])

cluster meet

redis_conn_1.execute_command("cluster meet {0} {1}".format(node_2["host"],node_2["port"])) redis_conn_1.execute_command("cluster meet {0} {1}".format(node_3["host"],node_3["port"])) print('#################flush slots #################') redis_conn_1.execute_command('cluster flushslots') redis_conn_2.execute_command('cluster flushslots') redis_conn_3.execute_command('cluster flushslots') print('#################add slots#################') for i in range(0,16383+1): if i < 5461: redis_conn_1.execute_command('cluster addslots {0}'.format(i)) elif i < 10922: redis_conn_2.execute_command('cluster addslots {0}'.format(i)) else: redis_conn_3.execute_command('cluster addslots {0}'.format(i))

slave cluster meet

redis_conn_1.execute_command("cluster meet {0} {1}".format(node_4["host"],node_4["port"])) redis_conn_2.execute_command("cluster meet {0} {1}".format(node_5["host"],node_5["port"])) redis_conn_3.execute_command("cluster meet {0} {1}".format(node_6["host"],node_6["port"]))

cluster nodes

print(str(redis_conn_1.execute_command('cluster nodes'), encoding = "utf-8"))

示例:

这样一个Redis的集群,从实例的安装到集群的安装,如果环境依赖没有问题的话,基本上在一分钟内可以完成整个搭建过程。


# python  # redis  # docker  # ai  # shell脚本  # red 


相关栏目: 【 网站优化151355 】 【 网络推广146373 】 【 网络技术251813 】 【 AI营销90571


相关推荐: 常州企业网站制作公司,全国继续教育网怎么登录?  Laravel如何从数据库删除数据_Laravel destroy和delete方法区别  Laravel如何处理CORS跨域问题_Laravel项目CORS配置与解决方案  Laravel如何清理系统缓存命令_Laravel清除路由配置及视图缓存的方法【总结】  详解Oracle修改字段类型方法总结  Laravel怎么上传文件_Laravel图片上传及存储配置  零基础网站服务器架设实战:轻量应用与域名解析配置指南  Laravel中Service Container是做什么的_Laravel服务容器与依赖注入核心概念解析  Laravel如何处理和验证JSON类型的数据库字段  网站建设整体流程解析,建站其实很容易!  如何在阿里云虚拟机上搭建网站?步骤解析与避坑指南  Laravel怎么使用Intervention Image库处理图片上传和缩放  如何在服务器上三步完成建站并提升流量?  如何选择PHP开源工具快速搭建网站?  Laravel如何配置中间件Middleware_Laravel自定义中间件拦截请求与权限校验【步骤】  Laravel怎么集成Log日志记录_Laravel单文件与每日日志配置及自定义通道【详解】  Android GridView 滑动条设置一直显示状态(推荐)  Laravel如何实现全文搜索_Laravel Scout集成Algolia或Meilisearch教程  Android中Textview和图片同行显示(文字超出用省略号,图片自动靠右边)  Win10如何卸载预装Edge扩展_Win10卸载Edge扩展教程【方法】  Laravel如何实现API速率限制?(Rate Limiting教程)  如何在万网ECS上快速搭建专属网站?  Win11关机界面怎么改_Win11自定义关机画面设置【工具】  Linux虚拟化技术教程_KVMQEMU虚拟机安装与调优  Microsoft Edge如何解决网页加载问题 Edge浏览器加载问题修复  Laravel如何优雅地处理服务层_在Laravel中使用Service层和Repository层  Laravel API路由如何设计_Laravel构建RESTful API的路由最佳实践  如何快速搭建个人网站并优化SEO?  Laravel如何保护应用免受CSRF攻击?(原理和示例)  如何快速生成ASP一键建站模板并优化安全性?  如何快速查询域名建站关键信息?  Laravel怎么防止CSRF攻击_Laravel CSRF保护中间件原理与实践  Laravel如何使用Collections进行数据处理?(实用方法示例)  如何在景安服务器上快速搭建个人网站?  如何用花生壳三步快速搭建专属网站?  Laravel如何配置Horizon来管理队列?(安装和使用)  Laravel怎么集成Vue.js_Laravel Mix配置Vue开发环境  JavaScript中如何操作剪贴板_ClipboardAPI怎么用  Laravel Blade组件怎么用_Laravel可复用视图组件的创建与使用  如何实现javascript表单验证_正则表达式有哪些实用技巧  laravel怎么为API路由添加签名中间件保护_laravel API路由签名中间件保护方法  如何在云服务器上快速搭建个人网站?  Swift开发中switch语句值绑定模式  Android Socket接口实现即时通讯实例代码  如何在不使用负向后查找的情况下匹配特定条件前的换行符  UC浏览器如何切换小说阅读源_UC浏览器阅读源切换【方法】  百度浏览器网页无法复制文字怎么办 百度浏览器复制修复  如何撰写建站申请书?关键要点有哪些?  javascript中对象的定义、使用以及对象和原型链操作小结  装修招标网站设计制作流程,装修招标流程?