redis进阶-分表分库、读写分离、高可用
2020-03-23 本文已影响0人
Martain
场景:假设如果我们有多台内存为8G的服务器,现在想存下64G的数据,这个时候该如何设计呢?
解决方法:设置多台redis服务器,将数据分别存在这些服务器中。
一、分表分库-模拟启动多个redis服务器
前面我们介绍了根据配置文件来启动redis服务器
redis-server conf-path #conf-path为配置文件的路径
-
1、从默认配置中复制出3个配置文件,命名为6380.conf、6381.conf、6382.conf,并将配置文件中的port修改为文件名
准备好配置文件 -
2、分别根据这3个配置文件启动服务器
6380服务启动 -
3、实现Redis服务网关
import java.io.IOException;
import java.io.InputStream;
import java.net.ServerSocket;
import java.net.Socket;
import java.util.ArrayList;
import java.util.List;
/**
* @author Martin
* @version 1.0
* @date 2020/3/23 7:36 下午
*/
public class RedisSpit {
// 服务器列表
public static List<String> servers = new ArrayList<>();
static {
servers.add("127.0.0.1:6380");
servers.add("127.0.0.1:6381");
servers.add("127.0.0.1:6382");
}
public static void main(String[] args) throws IOException {
/**
* redis服务器网关 客户端统一连接该网关
*/
ServerSocket serverSocket = new ServerSocket(12530);
Socket socket;
while ((socket = serverSocket.accept())!= null){
try {
while (true){
InputStream inputStream = socket.getInputStream();
byte[] request = new byte[1024];
inputStream.read(request);
String req = new String(request);
String[] params = req.split("\r\n");
int keyLength = Integer.parseInt(params[3].split("\\$")[1]);
// 根据键长选择服务器
int mod = keyLength % servers.size();
String[] serverInfo = servers.get(mod).split(":");
// 连接实际的redis服务器
Socket client = new Socket(serverInfo[0],Integer.parseInt(serverInfo[1]));
// 数据转发
client.getOutputStream().write(request);
byte[] response = new byte[1024];
client.getInputStream().read(response);
client.close();
// 数据回写
socket.getOutputStream().write(response);
}
}catch (Exception e){
e.printStackTrace();
}
}
}
}
这个根据键长对服务器数量取模来进行分库,很方便的完成了对大数据的处理
二、读写分离
读写分离应用到了主从数据库的知识,通过配置主从数据库,来实现读写分离
如何配置redis的主从数据库呢?答案是利用配置文件中的slaveof,配置主节点
格式为 slaveof server port (如果conf里面没有添加即可)
-
主服务器
主服务器6380 -
从服务器
从服务器6381
三、高可用
未完待续...
原理:及时心跳主服务器,如果主服务器挂了,及时使用从服务器充当主服务器。