MySQL数据导入Redis

程序遍历MySQL然后插入Redis，效率极低。利用redis-cli命令行工具有一个批量插入模式，是专门为批量执行命令设计的。可以把Mysql查询的内容格式化成redis-cli可用数据格式。

1， 根据表创建一个sql，将数据转换为redis可用的格式



(1) 表结构



(2) Redis的数据格式

*3\r\n            命令起始，定义共3个输入参数
$3\r\n            下一个参数字节长度
SET\r\n           命令参数
$3\r\n             下一个参数字节长度
key\r\n           变量参数
$5\r\n            下一个参数字节长度
value\r\n        值参数

注意：此处的\r\n为换行符，不是输入的字符。linux下导出文件分隔符是\r\n，而windows下是\n。

(3) 创建sql文件，sql语句是将数据转为redis可接收的语句

SELECT CONCAT(
"*4\r\n",
'$', LENGTH(redis_cmd), '\r\n',
redis_cmd, '\r\n',
'$', LENGTH(redis_key), '\r\n',
redis_key, '\r\n',
'$', LENGTH(hkey), '\r\n',
hkey, '\r\n',
'$', LENGTH(hval), '\r\n',
hval, '\r'
)
FROM (
SELECT
'HSET' as redis_cmd,
CONCAT('pid:' ,PID) AS redis_key,
ID AS hkey,
AREANAME AS hval
FROM td_area
) AS t

2，在有mysql客户端的机器执行命令



mysql -uroot -p123456 -h 127.0.0.1 database --skip-column-names --raw < /home/redis.sql | /usr/local/redis/bin/redis-cli -p 6380 --pipe

重要的mysql参数说明：

--raw: 使mysql不转换字段值中的换行符。

--skip-column-names: 使mysql输出的每行中不包含列名。