您的位置:首页 > 数据库 > Redis

Redis分布式框架搭建与集成

2017-02-09 14:10 579 查看

Redis学习文档

1.启动服务:

如果基础以了解,请从后往前看。
n 下载安装文件(2.8.24 zip)                           
https://github.com/MSOpenTech/redis/releases
 

1.1打开cmd到你redis目录下:例如cd D:\Develop\Redis\64bit

1.2然后 d:

1.3然后在目录下输入 redis-server.exe redis-conf

1.4启动服务成功。

1.5 redis-cli --raw 启动客户端 解决中文编码

 

Liunx安装:

n 下载安装文件:
http://download.redis.io/releases/redis-3.2.0.tar.gz
 

1.切到压缩文件路径下解压:tar -zxvf redis.gz

2.切到redis3.2.0路径:make

3.修改配置文件

4.查看端口状况:ps auxf | grep redis-server

5.启动服务:./redis-server redis.conf(你的redis路径再前)

6.关闭服务:./src/redis-cli -h 172.30.23.77 -p 6604 shutdown(你的redis路径在前)

 

2.Redis练习

jedis下载

   http://mvnrepository.com/artifact/redis.clients/jedis/2.8.1

 

2.1创建项目导入

commons-pool-1.5.4.jar//连接池

jedis-2.8.1.jar //java操作redis的两个jar包。

2.2创建一个Redis池

import redis.clients.jedis.Jedis;

import redis.clients.jedis.JedisPool;

import redis.clients.jedis.JedisPoolConfig;

 

public class RedisUtil {

 

/**

 * 服务器Ip 172.0.0为默认IP可以再配置文件中更改

 */

private static StringADDR ="127.0.0.1";

/**

 * //端口号 同上

 */

private static int PORT = 6379;

/**

 * //访问密码

 */

    private static StringAUTH ="admin";

    /**

     * 可用连接实例的最大数目,默认值为8;

       如果赋值为-1,则表示不限制;如果pool已经分配了maxActive个jedis实例,则此时pool的状态为exhausted(耗尽)。*/

    private static int MAX_ACTIVE = 1024;

    /**

 *  //控制一个pool最多有多少个状态为idle(空闲的)的jedis实例,默认值也是8。

 */

    private static int MAX_IDLE = 200;

    /**

 *  //等待可用连接的最大时间,单位毫秒,默认值为-1,表示永不超时。如果超过等待时间,则直接抛出JedisConnectionException;

 */

    private static int MAX_WAIT = 10000;

    private static int TIMEOUT = 10000;

    /**

 *  //在borrow一个jedis实例时,是否提前进行validate操作;如果为true,则得到的jedis实例均是可用的;

 */

    private static boolean TEST_ON_BORROW =true;

    private static JedisPooljedisPool =null;

    //初始化

    public RedisUtil(){

     initialPool();

    }

    /**

     * 初始化redis连接池

     */

    private static void initialPool(){

     try {

     JedisPoolConfig config = new JedisPoolConfig();

     config.setMaxActive(MAX_ACTIVE);

     config.setMaxIdle(MAX_IDLE);

     config.setMaxWait(MAX_WAIT);

     config.setTestOnBorrow(TEST_ON_BORROW);

     jedisPool = new JedisPool(config,ADDR,PORT,TIMEOUT,AUTH);

} catch (Exception e) {

e.printStackTrace();

}

    }

    /**

     * 获取redis 实例

     */

    public synchronized static Jedis getJedis(){

try {

if(jedisPool !=null){

Jedis rescoues = jedisPool.getResource();

return rescoues;

}else{

return null;

}

} catch (Exception e) {

e.printStackTrace();

return null;

}

    }

    /**

      * 释放jedis资源

      */

    public static void returnResource(final Jedis jedis)
{

        if (jedis !=null) {

            jedisPool.returnResource(jedis);

        }

     }

2.3创建实例操作数据

2.3.1 获取redis连接池

jedis= new RedisUtil().getJedis();

2.3.2对KEY的操作

**网上参考

System.out.println("======================key==========================");

        // 清空数据

        System.out.println("清空库中所有数据:"+jedis.flushDB());

        // 判断key否存在

        System.out.println("判断key999键是否存在:"+shardedJedis.exists("key999"));

        System.out.println("新增key001,value001键值对:"+shardedJedis.set("key001", "value001"));

        System.out.println("判断key001是否存在:"+shardedJedis.exists("key001"));

        // 输出系统中所有的key

        System.out.println("新增key002,value002键值对:"+shardedJedis.set("key002", "value002"));

        System.out.println("系统中所有键如下:");

        Set<String> keys = jedis.keys("*");

        Iterator<String> it=keys.iterator() ;   

        while(it.hasNext()){   

            String key = it.next();   

            System.out.println(key);   

        }

        // 删除某个key,若key不存在,则忽略该命令。

        System.out.println("系统中删除key002: "+jedis.del("key002"));

        System.out.println("判断key002是否存在:"+shardedJedis.exists("key002"));

        // 设置
key001的过期时间

        System.out.println("设置 key001的过期时间为5秒:"+jedis.expire("key001",
5));

        try{

            Thread.sleep(2000);

        }

        catch (InterruptedException e){

        }

        // 查看某个key的剩余生存时间,单位【秒】.永久生存或者不存在的都返回-1

        System.out.println("查看key001的剩余生存时间:"+jedis.ttl("key001"));

        // 移除某个key的生存时间

        System.out.println("移除key001的生存时间:"+jedis.persist("key001"));

        System.out.println("查看key001的剩余生存时间:"+jedis.ttl("key001"));

        // 查看key所储存的值的类型

        System.out.println("查看key所储存的值的类型:"+jedis.type("key001"));

        /*

         * 一些其他方法:1、修改键名:jedis.rename("key6", "key0");

         *             2、将当前db的key移动到给定的db当中:jedis.move("foo",
1)

         */

运行结果:

======================key==========================

清空库中所有数据:OK

判断key999键是否存在:false

新增key001,value001键值对:OK

判断key001是否存在:true

新增key002,value002键值对:OK

系统中所有键如下:

key002

key001

系统中删除key002: 1

判断key002是否存在:false

设置 key001<
20000
span style="font-family:'宋体';">的过期时间为5秒:1

查看key001的剩余生存时间:3

移除key001的生存时间:1

查看key001的剩余生存时间:-1

查看key所储存的值的类型:string

 

 

 

2.3.3操作字符串

System.out.println("======================String_1==========================");

        // 清空数据

        System.out.println("清空库中所有数据:"+jedis.flushDB());

        

        System.out.println("=============增=============");

        jedis.set("key001","value001");

        jedis.set("key002","value002");

        jedis.set("key003","value003");

        System.out.println("已新增的3个键值对如下:");

        System.out.println(jedis.get("key001"));

        System.out.println(jedis.get("key002"));

        System.out.println(jedis.get("key003"));

        

        System.out.println("=============删=============");  

        System.out.println("删除key003键值对:"+jedis.del("key003"));  

        System.out.println("获取key003键对应的值:"+jedis.get("key003"));

        

        System.out.println("=============改=============");

        //1、直接覆盖原来的数据

        System.out.println("直接覆盖key001原来的数据:"+jedis.set("key001","value001-update"));

        System.out.println("获取key001对应的新值:"+jedis.get("key001"));

        //2、直接覆盖原来的数据  

        System.out.println("在key002原来值后面追加:"+jedis.append("key002","+appendString"));

        System.out.println("获取key002对应的新值"+jedis.get("key002"));

   

        System.out.println("=============增,删,查(多个)=============");

        /**

         * mset,mget同时新增,修改,查询多个键值对

         * 等价于:

         * jedis.set("name","ssss");

         * jedis.set("jarorwar","xxxx");

         */  

        System.out.println("一次性新增key201,key202,key203,key204及其对应值:"+jedis.mset("key201","value201",

                        "key202","value202","key203","value203","key204","value204"));  

        System.out.println("一次性获取key201,key202,key203,key204各自对应的值:"+

                        jedis.mget("key201","key202","key203","key204"));

        System.out.println("一次性删除key201,key202:"+jedis.del(new String[]{"key201",
"key202"}));

        System.out.println("一次性获取key201,key202,key203,key204各自对应的值:"+

                jedis.mget("key201","key202","key203","key204"));

        System.out.println();

                

            

        //jedis具备的功能shardedJedis中也可直接使用,下面测试一些前面没用过的方法

        System.out.println("======================String_2==========================");

        // 清空数据

        System.out.println("清空库中所有数据:"+jedis.flushDB());       

       

        System.out.println("=============新增键值对时防止覆盖原先值=============");

        System.out.println("原先key301不存在时,新增key301:"+shardedJedis.setnx("key301",
"value301"));

        System.out.println("原先key302不存在时,新增key302:"+shardedJedis.setnx("key302",
"value302"));

        System.out.println("当key302存在时,尝试新增key302:"+shardedJedis.setnx("key302",
"value302_new"));

        System.out.println("获取key301对应的值:"+shardedJedis.get("key301"));

        System.out.println("获取key302对应的值:"+shardedJedis.get("key302"));

        

        System.out.println("=============超过有效期键值对被删除=============");

        // 设置key的有效期,并存储数据

        System.out.println("新增key303,并指定过期时间为2秒"+shardedJedis.setex("key303",
2, "key303-2second"));

        System.out.println("获取key303对应的值:"+shardedJedis.get("key303"));

        try{

            Thread.sleep(3000);

        }

        catch (InterruptedException e){

        }

        System.out.println("3秒之后,获取key303对应的值:"+shardedJedis.get("key303"));

        

        System.out.println("=============获取原值,更新为新值一步完成=============");

        System.out.println("key302原值:"+shardedJedis.getSet("key302", "value302-after-getset"));

        System.out.println("key302新值:"+shardedJedis.get("key302"));

        

        System.out.println("=============获取子串=============");

        System.out.println("获取key302对应值中的子串:"+shardedJedis.getrange("key302", 5, 7));  

 

运行结果:

======================String_1==========================

清空库中所有数据:OK

=============增=============

已新增的3个键值对如下:

value001

value002

value003

=============删=============

删除key003键值对:1

获取key003键对应的值:null

=============改=============

直接覆盖key001原来的数据:OK

获取key001对应的新值:value001-update

在key002原来值后面追加:21

获取key002对应的新值value002+appendString

=============增,删,查(多个)=============

一次性新增key201,key202,key203,key204及其对应值:OK

一次性获取key201,key202,key203,key204各自对应的值:[value201, value202, value203, value204]

一次性删除key201,key202:2

一次性获取key201,key202,key203,key204各自对应的值:[null, null, value203, value204]

 

======================String_2==========================

清空库中所有数据:OK

=============新增键值对时防止覆盖原先值=============

原先key301不存在时,新增key301:1

原先key302不存在时,新增key302:1

当key302存在时,尝试新增key302:0

获取key301对应的值:value301

获取key302对应的值:value302

=============超过有效期键值对被删除=============

新增key303,并指定过期时间为2秒OK

获取key303对应的值:key303-2second

3秒之后,获取key303对应的值:null

=============获取原值,更新为新值一步完成=============

key302原值:value302

key302新值:value302-after-getset

=============获取子串=============

获取key302对应值中的子串:302

2.3.4操作LIST

 System.out.println("======================list==========================");

        // 清空数据

        System.out.println("清空库中所有数据:"+jedis.flushDB());

 

        System.out.println("=============增=============");

        shardedJedis.lpush("stringlists", "vector");

        shardedJedis.lpush("stringlists", "ArrayList");

        shardedJedis.lpush("stringlists", "vector");

        shardedJedis.lpush("stringlists", "vector");

        shardedJedis.lpush("stringlists", "LinkedList");

        shardedJedis.lpush("stringlists", "MapList");

        shardedJedis.lpush("stringlists", "SerialList");

        shardedJedis.lpush("stringlists", "HashList");

        shardedJedis.lpush("numberlists", "3");

        shardedJedis.lpush("numberlists", "1");

        shardedJedis.lpush("numberlists", "5");

        shardedJedis.lpush("numberlists", "2");

        System.out.println("所有元素-stringlists:"+shardedJedis.lrange("stringlists", 0, -1));

        System.out.println("所有元素-numberlists:"+shardedJedis.lrange("numberlists", 0, -1));

        

        System.out.println("=============删=============");

        // 删除列表指定的值 ,第二个参数为删除的个数(有重复时),后add进去的值先被删,类似于出栈

        System.out.println("成功删除指定元素个数-stringlists:"+shardedJedis.lrem("stringlists", 2, "vector"));

        System.out.println("删除指定元素之后-stringlists:"+shardedJedis.lrange("stringlists", 0, -1));

        // 删除区间以外的数据

        System.out.println("删除下标0-3区间之外的元素:"+shardedJedis.ltrim("stringlists", 0, 3));

        System.out.println("删除指定区间之外元素后-stringlists:"+shardedJedis.lrange("stringlists", 0, -1));

        // 列表元素出栈

        System.out.println("出栈元素:"+shardedJedis.lpop("stringlists"));

        System.out.println("元素出栈后-stringlists:"+shardedJedis.lrange("stringlists", 0, -1));

        

        System.out.println("=============改=============");

        // 修改列表中指定下标的值

        shardedJedis.lset("stringlists", 0, "hello list!");

        System.out.println("下标为0的值修改后-stringlists:"+shardedJedis.lrange("stringlists",
0, -1));

        System.out.println("=============查=============");

        // 数组长度

        System.out.println("长度-stringlists:"+shardedJedis.llen("stringlists"));

        System.out.println("长度-numberlists:"+shardedJedis.llen("numberlists"));

        // 排序

        /*

         * list中存字符串时必须指定参数为alpha,如果不使用SortingParams,而是直接使用sort("list"),

         * 会出现"ERR One or more scores can't be converted into double"

         */

        SortingParams sortingParameters = new SortingParams();

        sortingParameters.alpha();

        sortingParameters.limit(0, 3);

        System.out.println("返回排序后的结果-stringlists:"+shardedJedis.sort("stringlists",sortingParameters));

        System.out.println("返回排序后的结果-numberlists:"+shardedJedis.sort("numberlists"));

        // 子串:  start为元素下标,end也为元素下标;-1代表倒数一个元素,-2代表倒数第二个元素

        System.out.println("子串-第二个开始到结束:"+shardedJedis.lrange("stringlists", 1, -1));

        // 获取列表指定下标的值

        System.out.println("获取下标为2的元素:"+shardedJedis.lindex("stringlists", 2)+"\n");

 

 

运行结果:

======================list==========================

清空库中所有数据:OK

=============增=============

所有元素-stringlists:[HashList, SerialList, MapList, LinkedList, vector, vector, ArrayList, vector]

所有元素-numberlists:[2, 5, 1, 3]

=============删=============

成功删除指定元素个数-stringlists:2

删除指定元素之后-stringlists:[HashList, SerialList, MapList, LinkedList, ArrayList, vector]

删除下标0-3区间之外的元素:OK

删除指定区间之外元素后-stringlists:[HashList, SerialList, MapList, LinkedList]

出栈元素:HashList

元素出栈后-stringlists:[SerialList, MapList, LinkedList]

=============改=============

下标为0的值修改后-stringlists:[hello list!, MapList, LinkedList]

=============查=============

长度-stringlists:3

长度-numberlists:4

返回排序后的结果-stringlists:[LinkedList, MapList, hello list!]

返回排序后的结果-numberlists:[1, 2, 3, 5]

子串-第二个开始到结束:[MapList, LinkedList]

获取下标为2的元素:LinkedList

 

2.3.5 操作SET

System.out.println("======================set==========================");

        // 清空数据

        System.out.println("清空库中所有数据:"+jedis.flushDB());

        

        System.out.println("=============增=============");

        System.out.println("向sets集合中加入元素element001:"+jedis.sadd("sets",
"element001"));

        System.out.println("向sets集合中加入元素element002:"+jedis.sadd("sets",
"element002"));

        System.out.println("向sets集合中加入元素element003:"+jedis.sadd("sets",
"element003"));

        System.out.println("向sets集合中加入元素element004:"+jedis.sadd("sets",
"element004"));

        System.out.println("查看sets集合中的所有元素:"+jedis.smembers("sets"));

        System.out.println();

        

        System.out.println("=============删=============");

        System.out.println("集合sets中删除元素element003:"+jedis.srem("sets",
"element003"));

        System.out.println("查看sets集合中的所有元素:"+jedis.smembers("sets"));

        /*System.out.println("sets集合中任意位置的元素出栈:"+jedis.spop("sets"));//注:出栈元素位置居然不定?--无实际意义

        System.out.println("查看sets集合中的所有元素:"+jedis.smembers("sets"));*/

        System.out.println();

        

        System.out.println("=============改=============");

        System.out.println();

        

        System.out.println("=============查=============");

        System.out.println("判断element001是否在集合sets中:"+jedis.sismember("sets",
"element001"));

        System.out.println("循环查询获取sets中的每个元素:");

        Set<String> set = jedis.smembers("sets");   

        Iterator<String> it=set.iterator() ;   

        while(it.hasNext()){   

            Object obj=it.next();   

            System.out.println(obj);   

        }  

        System.out.println();

        

        System.out.println("=============集合运算=============");

        System.out.println("sets1中添加元素element001:"+jedis.sadd("sets1", "element001"));

        System.out.println("sets1中添加元素element002:"+jedis.sadd("sets1", "element002"));

        System.out.println("sets1中添加元素element003:"+jedis.sadd("sets1", "element003"));

        System.out.println("sets1中添加元素element002:"+jedis.sadd("sets2", "element002"));

        System.out.println("sets1中添加元素element003:"+jedis.sadd("sets2", "element003"));

        System.out.println("sets1中添加元素element004:"+jedis.sadd("sets2", "element004"));

        System.out.println("查看sets1集合中的所有元素:"+jedis.smembers("sets1"));

        System.out.println("查看sets2集合中的所有元素:"+jedis.smembers("sets2"));

        System.out.println("sets1和sets2交集:"+jedis.sinter("sets1", "sets2"));

        System.out.println("sets1和sets2并集:"+jedis.sunion("sets1", "sets2"));

        System.out.println("sets1和sets2差集:"+jedis.sdiff("sets1", "sets2"));//差集:set1中有,set2中没有的元素

 

运行结果:

======================set==========================

清空库中所有数据:OK

=============增=============

向sets集合中加入元素element001:1

向sets集合中加入元素element002:1

向sets集合中加入元素element003:1

向sets集合中加入元素element004:1

查看sets集合中的所有元素:[element001, element002, element003, element004]

 

=============删=============

集合sets中删除元素element003:1

查看sets集合中的所有元素:[element001, element002, element004]

 

=============改=============

 

=============查=============

判断element001是否在集合sets中:true

循环查询获取sets中的每个元素:

element001

element002

element004

 

=============集合运算=============

sets1中添加元素element001:1

sets1中添加元素element002:1

sets1中添加元素element003:1

sets1中添加元素element002:1

sets1中添加元素element003:1

sets1中添加元素element004:1

查看sets1集合中的所有元素:[element001, element002, element003]

查看sets2集合中的所有元素:[element002, element003, element004]

sets1和sets2交集:[element002, element003]

sets1和sets2并集:[element001, element002, element003, element004]

sets1和sets2差集:[element001]

 

2.3.6 操作SortedSet(有序集合)

System.out.println("======================zset==========================");

        // 清空数据
        System.out.println(jedis.flushDB());

        

        System.out.println("=============增=============");

        System.out.println("zset中添加元素element001:"+shardedJedis.zadd("zset", 7.0, "element001"));

        System.out.println("zset中添加元素element002:"+shardedJedis.zadd("zset", 8.0, "element002"));

        System.out.println("zset中添加元素element003:"+shardedJedis.zadd("zset", 2.0, "element003"));

        System.out.println("zset中添加元素element004:"+shardedJedis.zadd("zset", 3.0, "element004"));

        System.out.println("zset集合中的所有元素:"+shardedJedis.zrange("zset", 0, -1));//按照权重值排序        System.out.println();

        

        System.out.println("=============删=============");

        System.out.println("zset中删除元素element002:"+shardedJedis.zrem("zset", "element002"));

        System.out.println("zset集合中的所有元素:"+shardedJedis.zrange("zset", 0, -1));

        System.out.println();

        

        System.out.println("=============改=============");

        System.out.println();

        

        System.out.println("=============查=============");

        System.out.println("统计zset集合中的元素中个数:"+shardedJedis.zcard("zset"));

        System.out.println("统计zset集合中权重某个范围内(1.0——5.0),元素的个数:"+shardedJedis.zcount("zset",
1.0, 5.0));

        System.out.println("查看zset集合中element004的权重:"+shardedJedis.zscore("zset",
"element004"));

        System.out.println("查看下标1到2范围内的元素值:"+shardedJedis.zrange("zset",
1, 2));

 

运行结果:

======================zset==========================

OK

=============增=============

zset中添加元素element001:1

zset中添加元素element002:1

zset中添加元素element003:1

zset中添加元素element004:1

zset集合中的所有元素:[element003, element004, element001, element002]

 

=============删=============

zset中删除元素element002:1

zset集合中的所有元素:[element003, element004, element001]

 

=============改=============

 

=============查=============

统计zset集合中的元素中个数:3

统计zset集合中权重某个范围内(1.0——5.0),元素的个数:2

查看zset集合中element004的权重:3.0

查看下标1到2范围内的元素值:[element004, element001]

 

2.3.7操作Hash功能

System.out.println("======================hash==========================");

        //清空数据
        System.out.println(jedis.flushDB());

        

        System.out.println("=============增=============");

        System.out.println("hashs中添加key001和value001键值对:"+shardedJedis.hset("hashs",
"key001", "value001"));

        System.out.println("hashs中添加key002和value002键值对:"+shardedJedis.hset("hashs",
"key002", "value002"));

        System.out.println("hashs中添加key003和value003键值对:"+shardedJedis.hset("hashs",
"key003", "value003"));

        System.out.println("新增key004和4的整型键值对:"+shardedJedis.hincrBy("hashs",
"key004", 4l));

        System.out.println("hashs中的所有值:"+shardedJedis.hvals("hashs"));

        System.out.println();

        

        System.out.println("=============删=============");

        System.out.println("hashs中删除key002键值对:"+shardedJedis.hdel("hashs", "key002"));

        System.out.println("hashs中的所有值:"+shardedJedis.hvals("hashs"));

        System.out.println();

        

        System.out.println("=============改=============");

        System.out.println("key004整型键值的值增加100:"+shardedJedis.hincrBy("hashs", "key004", 100l));

        System.out.println("hashs中的所有值:"+shardedJedis.hvals("hashs"));

        System.out.println();

        

        System.out.println("=============查=============");

        System.out.println("判断key003是否存在:"+shardedJedis.hexists("hashs", "key003"));

        System.out.println("获取key004对应的值:"+shardedJedis.hget("hashs", "key004"));

        System.out.println("批量获取key001和key003对应的值:"+shardedJedis.hmget("hashs",
"key001", "key003"));

        System.out.println("获取hashs中所有的key:"+shardedJedis.hkeys("hashs"));

        System.out.println("获取hashs中所有的value:"+shardedJedis.hvals("hashs"));

        System.out.println();

 

运行结果:

======================hash==========================

OK

=============增=============

hashs中添加key001和value001键值对:1

hashs中添加key002和value002键值对:1

hashs中添加key003和value003键值对:1

新增key004和4的整型键值对:4

hashs中的所有值:[value001, value002, value003, 4]

 

=============删=============

hashs中删除key002键值对:1

hashs中的所有值:[value001, value003, 4]

 

=============改=============

key004整型键值的值增加100:104

hashs中的所有值:[value001, value003, 104]

 

=============查=============

判断key003是否存在:true

获取key004对应的值:104

批量获取key001和key003对应的值:[value001, value003]

获取hashs中所有的key:[key004, key003, key001]

获取hashs中所有的value:[value001, value003, 104]

 

3.Redis常用命令:

   1)连接操作命令

    quit:关闭连接(connection)

    auth:简单密码认证

    help cmd: 查看cmd帮助,例如:help quit

    

    2)持久化

    save:将数据同步保存到磁盘

    bgsave:将数据异步保存到磁盘

    lastsave:返回上次成功将数据保存到磁盘的Unix时戳

    shundown:将数据同步保存到磁盘,然后关闭服务

    

    3)远程服务控制

    info:提供服务器的信息和统计

    monitor:实时转储收到的请求

    slaveof:改变复制策略设置

    config:在运行时配置Redis服务器

    

    4)对value操作的命令

    exists(key):确认一个key是否存在

    del(key):删除一个key

    type(key):返回值的类型

    keys(pattern):返回满足给定pattern的所有key

    randomkey:随机返回key空间的一个

    keyrename(oldname, newname):重命名key

    dbsize:返回当前数据库中key的数目

    expire:设定一个key的活动时间(s)

    ttl:获得一个key的活动时间

    select(index):按索引查询

    move(key, dbindex):移动当前数据库中的key到dbindex数据库

    flushdb:删除当前选择数据库中的所有key

    flushall:删除所有数据库中的所有key

    

    5)String

    set(key, value):给数据库中名称为key的string赋予值value

    get(key):返回数据库中名称为key的string的value

    getset(key, value):给名称为key的string赋予上一次的value

    mget(key1, key2,…, key N):返回库中多个string的value

    setnx(key, value):添加string,名称为key,值为value

    setex(key, time, value):向库中添加string,设定过期时间time

    mset(key N, value N):批量设置多个string的值

    msetnx(key N, value N):如果所有名称为key i的string都不存在

    incr(key):名称为key的string增1操作

    incrby(key, integer):名称为key的string增加integer

    decr(key):名称为key的string减1操作

    decrby(key, integer):名称为key的string减少integer

    append(key, value):名称为key的string的值附加value

    substr(key, start, end):返回名称为key的string的value的子串

    

    6)List 

    rpush(key, value):在名称为key的list尾添加一个值为value的元素

    lpush(key, value):在名称为key的list头添加一个值为value的
元素

    llen(key):返回名称为key的list的长度

    lrange(key, start, end):返回名称为key的list中start至end之间的元素

    ltrim(key, start, end):截取名称为key的list

    lindex(key, index):返回名称为key的list中index位置的元素

    lset(key, index, value):给名称为key的list中index位置的元素赋值

    lrem(key, count, value):删除count个key的list中值为value的元素

    lpop(key):返回并删除名称为key的list中的首元素

    rpop(key):返回并删除名称为key的list中的尾元素

    blpop(key1, key2,… key N, timeout):lpop命令的block版本。

    brpop(key1, key2,… key N, timeout):rpop的block版本。

    rpoplpush(srckey, dstkey):返回并删除名称为srckey的list的尾元素,

              并将该元素添加到名称为dstkey的list的头部

    

    7)Set

    sadd(key, member):向名称为key的set中添加元素member

    srem(key, member) :删除名称为key的set中的元素member

    spop(key) :随机返回并删除名称为key的set中一个元素

    smove(srckey, dstkey, member) :移到集合元素

    scard(key) :返回名称为key的set的基数

    sismember(key, member) :member是否是名称为key的set的元素

    sinter(key1, key2,…key N) :求交集

    sinterstore(dstkey, (keys)) :求交集并将交集保存到dstkey的集合

    sunion(key1, (keys)) :求并集

    sunionstore(dstkey, (keys)) :求并集并将并集保存到dstkey的集合

    sdiff(key1, (keys)) :求差集

    sdiffstore(dstkey, (keys)) :求差集并将差集保存到dstkey的集合

    smembers(key) :返回名称为key的set的所有元素

    srandmember(key) :随机返回名称为key的set的一个元素

    

    8)Hash

    hset(key, field, value):向名称为key的hash中添加元素field

    hget(key, field):返回名称为key的hash中field对应的value

    hmget(key, (fields)):返回名称为key的hash中field
i对应的value

    hmset(key, (fields)):向名称为key的hash中添加元素field 

    hincrby(key, field, integer):将名称为key的hash中field的value增加integer

    hexists(key, field):名称为key的hash中是否存在键为field的域

    hdel(key, field):删除名称为key的hash中键为field的域

    hlen(key):返回名称为key的hash中元素个数

    hkeys(key):返回名称为key的hash中所有键

    hvals(key):返回名称为key的hash中所有键对应的value

    hgetall(key):返回名称为key的hash中所有的键(field)及其对应的value

4.redis与多线程的小练习:

1.连接池同上

2.创建一个线程类操作数据

public class ThreadToolimplements Runnable{

private Jedis
j;

public ThreadTool(Jedis j) {

super();

this.j = j;

}

@Override

public void run() {

synchronized (j) {//因为要操作同一个数据所以必须同步

j.incr("age");

System.out.println(Thread.currentThread().getName()+": "

+j.get("name") +"-" +j.get("age") +"-" +j.get("qq"));

}

}

}

3.创建redis实例加入数据调用线程:

public class MyRedis {

 

private Jedis
jedis;

public void setUp(){

//jedis = new Jedis("127.0.0.1",6379);

//jedis.auth("admin");

jedis = new RedisUtil().getJedis();

//-----添加数据----------  

       jedis.set("name","张三");//向key-->name中放入了value-->xinxin
 

       System.out.println("刚加进去的:"+jedis.get("name"));//执行结果:xinxin
 

       jedis.append("name"," is crasy");//拼接

       System.out.println("拼接后:"+jedis.get("name"));

       jedis.del("name");  //删除某个键

       System.out.println("删除后:"+jedis.get("name"));

       //设置多个键值对

       jedis.mset("name","张三","age","23","qq","476777XXX");

       jedis.incr("age");//进行加1操作

       System.out.println("name原值"+jedis.getSet("name","李四"));

//       Jedis  jedis2 =  new RedisUtil().getJedis();

//       jedis2.lpush("list", "arrayList");

//       jedis2.lpush("list", "arrayList2");

//       jedis2.lpush("number", "0");

//       jedis2.lpush("number", "1");

       System.out.println("**********************************");

}

public static void main(String[] args) {

new MyRedis().setUp();

//new RedisUtil().getJedis().set("name", "测试");

//System.out.println(RedisUtil.getJedis().get("name"));

Jedis j = new Jedis("127.0.0.1",6379);

j.auth("admin");

System.out.println(j.get("name") +"-" + j.get("age") +"-" +
j.get("qq"));

//System.out.println("所有元素list: "+j.lrange("list", 0, -1));

//System.out.println("所有元素number: "+j.lrange("number", 0, -1));

//System.out.println("删除下标0-1区间之外的元素:"+j.ltrim("number",
0, 1));

//System.out.println("删除指定区间之外元素后-stringlists:"+j.lrange("number",
0, -1));

Thread t =new Thread(new ThreadTool(j));

Thread t2 =new Thread(new ThreadTool(j));

Thread t3 =new Thread(new ThreadTool(j));

t.start();

t2.start();

t3.start();

}

4.运行结果:

控制台:

刚加进去的: 张三

拼接后: 张三 is crasy

删除后: null

name原值张三

**********************************

李四-24-476777XXX

Thread-1: 李四-25-476777XXX

Thread-3: 李四-26-476777XXX

Thread-2: 李四-27-476777XXX

 

 

5.Spring整合redis

1.配置文件:

<!--引入redis配置文件-->

  <context:property-placeholderlocation="classpath*:config/redis.properties"/>

  <!-- Spring Data Redis
设置 -->

    <!-- redis
序列化策略 ,通常情况下key值采用String序列化策略,-->

    <!-- 如果不指定序列化策略,StringRedisTemplate的key和value都将采用String序列化策略;-->

    <beanid="stringRedisSerializer"

          class="org.springframework.data.redis.serializer.StringRedisSerializer"/>

 

    <beanid="jdkRedisSerializer"

          class="org.springframework.data.redis.serializer.JdkSerializationRedisSerializer"/>

 

  <!--单点Redis配置  -->

    <beanid="jedisConnectionFactory"class="org.springframework.data.redis.connection.jedis.JedisConnectionFactory"

          p:hostName="${redis.host}"p:port="${redis.port}"p:password="${redis.pass}"

           p:poolConfig-ref="jedisPoolConfig"/>

 

    <!-- 对string操作的封装-->

    <beanid="stringRedisTemplate"class="org.springframework.data.redis.core.StringRedisTemplate"

          p:connectionFactory-ref="jedisConnectionFactory"/>

          

    <!-- redis template definition p表示对该bean里面的属性进行注入,格式为p:属性名=注入的对象
效果与在bean里面使用<property>标签一样-->

    <beanid="redisTemplate"class="org.springframework.data.redis.core.RedisTemplate"

          p:connectionFactory-ref="jedisConnectionFactory"

          p:keySerializer-ref="stringRedisSerializer"p:hashKeySerializer-ref="stringRedisSerializer"

          p:valueSerializer-ref="jdkRedisSerializer"p:hashValueSerializer-ref="jdkRedisSerializer"/> 

                  

  <beanid="jedisPoolConfig"class="redis.clients.jedis.JedisPoolConfig"

          p:maxTotal="${redis.maxActive}"

          p:maxIdle="${redis.maxIdle}"

          p:maxWaitMillis="${redis.maxWait}"

          p:testOnBorrow="${redis.testOnBorrow}"

          p:testOnReturn="true"/>

6.Redis分布式:

1:配置文件(主从):

 

主服务:

port 6379  //端口

bind 172.0.0.1  //IP地址 后面接空格ip可以绑定多个IP地址。

requirepass admin  //密码

1.启动服务 cmd --> cd redis安装路径-->redis-server.exe redis.conf  

2.再启动从服务连接到主服务。

 

从服务:可以设置多个

port 6380  //端口

bind 172.16.3.16  //IP地址

requirepass admin  //密码

 slaveof 127.0.0.1 6379 //主机的ip端口

 masterauth admin  //主机的密码认证

 

启动:开启测试  redis-cli.exe -h
从配置中绑定ip -p 配置中的端口。

此时主服务set key value

从服务 auth admin

get key  ------------------OK!。

 

7.java操作redis分布式:

1.概念性的东西:

Redis实现集群的方法主要是采用一致性哈稀分片(Shard),将不同的key分配到不同的redis server上,达到横向扩展的目的。
shared一致性哈希采用以下方案:
1. Redis服务器节点划分:将每台服务器节点采用hash算法划分为160个虚拟节点(可以配置划分权重)
2. 将划分虚拟节点采用TreeMap存储
3. 对每个Redis服务器的物理连接采用LinkedHashMap存储对Key or KeyTag 采用同样的hash算法,然后从TreeMap获取大于等于键hash值得节点,取最邻近节点存储;当key的hash值大于虚拟节点hash值得最大值时,存入第一个虚拟节点。
4. sharded采用的hash算法:MD5 和 MurmurHash两种;默认采用64位的MurmurHash算法;
sharding的核心理念就是将数据按照一定的策略"分散"存储在集群中不同的物理server上,本质上实现了"大数据"分布式存储,以及体现了"集群"的高可用性.比如1亿数据,我们按照数据的hashcode散列存储在5个server上.

2.redis分片代码:

 

1.ShardedJedisPool连接池:

这里直接写spring配置文件。和new一样。

<beanid="RedisInitBean"name="RedisInitBean"class="com.utils.RedisInitBean">

        <!-- IP:Port:name  多个请求进redispool-->

        <constructor-argindex="0"type="List">

            <list>

                <value>172.16.3.16:6380:master</value>

                <value>127.0.0.1:6379:clint</value> 

                <value>172.16.3.34:6381:clint2</value>   

            </list>

        </constructor-arg>    

        <!-- maxWaitMillis -->

        <constructor-argindex="1"type="long">

            <value>1000</value>

        </constructor-arg>    

        <!-- MaxIdle -->    

        <constructor-argindex="2"type="int">

            <value>200</value>

        </constructor-arg>    

        <!-- testOnBorrow -->

        <constructor-argindex="3"type="Boolean">

            <value>true</value>

        </constructor-arg>        

    </bean>

2.RedisInitBean:

 

public class RedisInitBean {

 

  private List
Host;//连接请求

    private long maxWaitMillis;

    private int MaxIdle;

    private Boolean
testOnBorrow;

    private static List<JedisShardInfo>shards ;//分片信息

    private static ShardedJedisPoolpool;//分片池

    private static ShardedJedisjedis;//分片jedis实例

    

    //以下在构造方法中把分片信息处理好放在list中并初始化好连接池

    public RedisInitBean(List host,long maxWaitMillis,int maxIdle,

            Boolean testOnBorrow) {

        super();

        Host = host;

        this.maxWaitMillis = maxWaitMillis;

        MaxIdle = maxIdle;

        this.testOnBorrow = testOnBorrow;

        if(host.size()!=0){

            JedisShardInfo[] array = new JedisShardInfo[Host .size()];

            for (int i = 0; i <Host .size(); i++) {

             //配置多个端口ip : host .prot. timeout.name

                String h[] = ((String) Host .get(i)).split(":");

                JedisShardInfo s= new JedisShardInfo(h[0].trim(),Integer.parseInt(h[1].trim()), 30000, h[2].trim().toString());

                array[i] = s;

            }

            shards = Arrays.asList(array);

            //配置密码

//          for (JedisShardInfo j : shards) {

//j.setPassword("admin");

//}

            System.out.println(shards);

        }else{

            System.out.println("请检查Redis配置,host项为必填项!格式[IP:PORT]");

        }

 

        pool = new ShardedJedisPool(new JedisPoolConfig(),shards);

        jedis = pool.getResource();        //获取资源

}

    

    public synchronized ShardedJedis getSingletonInstance(){

        return jedis; //获取资源

    }

    

    public synchronized static void returnResource(){

        pool.returnResource(jedis);//释放

    }

    

    public synchronized static void destroy(){

        pool.destroy();

    }

}

3.测试代码:

public static void main(String[] args) {

ApplicationContext context=new ClassPathXmlApplicationContext("springAnnotation-core.xml");

 

RedisInitBean rb = (RedisInitBean) context.getBean("RedisInitBean");

ShardedJedis jedis = rb.getSingletonInstance();

ShardedJedisPipeline pipeline = jedis.pipelined();

//long start = System.currentTimeMillis();

//        for (int i = 0; i < 10; i++) {

//            pipeline.set("key1" + i, "张" + i);      

//        }

//        List<Object> results = pipeline.syncAndReturnAll();//管道的数据提交server

//        long end = System.currentTimeMillis();

//        rb.returnResource();

//        rb.destroy();

//        System.out.println("分布式连接池异步调用耗时: " + ((end - start)/1000.0) + "秒");

//        try {

//            Thread.sleep(5000);//睡5秒,然后打印jedis返回的结果

//        } catch (InterruptedException e) {

//            e.printStackTrace();

//        }

//        System.out.println("返回结果:"+results);

System.out.println(jedis.get("kk"));

        System.out.println(jedis.getShardInfo("kk").getName());

        

}

另外:

//jde.set("cnblog", "cnblog");

//jde.set("redis", "redis");

//jde.set("test", "test");

//jde.set("123456", "1234567");

//        Client client1 = jde.getShard("cnblog").getClient();

//        Client client2 = jde.getShard("redis").getClient();

//        Client client3 = jde.getShard("test").getClient();

//        Client client4 = jde.getShard("123456").getClient();

//        System.out.println(DataCaChe.getData("cnblog"));

//        ////打印key在哪个server中

//        System.out.println("cnblog in server:" + client1.getHost() + " and port is:" + client1.getPort());

//        System.out.println("redis  in server:" + client2.getHost() + " and port is:" + client2.getPort());

//        System.out.println("test   in server:" + client3.getHost() + " and port is:" + client3.getPort());

//        System.out.println("123456 in server:" + client4.getHost() + " and port is:" + client4.getPort());

可以看出来 存到了那个服务器。

以上增加数据后。在加入的任何服务都可以get到。

 

配置文件中只加入主服务。从服务虽然没在池中但是由于主从关系
从服务也可以get到主服务的数据。所以可以配置多个主从关系的分布。

8.redis解决并发:

Redis为单进程单线程模式,采用队列模式将并发访问变成串行访问,且多客户端对Redis的连接并不存在竞争关系。其次Redis提供一些命令SETNX,GETSET,可以方便实现分布式锁机制。

也可以使用队列以及redis发布订阅来消费方式处理。

因为这次是可行性的DEMO测试所以很多东西没有来得及做实战研究我就不BB了。

集群,哨兵,队列等模式等真正发布生产后在进行分享记录。

9.redis实际应用:

简单介绍一下我们实际应用的例子确定KEY的形式是必须的,这很重要关乎到你效率的快慢。



值我们一般插入序列化后的值,因为这样安全一些。
DEMO中的核心代码:
redis分片工厂在上述内容中:然后分享一个公用抽象方法。redis序列化的存取。
/**
* 根据key,使用管道,批量取value(value:取得是序列化对象)
* return Map<String, Object> String:传入的key,Object:序列化对象
*/
public static Map<String, Object> batchGetObject(Map<String, String> keyMap){
ShardedJedis jedis = null;
Map<String, Object> returnMap = new HashMap<String, Object>();
try {
jedis = getJedisOfPool();
//调用管道异步处理
HashMap<byte[], Response<byte[]>> valueMap = shardedJedisPipeline(keyMap,jedis);
       for(Iterator ite = valueMap.entrySet().iterator(); ite.hasNext();){  
           Map.Entry entry = (Map.Entry) ite.next();
           Response<byte[]> response=(Response<byte[]>)entry.getValue();
           byte[] value = response.get();
           if(null == value){
           
String newKey = new String((byte[])entry.getKey());
           
LoadDate(jedis, newKey);
           
value = jedis.get(newKey.getBytes());
           }
           returnMap.put(new String((byte[])entry.getKey()), value==null?
           
null:SerializationUtil.deserialize(value));
       }
} catch (Exception e) {
e.printStackTrace();
throw new RuntimeException("DataCaChe:批量查询Redis时有误,"+e.getMessage());
}
return returnMap;
}
/**
* 根据key,使用管道,批量取value(value:String对象)
* return Map<String, String> String:传入的key,String:value 值
*/
public static Map<String, String> batchGetString(Map<String, String> keyMap){
ShardedJedis jedis = null;
Map<String, String> returnMap = new HashMap<String, String>();
try {
jedis = getJedisOfPool();
HashMap<byte[], Response<byte[]>> valueMap = shardedJedisPipeline(keyMap, jedis);
       //获取后把value加工一下,不可以在上面加工因为是异步获取value
       for(Iterator ite = valueMap.entrySet().iterator(); ite.hasNext();){  
           Map.Entry entry = (Map.Entry) ite.next();
           Response<byte[]> response=(Response<byte[]>)entry.getValue();
           byte[] value = response.get();
           if(null == value){
           
LoadDate(jedis, (String)entry.getKey());
           
String stringValue = jedis.get((String)entry.getKey());
           
if(EmptyUtils.isEmpty(stringValue)){
           
value = null;
           
}else{
           
value = stringValue.getBytes();
           
}
           }
           returnMap.put((String)entry.getKey(), value==null?null:new String(value));
       }
} catch (Exception e) {
e.printStackTrace();
throw new RuntimeException("批量查询Redis时有误"+e.getMessage());
} finally{
jedis.close();
}
return returnMap;
}
/**
* 异步管道处理
*/
public static HashMap<byte[], Response<byte[]>> shardedJedisPipeline(Map<String, String> keyMap,ShardedJedis jedis){
HashMap<byte[], Response<byte[]>> valueMap=new HashMap<byte[], Response<byte[]>>();
try {
ShardedJedisPipeline pipeline = jedis.pipelined();//获取管道异步处理
       for(Iterator ite = keyMap.entrySet().iterator(); ite.hasNext();){  
           Map.Entry entry = (Map.Entry) ite.next();
           valueMap.put(((String) entry.getKey()).getBytes(), pipeline.get(((String) entry.getKey()).getBytes()));
       }
       pipeline.sync();
} catch (Exception e) {
e.printStackTrace();
throw new RuntimeException("批量查询Redis时有误"+e.getMessage());
} finally{
jedis.close();
}
return valueMap;
}
/**
* 存入序列化对象
* @param key
* @return
*/
public static void setSerialObject(String key,Object value) {
ShardedJedis jedis = null;
try {
jedis = getJedisOfPool();
jedis.set(key.getBytes(), SerializationUtil.serialize(value));
} catch (Exception e) {
e.printStackTrace();
} finally{
jedis.close();
}
}

/**
* 通过key 取对象值
* @param key
* @return
*/
public static Object getSerialObject(String newKey) {
ShardedJedis jedis = null;
Object obj = null;
try {
jedis = getJedisOfPool();
//有直接取,直接用jedis对象判断不要再去池中拿了
if(jedis.exists(newKey)){
return SerializationUtil.deserialize(jedis.get(newKey.getBytes()));
}
synchronized (lock) {
obj = jedis.get(newKey);//再次获取防止别的操作已经加载
if (obj == null){
LoadDate(jedis,newKey);//获取不到去数据库查
return jedis.get(newKey.getBytes())==null?
null:SerializationUtil.deserialize(jedis.get(newKey.getBytes()));
}
}
} catch (Exception e) {
e.printStackTrace();
} finally{
jedis.close();
}
return null;
}

序列化工具类:
/**

 * 序列化工具

 * @author Harley 2017 01 04

 *

 */

public class SerializationUtil {

    /**

     * 序列化

     * 

     * @param object

     * @return

     */

    public static byte[] serialize(Object object) {

        ObjectOutputStream oos = null;

        ByteArrayOutputStream baos = null;

        try {

            baos = new ByteArrayOutputStream();

            oos = new ObjectOutputStream(baos);

            oos.writeObject(object);

            byte[] bytes = baos.toByteArray();

            return bytes;

        } catch (Exception e) {

        }

        return null;

    }

    /**

     * 反序列化

     * 

     * @param bytes

     * @return

     */

    public static Object deserialize(byte[] bytes) {

        ByteArrayInputStream bais = null;

        try {

            bais = new ByteArrayInputStream(bytes);

            ObjectInputStream ois = new ObjectInputStream(bais);

            return ois.readObject();

        } catch (Exception e) {

        }

        return null;

    }

}

可以直接拿去用,省的写了。

坚持,做自己的百度人!
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签:  redis 分布式 序列化