Jedis使用总结【pipeline】【分布式的id生成器】【分布式锁【watch】【multi】】【redis分布式】

Jedis是redis的java版本的客户端实现。本文做个总结,主要分享如下内容:【pipeline】【分布式的id生成器】【分布式锁【watch】【multi】】【redis分布式】好了,一个一个来。


一、 Pipeline


官方的说明是:starts a pipeline,which is a very efficient way to send lots of command and read all the responses when you finish sending them。简单点说pipeline适用于批处理。当有大量的操作需要一次性执行的时候,可以用管道。
示例:

Jedisjedis= newJedis(String,int);
Pipelinep=jedis.pipelined();
p.set(key,value);
//每个操作都发送请求给redis-server

p.get(key,value);

p.sync();//
这段代码获取所有的response

这里我进行了20w次连续操作(10w读,10w写),不用pipeline耗时:187242ms,用pipeline耗时:1188ms,可见使用管道后的性能上了一个台阶。看了代码了解到,管道通过一次性写入请求,然后一次性读取响应。也就是说jedis是:request response,request response,...;pipeline则是:request request... response response的方式。这样无需每次请求都等待server端的响应。

二、跨jvm的id生成


谈到这个话题,首先要知道redis-server端是单线程来处理client端的请求的。
这样来实现一个id生成器就非常简单了,只要简单的调用jdeis.incr(key);就搞定了。
你或许会问,incr是原子操作吗,能保证不会出现并发问题吗,前面说过,server端是单线程处理请求的。

三、【跨jvm的锁实现【watch】【multi】】


首先说下这个问题的使用场景,有些时候我们业务逻辑是在不同的jvm进程甚至是不同的物理机上的jvm处理的。这样如何来实现不同jvm上的同步问题呢,其实我们可以基于redis来实现一个锁。
具体事务和监听请参考文章

redis学习笔记之事务
暂时找到三种实现方式:
1. 通过jedis.setnx(key,value)实现
importjava.util.Random;


importorg.apache.commons.pool.impl.GenericObjectPool.Config;

importredis.clients.jedis.Jedis;
importredis.clients.jedis.JedisPool;
importredis.clients.jedis.Transaction;

/**

*@author
Teaey
*/
public
classRedisLock{
//加锁标志

publicstaticfinalStringLOCKED="TRUE";
publicstaticfinallongONE_MILLI_NANOS=1000000L;
//认超时时间(毫秒)

publicstaticfinallongDEFAULT_TIME_OUT=3000;
publicstaticJedisPoolpool;
publicstaticfinalRandomr=newRandom();
//锁的超时时间(秒),过期删除

publicstaticfinalintEXPIRE=5*60;
static{
pool=newJedisPool(newConfig(),"host",6379);
}
privateJedisjedis;
privateStringkey;
//锁状态标志

privatebooleanlocked=false;

publicRedisLock(Stringkey){
this.key=key;
this.jedis=pool.getResource();
}

publicbooleanlock(longtimeout){
longnano=System.nanoTime();
timeout*=ONE_MILLI_NANOS;
try{
while((System.nanoTime()-nano)<timeout){
if(jedis.setnx(key,LOCKED)==1){
jedis.expire(key,EXPIRE);
locked=true;
returnlocked;
}
//短暂休眠,nano避免出现活锁

Thread.sleep(3,r.nextInt(500));
}
}
catch(Exceptione){
}
return
false;
}
publicbooleanlock(){
returnlock(DEFAULT_TIME_OUT);
}

//无论是否加锁成功,必须调用

publicvoidunlock(){
try{
if(locked)
jedis.del(key);
}finally
{
pool.returnResource(jedis);
}
}
}
2. 通过事务(multi)实现
由于采纳第一张方法,第二种跟第三种实现只贴了关键代码,望谅解。^_^
publicbooleanlock_2(longtimeout){
longnano=System.nanoTime();
timeout*=ONE_MILLI_NANOS;
try{
while((System.nanoTime()-nano)<timeout){
Transactiont=jedis.multi();
//
开启事务,当server端收到multi指令
//会将该client的命令放入一个队列,然后依次执行,知道收到exec指令

t.getSet(key,LOCKED);
t.expire(key,EXPIRE);
Stringret=(String)t.exec().get(0);
if(ret==null||ret.equals("UNLOCK")){
return
true;
}
//短暂休眠,nano避免出现活锁

Thread.sleep(3,r.nextInt(500));
}
}
catch(Exceptione){
}
return
false
;
}
3. 通过事务+监听实现
publiclock_3(longtimeout){
longnano=System.nanoTime();
timeout*=ONE_MILLI_NANOS;
try{
while((System.nanoTime()-nano)<timeout){
jedis.watch(key);
//开启watch之后,如果key的值被修改,则事务失败,exec方法返回null

Stringvalue=jedis.get(key);
if(value==null||value.equals("UNLOCK")){
Transactiont=jedis.multi();
t.setex(key,EXPIRE,LOCKED);
if(t.exec()!=
null){
returntrue;
}
}
jedis.unwatch();
//短暂休眠,nano避免出现活锁

Thread.sleep(3,238)">catch(Exceptione){
}
return
false
;
}

最终采用第一种实现,因为加锁只需发送一个请求,效率最高。

四、【redis分布式】

最后一个话题,jedis的分布式。在jedis的源码里发现了两种hash算法(MD5,MURMUR Hash(认)),也可以自己实现redis.clients.util.Hashing接口扩展。
List<JedisShardInfo>hosts=newArrayList();

//server1
JedisShardInfohost1=
newJedisShardInfo("",6380,2000);
//server2

JedisShardInfohost2=
newJedisShardInfo("",6381,2000); hosts.add(host1); hosts.add(host2); ShardedJedisjedis=newShardedJedis(hosts); jedis.set("key","");

相关文章

迭代器模式(Iterator)迭代器模式(Iterator)[Cursor]意图...
高性能IO模型浅析服务器端编程经常需要构造高性能的IO模型,...
策略模式(Strategy)策略模式(Strategy)[Policy]意图:定...
访问者模式(Visitor)访问者模式(Visitor)意图:表示一个...
命令模式(Command)命令模式(Command)[Action/Transactio...
生成器模式(Builder)生成器模式(Builder)意图:将一个对...