[项目回顾]基于Redis的在线用户列表解决方案

迁移:基于Redis的在线用户列表解决方案

前言:

  由于项目需求,需要在集群环境下实现在线用户列表的功能,并依靠在线列表实现用户单一登陆(同一账户只能一处登陆)功能:

  在单机环境下,在线列表的实现方案可以采用SessionListener来完成,当有Session创建和销毁的时候做相应的操作即可完成功能及将相应的Session的引用存放于内存中,由于持有了所有的Session的引用,故可以方便的实现用户单一登陆的功能(比如在第二次登陆的时候使之前登陆的账户所在的Session失效)。

  而在集群环境下,由于用户的请求可能分布在不同的Web服务器上,继续将在线用户列表储存在单机内存中已经不能满足需要,不同的Web服务器将会产生不同的在线列表,并且不能有效的实现单一用户登陆的功能,因为某一用户可能并不在接受到退出请求的Web服务器的在线用户列表中(在集群中的某台服务器上完成的登陆操作,而在其他服务器上完成退出操作)。

  现有解决方案:

  1.将用户的在线情况记录进入数据库中,依靠数据库完成对登陆状况的检测

  2.将在线列表放在一个公共的缓存服务器上

  由于缓存服务器可以为缓存内容设置指定有效期,可以方便实现Session过期的效果,以及避免让数据库的读写性能成为系统瓶颈等原因,我们采用了Redis来作为缓存服务器用于实现该功能。

单机环境下的解决方案:

  基于HttpSessionListener:

 1 import java.util.Date;
 2 import java.util.Hashtable;
 3 import java.util.Iterator;
 4 
 5 import javax.servlet.http.HttpSession;
 6 import javax.servlet.http.HttpSessionEvent;
 7 import javax.servlet.http.HttpSessionListener;
 8 
 9 import com.xxx.common.util.StringUtil;
10 
11 /**
12  * 
13  * @ClassName: SessionListener
14  * @Description: 记录所有登陆的Session信息,为在线列表做基础
15  * @author BuilderQiu
16  * @date 2013-9-18 09:35:13
17  *
18  */
19 public class SessionListener implements HttpSessionListener {
20     
21     //在线列表<uid,session>
22     private static Hashtable<String,HttpSession> sessionList = new Hashtable<String, HttpSession>();
23     
24 
25     public void sessionCreated(HttpSessionEvent event) {
26         //不做处理,只处理登陆用户的列表
27         
28     }
29 
30     public void sessionDestroyed(HttpSessionEvent event) {
31         removeSession(event.getSession());
32     }
33     
34     public static void removeSession(HttpSession session){
35         if(session == null){
36             return ;
37         }
38 
39         String uid=(String)session.getAttribute("clientUserId");//已登陆状态会将用户的UserId保存在session中
40         if(!StringUtil.isBlank(uid)){//判断是否登陆状态
41             removeSession(uid);
42         }
43     }
44     
45     public static void removeSession(String uid){
46         HttpSession session = sessionList.get(uid);
47         try{
48             sessionList.remove(uid);//先执行,防止session.invalidate()报错而不执行
49             if(session != null){
50                 session.invalidate();
51             }
52         }catch (Exception e) {
53             System.out.println("Session invalidate error!");
54         }
55     }
56     
57     public static void addSession(String uid,HttpSession session){
58         sessionList.put(uid, session);
59     }
60     
61     public static int getSessionCount(){
62         return sessionList.size();
63     }
64     
65     public static Iterator<HttpSession> getSessionSet(){
66         return sessionList.values().iterator();
67     }
68     
69     public static HttpSession getSession(String id){
70         return sessionList.get(id);
71     }
72     
73     public static boolean contains(String uid){
74         return sessionList.containsKey(uid);
75     }
76     
77     /**
78      * 
79      * @Title: isLoginOnThisSession
80      * @Description: 检测是否已经登陆
81      * @param @param uid 用户UserId
82      * @param @param sid 发起请求的用户的SessionId
83      * @return boolean true 校验通过 
84      */
85     public static boolean isLoginOnThisSession(String uid,String sid){
86         if(uid==null||sid==null){
87             return false;
88         }
89         if(contains(uid)){
90             HttpSession session = sessionList.get(uid);
91             
92             if(session!=null&&session.getId().equals(sid)){
93                 return true;
94             }
95         }
96         return false;
97     }
98     
99 }

  用户的在线状态全部维护记录在sessionList中,并且可以通过sessionList获取到任意用户的session对象,可以用来完成使指定用户离线的功能(调用该用户的session.invalidate()方法)。

  用户登录的时候调用addSession(uid,session)方法将用户与其登录的Session信息记录至sessionList中,再退出的时候调用removeSession(session) or removeSession(uid)方法,在强制下线的时候调用removeSession(uid)方法,以及一些其他的操作即可实现相应的功能。

基于Redis的解决方案:

  该解决方案的实质是将在线列表的所在的内存共享出来,让集群环境下所有的服务器都能够访问到这部分数据,并且将用户的在线状态在这块内存中进行维护。

  Redis连接池工具类:

 1 import java.util.ResourceBundle;
 2 
 3 import redis.clients.jedis.Jedis;
 4 import redis.clients.jedis.JedisPool;
 5 import redis.clients.jedis.JedisPoolConfig;
 6 
 7 public class RedisPoolUtils {
 8     
 9     private static final JedisPool pool;
10     
11     static{
12         ResourceBundle bundle = ResourceBundle.getBundle("redis");
13         JedisPoolConfig config = new JedisPoolConfig();
14         if (bundle == null) {    
15             throw new IllegalArgumentException("[redis.properties] is not found!");    
16         }
17         //设置池配置项值  
18         config.setMaxActive(Integer.valueOf(bundle.getString("jedis.pool.maxActive")));    
19         config.setMaxIdle(Integer.valueOf(bundle.getString("jedis.pool.maxIdle")));    
20         config.setMaxWait(Long.valueOf(bundle.getString("jedis.pool.maxWait")));    
21         config.setTestOnBorrow(Boolean.valueOf(bundle.getString("jedis.pool.testOnBorrow")));    
22         config.setTestOnReturn(Boolean.valueOf(bundle.getString("jedis.pool.testOnReturn")));
23         
24         pool = new JedisPool(config, bundle.getString("redis.ip"),Integer.valueOf(bundle.getString("redis.port")) );
25     }
26     
27     /**
28      * 
29      * @Title: release
30      * @Description: 释放连接
31      * @param @param jedis
32      * @return void
33      * @throws
34      */
35     public static void release(Jedis jedis){
36         pool.returnResource(jedis);
37     }
38     
39     public static Jedis getJedis(){
40         return pool.getResource();
41     }
42 
43 }

  Redis在线列表工具类:

  1 import java.util.ArrayList;
  2 import java.util.Collections;
  3 import java.util.Comparator;
  4 import java.util.Date;
  5 import java.util.List;
  6 import java.util.Set;
  7 
  8 import net.sf.json.JSONObject;
  9 import net.sf.json.JsonConfig;
 10 import net.sf.json.processors.JsonValueProcessor;
 11 
 12 import cn.sccl.common.util.StringUtil;
 13 
 14 import com.xxx.common.util.JsonDateValueProcessor;
 15 import com.xxx.user.model.ClientUser;
 16 
 17 import redis.clients.jedis.Jedis;
 18 import redis.clients.jedis.Pipeline;
 19 import tools.Constants;
 20 
 21 /**
 22  * 
 23  * Redis缓存中存放两组key:
 24  * 1.SID_PREFIX开头,存放登陆用户的SessionId与ClientUser的Json数据
 25  * 2.UID_PREFIX开头,存放登录用户的UID与SessionId对于的数据
 26  *
 27  * 3.VID_PREFIX开头,存放位于指定页面用户的数据(与Ajax一起使用,用于实现指定页面同时浏览人数的限制功能)
 28  * 
 29  * @ClassName: OnlineUtils
 30  * @Description: 在线列表操作工具类
 31  * @author BuilderQiu
 32  * @date 2014-1-9 上午09:25:43
 33  *
 34  */
 35 public class OnlineUtils {
 36     
 37     //KEY值根据SessionID生成    
 38     private static final String SID_PREFIX = "online:sid:";
 39     private static final String UID_PREFIX = "online:uid:";
 40     private static final String VID_PREFIX = "online:vid:";
 41     private static final int OVERDATETIME = 30 * 60;
 42     private static final int BROADCAST_OVERDATETIME = 70;//Ajax每60秒发起一次,超过BROADCAST_OVERDATETIME时间长度未发起表示已经离开该页面
 43 
 44     public static void login(String sid,ClientUser user){
 45         
 46         Jedis jedis = RedisPoolUtils.getJedis();
 47 
 48         jedis.setex(SID_PREFIX+sid, OVERDATETIME, userToString(user));
 49         jedis.setex(UID_PREFIX+user.getId(), OVERDATETIME, sid);
 50         
 51         RedisPoolUtils.release(jedis);
 52     }
 53     
 54     public static void broadcast(String uid,String identify){
 55         
 56         if(uid==null||"".equals(uid)) //异常数据,正常情况下登陆用户才会发起该请求
 57             return ;
 58         
 59         Jedis jedis = RedisPoolUtils.getJedis();
 60         
 61         jedis.setex(VID_PREFIX+identify+":"+uid, BROADCAST_OVERDATETIME, uid);
 62         
 63         RedisPoolUtils.release(jedis);
 64     }
 65     
 66     
 67     private static String userToString(ClientUser user){
 68         JsonConfig  config = new JsonConfig();
 69         JsonValueProcessor processor = new JsonDateValueProcessor("yyyy-MM-dd HH:mm:ss");
 70         config.registerJsonValueProcessor(Date.class, processor);
 71         JSONObject obj = JSONObject.fromObject(user, config);
 72 
 73         return obj.toString();
 74     }
 75     
 76     /**
 77      * 
 78      * @Title: logout
 79      * @Description: 退出
 80      * @param @param sessionId
 81      * @return void
 82      * @throws
 83      */
 84     public static void logout(String sid,String uid){
 85         
 86         Jedis jedis = RedisPoolUtils.getJedis();
 87         
 88         jedis.del(SID_PREFIX+sid);
 89         jedis.del(UID_PREFIX+uid);
 90         
 91         RedisPoolUtils.release(jedis);
 92     }
 93     
 94     /**
 95      * 
 96      * @Title: logout
 97      * @Description: 退出
 98      * @param @param UserId  使指定用户下线
 99      * @return void
100      * @throws
101      */
102     public static void logout(String uid){
103         Jedis jedis = RedisPoolUtils.getJedis();
104         
105         //删除sid
106         jedis.del(SID_PREFIX+jedis.get(UID_PREFIX+uid));
107         //删除uid
108         jedis.del(UID_PREFIX+uid);
109         
110         RedisPoolUtils.release(jedis);
111     }
112     
113     public static String getClientUserBySessionId(String sid){
114         
115         Jedis jedis = RedisPoolUtils.getJedis();
116         
117         String user = jedis.get(SID_PREFIX+sid);
118         
119         RedisPoolUtils.release(jedis);
120         
121         return user;
122     }
123     
124     public static String getClientUserByUid(String uid){
125         Jedis jedis = RedisPoolUtils.getJedis();
126         
127         String user = jedis.get(SID_PREFIX+jedis.get(UID_PREFIX+uid));
128         
129         RedisPoolUtils.release(jedis);
130         
131         return user;
132     }
133     
134     /**
135      * 
136      * @Title: online
137      * @Description: 所有的key
138      * @return List  
139      * @throws
140      */
141     public static List online(){
142 
143         Jedis jedis = RedisPoolUtils.getJedis();
144         
145         Set online = jedis.keys(SID_PREFIX+"*");
146         
147         RedisPoolUtils.release(jedis);
148         return new ArrayList(online);
149     }
150     
151     /**
152      * 
153      * @Title: online
154      * @Description: 分页显示在线列表
155      * @return List  
156      * @throws
157      */
158     public static List onlineByPage(int page,int pageSize) throws Exception{
159         
160         Jedis jedis = RedisPoolUtils.getJedis();
161         
162         Set onlineSet = jedis.keys(SID_PREFIX+"*");
163         
164         
165         List onlines =new ArrayList(onlineSet);
166         
167         if(onlines.size() == 0){
168             return null;
169         }
170         
171         Pipeline pip = jedis.pipelined();
172         for(Object key:onlines){
173             pip.get(getKey(key));
174         }
175         List result = pip.syncAndReturnAll();
176         RedisPoolUtils.release(jedis);
177         
178         List<ClientUser> listUser=new ArrayList<ClientUser>();
179         for(int i=0;i<result.size();i++){
180             listUser.add(Constants.json2ClientUser((String)result.get(i)));
181         }
182         Collections.sort(listUser,new Comparator<ClientUser>(){
183             public int compare(ClientUser o1, ClientUser o2) {
184                 return o2.getLastLoginTime().compareTo(o1.getLastLoginTime());
185             }
186         });
187         onlines=listUser;
188         int start = (page - 1) * pageSize;
189         int toIndex=(start+pageSize)>onlines.size()?onlines.size():start+pageSize;
190         List list = onlines.subList(start, toIndex);
191     
192         return list;
193     }
194     
195     private static String getKey(Object obj){
196         
197         String temp = String.valueOf(obj);
198         String key[] = temp.split(":");
199 
200         return SID_PREFIX+key[key.length-1];
201     }
202     
203     /**
204      * 
205      * @Title: onlineCount
206      * @Description: 总在线人数
207      * @param @return
208      * @return int
209      * @throws
210      */
211     public static int onlineCount(){
212         
213         Jedis jedis = RedisPoolUtils.getJedis();
214         
215         Set online = jedis.keys(SID_PREFIX+"*");
216         
217         RedisPoolUtils.release(jedis);
218         
219         return online.size();
220         
221     }
222     
223     /**
224      * 获取指定页面在线人数总数
225      */
226     public static int broadcastCount(String identify) {
227         Jedis jedis = RedisPoolUtils.getJedis();
228         
229         Set online = jedis.keys(VID_PREFIX+identify+":*");
230         
231         
232 
233         RedisPoolUtils.release(jedis);
234         
235         return online.size();
236     }
237     
238     /**
239      * 自己是否在线
240      */
241     public static boolean broadcastIsOnline(String identify,String uid) {
242         
243         Jedis jedis = RedisPoolUtils.getJedis();
244         
245         String online = jedis.get(VID_PREFIX+identify+":"+uid);
246         
247         RedisPoolUtils.release(jedis);
248         
249         return !StringUtil.isBlank(online);//不为空就代表已经找到数据了,也就是上线了
250     }
251     
252     /**
253      * 获取指定页面在线人数总数
254      */
255     public static int broadcastCount() {
256         Jedis jedis = RedisPoolUtils.getJedis();
257         
258         Set online = jedis.keys(VID_PREFIX+"*");
259         
260         RedisPoolUtils.release(jedis);
261         
262         return online.size();
263     }
264     
265     
266     /**
267      * 
268      * @Title: isOnline
269      * @Description: 指定账号是否登陆
270      * @param @param sessionId
271      * @param @return
272      * @return boolean 
273      * @throws
274      */
275     public static boolean isOnline(String uid){
276         
277         Jedis jedis = RedisPoolUtils.getJedis();
278         
279         boolean isLogin = jedis.exists(UID_PREFIX+uid);
280         
281         RedisPoolUtils.release(jedis);
282         
283         return isLogin;
284     }
285     
286     public static boolean isOnline(String uid,String sid){
287         
288         Jedis jedis = RedisPoolUtils.getJedis();
289         
290         String loginSid = jedis.get(UID_PREFIX+uid);
291         
292         RedisPoolUtils.release(jedis);
293         
294         return sid.equals(loginSid);
295     }
296 }

    由于在线状态是记录在Redis中的,并不单纯依靠Session的过期机制来实现,所以需要通过拦截器在每次发送请求的时候去更新Redis中相应的缓存过期时间来更新用户的在线状态。

  登陆、退出操作与单机版相似,强制下线需要配合拦截器实现,当用户下次访问的时候,自己来校验自己的状态是否为已经下线,不再由服务器控制。

  配合拦截器实现在线状态维持与强制登陆(使其他地方登陆了该账户的用户下线)功能:

 1 ...
 2 if(uid != null){//已登录
 3     if(!OnlineUtils.isOnline(uid, session.getId())){
 4         session.invalidate();
 5 
 6         return ai.invoke();
 7     }else{
 8         OnlineUtils.login(session.getId(), (ClientUser)session.getAttribute("clientUser"));
 9         //刷新缓存
10     }
11 }
12 ...

注:Redis在线列表工具类中的部分代码是后来需要实现限制同时访问指定页面浏览人数功能而添加的,同样基于Redis实现,前端由Ajax轮询来更新用户停留页面的状态。

附录:

  Redis连接池配置文件:

 1 ###redis##config########
 2 #redis服务器ip # 
 3 #redis.ip=localhost
 4 #redis服务器端口号#
 5 redis.port=6379
 6 
 7 ###jedis##pool##config###
 8 #jedis的最大分配对象#
 9 jedis.pool.maxActive=1024
10 #jedis最大保存idel状态对象数 #
11 jedis.pool.maxIdle=200
12 #jedis池没有对象返回时,最大等待时间 #
13 jedis.pool.maxWait=1000
14 #jedis调用borrowObject方法时,是否进行有效检查#
15 jedis.pool.testOnBorrow=true
16 #jedis调用returnObject方法时,是否进行有效检查 #
17 jedis.pool.testOnReturn=true

 

posted @ 2014-01-24 15:31  BuilderQiu  阅读(15371)  评论(5编辑  收藏  举报