ZeroMQ(java)之Router/Dealer模式

本教程转自:http://blog.csdn.net/kobejayandy/article/details/20163527

在开始之前先把guid里面提到的几个ZeroMQ的特性列一下吧:

(1)ZeroMQ有自己的I/O线程来异步的处理I/O,而且后台采用了无锁的数据结构

(2)在ZeroMQ中,所有的组件都可以动态的加入和移除,而且可以启动组件以任何的顺利,例如我们可以先启动request,再启动response,依然可以工作,而且还会自动的重连接。

(3)如果有需要的话,会自动的将message进行排队,当然这都是有一套的模式的,一般情况下会尽量早的将数据发送到receiver。

(4)当缓冲的message队列满了以后,ZeroMQ有自己的行为,有的组件会阻塞,有的则会将message抛弃。

(5)底层的通信可以采用各种各样的都行,例如TCP,IPC啥的。

(6)它会自动的处理那些比较慢而且阻塞的reader

(7)支持message的路由

(8)ZeroMQ确保全部的数据被receiver接收到,例如发送10K,那么也接受到10K

(9)它发送的数据格式是二进制,所以对发送的内容无要求

(10)ZeroMQ会自动处理网络错误,而且会自动尝试恢复

(11)节能。。。(我擦,居然还有这个)

好了,先来看一下poller这个东西吧,蛮有意思的,类似与epoll或者java里面的selector,

在前面的例子中我们都只是创建一个socket,那如果我们要创建两个socket在同一个线程中该怎么处理呢,那么这个时候就可以用到poller这东西了。。。可以将已经建立好的socket注册到poller上面去,并注册相应的事件。。

这里就用push/pull来举例子吧,就直接来看pull端的代码吧:

[java] view plaincopyZeroMQ(java)之Router/Dealer模式ZeroMQ(java)之Router/Dealer模式
  1. package poller;
  2. import org.zeromq.ZMQ;
  3. public class Pull {
  4. public static void main(String args[]) {
  5. ZMQ.Context context = ZMQ.context();
  6. ZMQ.Socket pull1 = context.socket(ZMQ.PULL);  //创建一个pull
  7. pull1.connect("tcp://127.0.0.1:5555");    //建立于push的连接
  8. ZMQ.Socket pull2 = context.socket(ZMQ.PULL);
  9. pull2.connect("tcp://127.0.0.1:5555");
  10. ZMQ.Poller poller = new ZMQ.Poller();  //创建一个大小为2的poller
  11. poller.register(pull1, ZMQ.Poller.POLLIN);  //分别将上述的pull注册到poller上,注册的事件是读
  12. poller.register(pull2, ZMQ.Poller.POLLIN);
  13. int i = ;
  14. while (!Thread.currentThread().isInterrupted()) {
  15. poller.poll();
  16. if (poller.pollin()) {
  17. while (null != pull1.recv(ZMQ.NOBLOCK)) {  //这里采用了非阻塞,确保一次性将队列中的数据读取完
  18. i++;
  19. }
  20. }
  21. if (poller.pollin()) {
  22. while (null != pull2.recv(ZMQ.NOBLOCK)) {
  23. i++;
  24. }
  25. }
  26. if (i %  == ) {
  27. System.out.println(i);
  28. }
  29. }
  30. pull1.close();
  31. pull2.close();
  32. context.term();
  33. }
  34. }

这里还算简单吧,同时创建了两个pull,都将他们注册到了poller上面去。。。其实这个样子很像是selector或者epoll啥的。。。

好啦,接下来进入正题:

request/response算是一种非常常用的模式了,但是前面的例子中,我们的response端都只能在单线程中运行,因为必须要recv与send配对使用,那么就很大程度上限制了response的伸缩性,如果有大量的request来提交很多request请求的话,那么性能将会受到极大的限制,当然这种情况下我们可以采用如下的方式来解决:

ZeroMQ(java)之Router/Dealer模式

这里让request同时连接到多个response,这里就可以将request请求分散到多个response,这样当有多个request的时候的性能要求。。。但是有一个问题,如果我们又10个request端,他们每一个都不断的提交request请求,这个时候我们的reponse可能就会很忙,那么在这种结构下无法动态的添加response,依然限制了整个系统的伸缩性。。。

那么最终的解决方案就来了:

ZeroMQ(java)之Router/Dealer模式

这里可以看到,在request端与response端之间加了一个中间层,可以将其看成一个路由器,它将request端的请求路由到response端,如果性能不够的话,可以再建立新的response将其连接到中间层就可以了,就方便的解决系统的伸缩性问题了。。。

好了,这里直接就上中间层与response端的代码吧:

[java] view plaincopyZeroMQ(java)之Router/Dealer模式ZeroMQ(java)之Router/Dealer模式
  1. package multireqrep;
  2. import org.zeromq.ZMQ;
  3. public class Response {
  4. public static void main(String args[]) {
  5. final ZMQ.Context context = ZMQ.context();
  6. ZMQ.Socket router = context.socket(ZMQ.ROUTER);
  7. ZMQ.Socket dealer = context.socket(ZMQ.DEALER);
  8. router.bind("ipc://fjs1");
  9. dealer.bind("ipc://fjs2");
  10. for (int i = ; i < ; i++) {
  11. new Thread(new Runnable(){
  12. public void run() {
  13. // TODO Auto-generated method stub
  14. ZMQ.Socket response = context.socket(ZMQ.REP);
  15. response.connect("ipc://fjs2");
  16. while (!Thread.currentThread().isInterrupted()) {
  17. response.recv();
  18. response.send("hello".getBytes());
  19. try {
  20. Thread.currentThread().sleep();
  21. } catch (InterruptedException e) {
  22. // TODO Auto-generated catch block
  23. e.printStackTrace();
  24. }
  25. }
  26. response.close();
  27. }
  28. }).start();
  29. }
  30. ZMQ.proxy(router, dealer, null);
  31. router.close();
  32. dealer.close();
  33. context.term();
  34. }
  35. }

好吧,代码还算蛮简单的,直接用了ZeroMQ定义的router和dealer组件,以及内置的proxy方法就好了。。。

嗯,再来赞叹一次,ZeroMQ确实好用。。。

上一篇:CCNA网络工程师学习进程(3)常规网络设计模型与基本的网络协议


下一篇:ubuntu设置系统时间与网络时间同步和时区