Esper学习之一:Esper介绍

CEP即Complex Event Process,中文意思就是“复杂事件处理”。听起来好像很复杂,实际上就是基于事件流进行数据处理,把要分析的数据抽象成事件,然后将数据发送到CEP引擎,引擎就会根据事件的输入和最初注册的处理模型,得到事件处理结果。

有人可能要问了,这和Hadoop有什么区别?可是本人不才,没学过Hadoop,虽然说赶上了这阵风,但是从很多人那了解以后,觉得不过就是个不是特别成熟的工具,然后各个公司要根据需求对Hadoop进行二次开发,就需要懂得源码的人。所以就没打算学了,一个工具而已,等到自己确实有空的时候再学也不迟。至于CEP和Hadoop的区别,应该是Esper和Hadoop的区别,我的理解是:Hadoop适合做事后分析,而Esper适合实时分析。Hadoop我确实不是很了解,如果有问题还希望大家指正。

CEP是一种标准,Esper只是对这个标准的一种开源实现。除了Esper,很多大公司也有类似的商业软件,比如IBM,Sybase等等,听说巨贵无比。CEP的一个重要特点就是他是一个内存计算工具和类SQL语句。内存计算可以说是一把双刃剑。好处自不必说,一个字:快!坏处也显而易见,数据有丢失的风险,而且还有容量的限制(实时计算其实并不受制于内存大小,而是得看如何对实时进行定义,也就是具体的业务来决定了)。所以如果业务不能容忍数据丢失,那么高可用方案就必须做好,不过Esper的高可用很不好做,后面我将会说到。

CEP的类SQL语句,可以理解为处理模型的定义与描述。这是运行在CEP引擎中的特殊语句,之所以叫他类SQL,是因为它和SQL确实很像,除了select,insert,delete,update,而且也有avg,count等函数。所以对于会SQL的人来说,他的语法结构大致还是能猜出一二的。在Esper中,这个句子叫做EPL,即Event Process Language。作为Esper的核心内容,对于它的讲解有三四百页的英文文档,所以之后我会慢慢向大家细细说明的。

下面就简单写个列子给大家看看吧。场景是计算3个苹果的平均价格

  1. package test;
  2. import com.espertech.esper.client.EPAdministrator;
  3. import com.espertech.esper.client.EPRuntime;
  4. import com.espertech.esper.client.EPServiceProvider;
  5. import com.espertech.esper.client.EPServiceProviderManager;
  6. import com.espertech.esper.client.EPStatement;
  7. import com.espertech.esper.client.EventBean;
  8. import com.espertech.esper.client.UpdateListener;
  9. /**
  10. *
  11. * @author luonanqin
  12. *
  13. */
  14. class Apple
  15. {
  16. private int id;
  17. private int price;
  18. public int getId()
  19. {
  20. return id;
  21. }
  22. public void setId(int id)
  23. {
  24. this.id = id;
  25. }
  26. public int getPrice()
  27. {
  28. return price;
  29. }
  30. public void setPrice(int price)
  31. {
  32. this.price = price;
  33. }
  34. }
  35. class AppleListener implements UpdateListener
  36. {
  37. public void update(EventBean[] newEvents, EventBean[] oldEvents)
  38. {
  39. if (newEvents != null)
  40. {
  41. Double avg = (Double) newEvents[0].get("avg(price)");
  42. System.out.println("Apple's average price is " + avg);
  43. }
  44. }
  45. }
  46. public class Test {
  47. public static void main(String[] args) throws InterruptedException {
  48. EPServiceProvider epService = EPServiceProviderManager.getDefaultProvider();
  49. EPAdministrator admin = epService.getEPAdministrator();
  50. String product = Apple.class.getName();
  51. String epl = "select avg(price) from " + product + ".win:length_batch(3)";
  52. EPStatement state = admin.createEPL(epl);
  53. state.addListener(new AppleListener());
  54. EPRuntime runtime = epService.getEPRuntime();
  55. Apple apple1 = new Apple();
  56. apple1.setId(1);
  57. apple1.setPrice(5);
  58. runtime.sendEvent(apple1);
  59. Apple apple2 = new Apple();
  60. apple2.setId(2);
  61. apple2.setPrice(2);
  62. runtime.sendEvent(apple2);
  63. Apple apple3 = new Apple();
  64. apple3.setId(3);
  65. apple3.setPrice(5);
  66. runtime.sendEvent(apple3);
  67. }
  68. }

很简单的例子,虽然没有加注释,也应该很好懂吧。大家可以自己运行一下看看是什么结果。

Esper的官网:http://esper.codehaus.org/ 里面有很多例子可以研究一下。

原文:http://blog.csdn.net/luonanqin

上一篇:MongoDB Linux下的安装和启动(转)


下一篇:解决Ubuntu下Apache不解析PHP问题