Alibaba(阿里) RocketMQ入门实例

摘自:码友18年(www.mayou18.com)

what is rocketMQ?

RocketMQ作为一款分布式的消息中间件(阿里的说法是不遵循任何规范的,所以不能完全用JMS的那一套东西来看它),经历了Metaq1.x、Metaq2.x的发展和淘宝双十一的洗礼,在功能和性能上远超ActiveMQ。RocketMQ 是一款分布式、队列模型的消息中间件,具有以下特点:

专业&验证

1、MQ是消息领域业内专业的消息中间件,多次在国内外获奖

2、经过双11阿里交易、商品、营销等核心链路真实场景验证

3、阿里集团内部1000+核心应用使用,每天流转几千亿条消息,稳定可靠

技术体系

1、产品历史超过7年,消息保证不丢,技术体系丰富成熟

2、阿里内部产品名:MetaQ、Notify

3、开源社区产品名:RocketMQ,无技术绑定风险

4、应用灵活,无任何强制绑定其他产品

独立部署

1、支持专有云独立输出,支持物理机和虚拟机,最小部署仅几台机器

2、专有云配套运维系统,方便运维人员实时监控系统状态

3、专有云配套mqadmin命令集和管理类open API,方便集成及统一运维

4、支持混合云架构,包括VPC用户

高可靠

1、一份消息多份落盘存储,经过严格断电测试,消息依然保证不丢失

2、支持消息轨迹,消息从生产到消费轨迹,可清晰排查

3、海量消息堆积,单个Topic可堆积100亿+条消息,防止系统高流量崩溃

4、默认情况下消息落盘保留3天

高性能

1、同一网络内,消息传输RT在10毫秒之内,性能测试下,网卡可被打满

2、公有云默认单Topic 发送消息为每秒5000条,最高可申请扩展至10W以上支持大量消息并发发送,超过5万个队列,性能依然卓越

3、支持消息海量堆积,单Topic可堆积100+亿条消息

多协议

1、HTTP接入:支持跨网络调用,HTTP公网接入支持跨网络调用,HTTP Restful接口公网接入

2、MQTT接入:支持主动推送模,多级Topic模型支持一次触达1000万+终端可广泛应用于物联网和社交即时通信场景,可跟JStorm等实时计算完美结合

3、TCP接入(专业) :区别于HTTP简单的接入方式,同时提供更为专业、可靠、稳定的TCP协议的SDK接入

RocketMQ 代码实现

pom.xml

<dependency>
  <groupId>com.alibaba.rocketmq</groupId>
    <artifactId>rocketmq-client</artifactId>
    <version>3.2.6</version>
</dependency>
<dependency>
    <groupId>org.slf4j</groupId>
    <artifactId>slf4j-log4j12</artifactId>
    <version>1.7.7</version>
</dependency>

Producer.java

import com.alibaba.rocketmq.client.exception.MQClientException;
import com.alibaba.rocketmq.client.producer.DefaultMQProducer;
import com.alibaba.rocketmq.client.producer.SendResult;
import com.alibaba.rocketmq.common.message.Message;
public class Producer {
  public static void main(String[] args) throws MQClientException,
      InterruptedException {
    /**
     * 一个应用创建一个Producer,由应用来维护此对象,可以设置为全局对象或者单例<br>
     * 注意:ProducerGroupName需要由应用来保证唯一<br>
     * ProducerGroup这个概念发送普通的消息时,作用不大,但是发送分布式事务消息时,比较关键,
     * 因为服务器会回查这个Group下的任意一个Producer
     */
    DefaultMQProducer producer = new DefaultMQProducer("ProducerGroupName");
    producer.setNamesrvAddr("192.168.0.123:9876");
    /**
     *默认情况下,一台服务器只能启动一个Producer或Consumer实例,所以如果需要在一台服务器启
     *动多个实例,需要设置实例的名称
     */
    producer.setInstanceName("Producer");
    producer.setSendMsgTimeout(3000);//发送消息超时
    producer.setRetryTimesWhenSendFailed(2);//发送失败后,重试几次
    /**
     * Producer对象在使用之前必须要调用start初始化,初始化一次即可<br>
     * 注意:切记不可以在每次发送消息时,都调用start方法
     */
    producer.start();
    /**
     * 下面这段代码表明一个Producer对象可以发送多个topic,多个tag的消息。
     * 注意:send方法是同步调用,只要不抛异常就标识成功。但是发送成功也可会有多种状态,<br>
     * 例如消息写入Master成功,但是Slave不成功,这种情况消息属于成功,但是对于个别应用如果对消息可靠性要求极高,<br>
     * 需要对这种情况做处理。另外,消息可能会存在发送失败的情况,失败重试由应用来处理。
     */
    for (int i = 0; i < 100; i++) {
      try {
        {
          Message msg = new Message("TopicTest1",// topic
              "TagA",// tag
              "OrderID001",// key
              ("Hello MetaQ").getBytes());// body
          SendResult sendResult = producer.send(msg);
          System.out.println(sendResult);
        }
        {
          Message msg = new Message("TopicTest2",// topic
              "TagB",// tag
              "OrderID0034",// key
              ("Hello MetaQ").getBytes());// body
          SendResult sendResult = producer.send(msg);
          System.out.println(sendResult);
        }
        {
          Message msg = new Message("TopicTest3",// topic
              "TagC",// tag
              "OrderID061",// key
              ("Hello MetaQ").getBytes());// body
          SendResult sendResult = producer.send(msg);
          System.out.println(sendResult);
        }
      } catch (Exception e) {
        e.printStackTrace();
      }
      TimeUnit.MILLISECONDS.sleep(1000);
    }
    /**
     * 应用退出时,要调用shutdown来清理资源,关闭网络连接,从服务器上注销自己
     * 注意:我们建议应用在JBOSS、Tomcat等容器的退出钩子里调用shutdown方法
     */
    producer.shutdown();
  }
}

PushConsumer.java

import java.util.List;
import com.alibaba.rocketmq.client.consumer.DefaultMQPushConsumer;
import com.alibaba.rocketmq.client.consumer.listener.ConsumeConcurrentlyContext;
import com.alibaba.rocketmq.client.consumer.listener.ConsumeConcurrentlyStatus;
import com.alibaba.rocketmq.client.consumer.listener.MessageListenerConcurrently;
import com.alibaba.rocketmq.client.exception.MQClientException;
import com.alibaba.rocketmq.common.message.MessageExt;
public class PushConsumer {
  /**
   * 内部是使用长轮询Pull方式从MetaQ服务器拉消息,然后再回调用户Listener方法<br>
   */
  public static void main(String[] args) throws InterruptedException,
      MQClientException {
    /**
     * 一个应用创建一个Consumer,由应用来维护此对象,可以设置为全局对象或者单例<br>
     * 注意:ConsumerGroupName需要由应用来保证唯一。
     *不同consumer group里的consumer即便是消费同一个topic下的同一个queue,
     *那消费进度也是分开存储的。也就是说,不同的consumer group内的consumer的消费
     *完全隔离,彼此不受影响。
     */
    DefaultMQPushConsumer consumer = new DefaultMQPushConsumer(
        "ConsumerGroupName");
    consumer.setNamesrvAddr("192.168.0.123:9876");
    consumer.setInstanceName("Consumber");
    //广播消费是指一个consumer只要订阅了某个topic的消息,那它就会收到该topic下的所有queue里的消息,
    //而不管这个consumer的group是什么。所以对于广播消费来说,consumer group没什么实际意义。consumer可以在实例化时,我们可以指定是集群消费还是广播消费。
    //consumer.setMessageModel(MessageModel.BROADCASTING);
    /**
     * 订阅指定topic下tags分别等于TagA或TagC或TagD
     */
    consumer.subscribe("TopicTest1", "TagA || TagC || TagD");
    /**
     * 订阅指定topic下所有消息<br>
     * 注意:一个consumer对象可以订阅多个topic
     */
    consumer.subscribe("TopicTest2", "*");
    consumer.registerMessageListener(new MessageListenerConcurrently() {
      /**
       * 默认msgs里只有一条消息,可以通过设置consumeMessageBatchMaxSize参数来批量接收消息
       */
      @Override
      public ConsumeConcurrentlyStatus consumeMessage(
          List<MessageExt> msgs, ConsumeConcurrentlyContext context) {
        System.out.println(Thread.currentThread().getName()
            + " Receive New Messages: " + msgs.size());
        MessageExt msg = msgs.get(0);
        if (msg.getTopic().equals("TopicTest1")) {
          // 执行TopicTest1的消费逻辑
          if (msg.getTags() != null && msg.getTags().equals("TagA")) {
            // 执行TagA的消费
            System.out.println(new String(msg.getBody()));
          } else if (msg.getTags() != null
              && msg.getTags().equals("TagC")) {
            // 执行TagC的消费
          } else if (msg.getTags() != null
              && msg.getTags().equals("TagD")) {
            // 执行TagD的消费
          }
        } else if (msg.getTopic().equals("TopicTest2")) {
          System.out.println(new String(msg.getBody()));
        }
        return ConsumeConcurrentlyStatus.CONSUME_SUCCESS;
      }
    });
    /**
     * Consumer对象在使用之前必须要调用start初始化,初始化一次即可<br>
     */
    consumer.start();
    System.out.println("Consumer Started.");
  }
}

 

posted on 2018-05-17 16:17  码友  阅读(11723)  评论(0编辑  收藏  举报