分布式消息通信(ActiveMQ)
应用场景
异步通信
应用解耦
流量削峰
-
下载
-
压缩包上传到Linux系统
apache-activemq-5.15.9-bin.tar.gz
-
解压缩
tar -zxvf apache.activemq-5.15.0-bin.tar.gz
-
启动
bin目录下: ./activemq start
####查看是否启动命令:./activemq status
-
进入管理后台(默认后台管理端口8161;默认openwire端口61616)
http://127.0.0.1:8161/admin admin admin
-
错误处理
查看日志:./activemq console
-
hostname不合法
ERROR | Failed to start Apache ActiveMQ (localhost, ID:VM_0_5_centos-46296-1554189350972-0:1)
java.net.URISyntaxException: Illegal character in hostname at index 7: ws://VM_0_5_centos:61614?maximumConnections=1000&wireFormat.maxFrameSize=104857600
at java.net.URI$Parser.fail(URI.java:2848)[:1.8.0_201]
at java.net.URI$Parser.parseHostname(URI.java:3387)[:1.8.0_201]
at java.net.URI$Parser.parseServer(URI.java:3236)[:1.8.0_201]
at java.net.URI$Parser.parseAuthority(URI.java:3155)[:1.8.0_201]
at java.net.URI$Parser.parseHierarchical(URI.java:3097)[:1.8.0_201]
at java.net.URI$Parser.parse(URI.java:3053)[:1.8.0_201]
at java.net.URI.<init>(URI.java:673)[:1.8.0_201]
at解决办法:
编辑文件:vim /etc/hostname,文件内直接填写新的主机名(可以尝试只用这一步)
如果还不行,执行下面的:
编辑文件:vim /etc/sysconfig/network
改HOSTNAME=xxxxxxx为 HOSTNAME=wly 保存
改映射: Vim /etc/hosts
127.0.0.1 new-hostname.domainname ******
星号为原来的主机名,现只将*****改成为wly 保存
重启linux机器:reboot -
JMS概念和规范
java消息服务(java message service)
MOM(message oriented middleware)面向消息中间件
转载:https://www.cnblogs.com/xinhuaxuan/p/6104274.html
JMS是什么 JMS 全称:Java Message Service,Java消息服务,是Java EE中的一个技术。
JMS规范
JMS定义了Java 中访问消息中间件的接口,并没有给予实现,实现JMS接口的消息中间件成为JMS Provider,例如:Active MQ
JMS Provider
实现JMS接口和规范的消息中间件
JMS message
JMS的消息,JMS消息由三部分组成:消息头、消息属性、消息体
消息头包含消息的识别消息和路由消息,消息头包含一些标准的属性如下:
(1)JMSDestination: 消息发送的目的地,主要是指Queue和Topic,由send方法设置.
(2)JMSDeliveryMode:传送模式。有两种:持久模式和非持久模式。一条持久性的消息应该被传输"一次仅仅一次",这就意味着如果JMS提供者出现故障,该消息并不会丢失,它会在服务器恢复之后再次传递。一条非持久的消息最多会传递一次,这意味着服务器出现故障,该消息将永远丢失。由send方法设置
(3)JMSExpiration:消息过期时间,等于Destination的send方法中的timeToLive值加上发送时刻的GMT的时间值。如果timeToLive值等于零,则JMSExpiration被设置为零,表示该消息永不过期。如果发送后,在消息过期时间之后消息还没有被发送到目的地,则该消息被清除。由send方法设置
(4)JMSPriority:消息优先级,从0-9十个级别,0-4是普通消息,5-9是加急消息。JMS不要求JMS Provider严格按照这十个优先级发送消息,但必须保证加急消息要先于普通消息到达,默认是4级。由send方法设置
(5)JMSMessageID:唯一识别每个消息的标识,由JMS Provider产生。由send方法设置
(6)JMSTimestamp:一个JMS Provider在调用send()方法时自动设置,它是消息被发送和消费者实际接收的时间差。由客户端设置
(7)JMSCorrelationID:用来连接到另外一个消息,典型的应用是在回复消息中连接到原消息。在大多数情况下,JMSCorrelationID用于将一条消息标记为对JMSMessageID标示的上一条消息的应答,不过,JMSCorrelationID可以是任何值,不仅仅是JMSMessageID。由客户端设置
(8)JMSType: 消息类型的标识符,由客户端设置
(9)JMSReplyTo: 提供本消息回复消息的目的地址,由客户端设置
(10)JMSRedelivered:如果一个客户端收到一个设置了JMSRedelivered属性的消息,则表示可能客户端曾经在早些时候收到过该消息,但并没有签收(acknowledged)。如果该消息被重新传送,JMSRedelivered=true 否则 JMSRedelivered=flase 。由JMS Provider设置
消息体,JMS API定义了5种消息体格式,也叫消息类型,可以使用不同形式发送接收数据,并可以兼容现有的消息格式。
包括:TextMessage、MapMessage、BytesMessage、StreamMessage、ObjectMessage
消息属性,包含以下三种类型的属性:
1.应用程序设置和添加的数据,比如:message.setStringProperty("userName",userName);
2.JMS定义的属性,使用"JMSX"作为属性名的前缀, connection.getMetaData().getJMSXPropertyNames() 方法返回所有连接支持的JMSX属性的名字。
3.JMS供应商特定的属性
JMS producer
消息生产者,创建和发送JMS消息的客户端应用
JMS consumer
消息消费者,创建和处理JMS消息的客户端应用
JMS domains: 消息传递域
JMS规范中定义了两种消息传递域: 点对点(point-to-point,简写成PTP);消息传递域和发布/订阅消息传递域(publish/subscribe,简写成pub/sub)
1.点对点消息传递域的特点如下:
a.每个消息只能有一个消费者
b.消息的生产者和消费者之间没有时间上的相关性。无论消费者在生产者发送消息的时候是否处于运行状态,它都可以提取消息。
2.发布/订阅消息传递域的特点如下:
a.每个消息可以有多个消费者
b.生产者和消费者之间有时间上的相关性。订阅一个主题的消费者只能消费自它订阅之后发布的消息。JMS规范允许客户创建持久订阅(setClientID),这在一定程度上放松了时间上的相关性要求。持久订阅允许消费者消费它在未处于激活状态时发送的消息。
3.在点对点消息传递域中,目的地被称为队列(queue);在发布/订阅消息传递域中,目的地被称为主题(topic)
Connection factory: 连接工厂,用来创建连接对象,以连接到JMS的provider
JMS Connection: 封装了客户与JMS提供者之间的一个虚拟的连接 JMS Session: 是生产和消费消息的一个单线程上下文 会话用于创建消息生产者(producer)、消息消费者(consumer)和消息(message)等。会话提供了一个事务性的上下文,在这个上下文中,一组发送和接收被组合到了一个原子操作中。 Destination:消息发送到的目的地 Acknowledge:签收 Transaction:事务 JMS client: 用来收发消息的Java应用
JMS的可靠性机制:JMS消息之后被确认后,才会认为是被成功消费。
事务性会话,即设置为ture,消息会在commit后自动确认;
非事务性会话,即设置为false,在该模式下,消息是否被确认取决于创建会话时的应答模式。:
AUTO_ACKNOWLEDGE:当客户端成功receive后,消息自动确认
CLIENT_ACKNOWLEDGE:客户端手动确认(textMessage.acknowledge)
DUPS_OK_ACKNOWLEDGE:延迟确认(可以设置时间)。
ActiveMQ测试
编写一个测试类对ActiveMQ进行测试,首先得向pom文件中添加ActiveMQ相关的jar包:
<dependency>
<groupId>org.apache.activemq</groupId>
<artifactId>activemq-all</artifactId>
</dependency>
queue的发送代码如下(生产者):
public void testMQProducerQueue() throws Exception{
//1、创建工厂连接对象,需要制定ip和端口号
ConnectionFactory connectionFactory = new ActiveMQConnectionFactory("tcp://192.168.156.44:61616");
//2、使用连接工厂创建一个连接对象
Connection connection = connectionFactory.createConnection();
//3、开启连接
connection.start();
//4、使用连接对象创建会话(session)对象
Session session = connection.createSession(false, Session.AUTO_ACKNOWLEDGE);
//5、使用会话对象创建目标对象,包含queue和topic(一对一和一对多)
Queue queue = session.createQueue("test-queue");
//6、使用会话对象创建生产者对象
MessageProducer producer = session.createProducer(queue);
//7、使用会话对象创建一个消息对象
TextMessage textMessage = session.createTextMessage("hello!test-queue");
//8、发送消息
producer.send(textMessage);
//9、关闭资源
producer.close();
session.close();
connection.close();
}
接收代码(消费者):
public void TestMQConsumerQueue() throws Exception{
//1、创建工厂连接对象,需要制定ip和端口号
ConnectionFactory connectionFactory = new ActiveMQConnectionFactory("tcp://192.168.156.44:61616");
//2、使用连接工厂创建一个连接对象
Connection connection = connectionFactory.createConnection();
//3、开启连接
connection.start();
//4、使用连接对象创建会话(session)对象
Session session = connection.createSession(false, Session.AUTO_ACKNOWLEDGE);
//5、使用会话对象创建目标对象,包含queue和topic(一对一和一对多)
Queue queue = session.createQueue("test-queue");
//6、使用会话对象创建生产者对象
MessageConsumer consumer = session.createConsumer(queue);
//7、向consumer对象中设置一个messageListener对象,用来接收消息
consumer.setMessageListener(new MessageListener() {
然后当我们运行queue发送的时候可以看到队列里已经有一条消息了,但没有发送出去: 然后在运行queue 的接收端,可以看到消息已经发出了:
broker
可以本地创建并运行。
BrokerService brokerservice = new BrokerService();
brokrService.setUseJmx(true);
brokrService.addConnector("tcp://localhost:61616");
brokrService.start();
FAQ
Q:消息的发送策略
A:持久化消息(默认)/非持久化消息
PS:设置消息发送端发送持久化消息`异步方式`: connectionFactory.setUseAsyncSend(true);
设置消息发送端发送非持久化消息(默认为异步方式):textMessage.setJMSDeliveryMode(DeliveryMode.NON_PERSISTENCE)
回执窗口大小设置:connectionFactory.setProducerWindowSize();
如果需要对非持久化消息的每次发送的消息都获得broker的回执:connectionFactory.setAllwaysSyncSend();
Q:comsumer获取消息时pull还是push
A:默认情况下,mq服务器(broker)采用异步方式向客户端主动推送消息(push)
prefetchsize:预取消息数量(broker每次主动推送的消息数量)。Queue默认值是1000;topic持久化消息默认值是100,非持久化消息默认值是32766。如果设置为0,此时对于consumer来说,就是pull模式。
Q:acknowledge为什么能够在第5次把前面执行的消息确认掉? A:源码deliveryMessage:存在之前执行完但没有确认的消息队列 #消息确认 ACK_TYPE:消息端和broker交换ack指令的时候,还需要告知broker ACK_TYPE REDELIVERED_ACK_TYPE:重发策略 DELIVERED_ACK_TYPE:消息已经接受,但是尚未处理结束 STANDARD_ACK_TYPE:消息处理成功
ActiveMQ+spring整合
service-jms.xml
实现MessageListener
ActiveMQ的传输协议
client与broker的通信协议
支持的协议TCP(默认)、UDP、NIO、SSL、Http(s)、vm
ActiveMQ持久化存储
1.kahaDB(默认,基于文件的存储方式)
2.AMQ(基于文件的存储方式)
写入速度快,容易恢复
文件默认大小是32M
3.JDBC(基于数据库的存储)
<jdbcPersistenceAdapter dataSource="#mysqlDataSource" createTablesOnStartup="true"/>
连接数据库成功后,会创建三张表ACTIVEMQ_ACKS、ACTIVEMQ_LOCK、ACTIVEMQ_MSGS
4.Memory(基于内存的存储)
5.LevelDB
5.8版本以后引入的持久化策略,通常用于集群配置
ActiveMQ网络连接
networkConnector:用来配置broker与broker之间的通信连接
<!--静态网络连接--> <networkConnectors> <networkConnectot uri="static://(tcp://192.168.1.1:61616,tcp://192.168.1.2:61616)"/> </networkConnectors> #双向连接:duplex
<!--丢失的消息:配置消息回流,解决该问题--> <policyEntry queue=">" enableAudit="false"> <networkBridgeFilterFactory> <conditionalNetwordBridgeFilterFactory replayWhenNoConsumers="true" /> </networkBridgeFilterFactory> </policyEntry>
容错连接
ConnectionFactory connectionFactory = new ActiveMQConnectionFactory("failover:(tcp://192.168.156.44:61616,tcp://192.168.156.45:61616")";