RocketMQ中存储的消息对于消费者来说,并不完全都是他们需要的,因此需要对消息进行过滤。
订阅Topic主题 ,选择Tags都是我们简单的过滤。Topic是大分类,Tags是二级分类。
RocketMQ还有一种过滤机制MessageFilter,是在服务端开启过滤服务器,消费者将指定的java上传后,在服务端过滤。
这种会在很大程度上影响服务器性能,java类要确保简单安全,不占用过多资源。
服务器配置:
要开启FilterServer需要在配置文件(broker)中添加启动filterServer,默认是关闭的。
filterServerNums=
开启的Server数,一个broker可对应多个filterServer,建议一般就1个。
启动前关闭broker,添加完配置,然后启动broker。
再启动filterServer
》nohup sh mqfiltersrv -c /usr/local/program/rocketmq/conf/2m-2s-sync/broker-a.properties &
启动完毕后可使用jps来查看。
程序配置:
Producer端无需任何变化。
Consumer端变化:
先定义一个Filter类,实现MessageFilter接口。
/**
* filter
* attention: don't use the chinese word..
* @author DennyZhao
*
*/
public class FruitMsgFilter implements MessageFilter { @Override
public boolean match(MessageExt msg, FilterContext filterContext) {
String origin = msg.getUserProperty("origin"); //from map
if("mainland".equals(origin)) {
return true;
}
return false;
} }
※ 注意:里面不能有中文,判断内容可随意。
将Filter文件,放入到resource下,防止被编译,无法发送。
1. 增加filter java类写成String.发送给broker。
File file = new File(Thread.currentThread().getContextClassLoader().getResource("FruitMsgFilter.java").getFile());
String fileStr = MixAll.file2String(file);
// 订阅下添加此java到当前的package下,此处不能带 .java
consumer.subscribe("fruit", "com.rocketmq.learn.filter.FruitMsgFilter", fileStr);
运行 consumer,在console的consumer下可以看到此consumer,点击client可以看到filter信息。
启动producer测试类:
/**
* 水果生產者
* @author DennyZhao
*
*/
public class FruitProducer { /**
* 主方法
* @param args
* @throws MQClientException
* @throws InterruptedException
*/
public static void main(String[] args) throws MQClientException, InterruptedException {
DefaultMQProducer producer = new DefaultMQProducer("fruitProducerGroup");
producer.setNamesrvAddr("192.168.68.137:9876;192.168.68.138:9876;");
producer.start();
String[] fruitArray = {"apple","pear","strawberry","kiwifruit","mango","peach"};
int count = 0;
for(String fruitname : fruitArray) {
Message msg = new Message("fruit", "common", fruitname, fruitname.getBytes());
count++;
Thread.sleep(2000);
// 用于定义产地
if(count !=4 && count != 5) {
msg.putUserProperty("origin", "mainland");
}else {
msg.putUserProperty("origin", "foregin");
}
SendResult result = null;
try {
result = producer.send(msg);
if(result != null) {
switch(result.getSendStatus()) {
case SEND_OK:
System.out.println("发送成功........");
break;
default:
System.out.println("发送失败.......");
// TODO将内容写入到Redis或失败表中,用于后面从新发送
break;
}
}
} catch (Exception e) {
e.printStackTrace();
}
} producer.shutdown();
} }
测试结果,只会展示 mainland 的水果。
※:一般情况不要开启FilterServer,对mq性能消耗较大。