Group管理,查看GroupID下單個消費端堆棧信息,期望只展示與該GroupID相關" />

免费国产成人av_国产又黄又猛的视频_免费国产a级片_国产日韩一区二区在线观看_久久av喷吹av高潮av_国产亚洲视频一区_成人网站免费观看入口_91高清国产视频_www国产黄色_久久av秘一区二区三区_日本男女交配视频_免费看av软件

RocketMQ控制臺消費者堆棧信息展示優化分析-當前播報

首頁 > 探索 > > 正文

日期:2023-03-28 10:14:01    來源:今日頭條    
背景介紹

專有云企業版v_3_12,消息隊列RocketMQ控制臺->Group管理,查看Group ID下單個消費端堆棧信息,期望只展示與該Group ID相關的堆棧信息,在以下場景與期望不符。


(相關資料圖)

場景介紹

在同一個程序中創建兩個不同Group ID的消費端實例,在控制臺中查看一個Group ID下單個消費端堆棧信息,堆棧信息中包含了兩個Group ID消費端的堆棧信息,給排查問題造成了困擾。

示例代碼pom
  com.aliyun.openservices  ons-client  1.8.8.3.Final
code
import com.aliyun.openservices.ons.api.Action;import com.aliyun.openservices.ons.api.PropertyKeyConst;import com.aliyun.openservices.ons.api.batch.BatchMessageListener;import com.aliyun.openservices.ons.api.bean.BatchConsumerBean;import com.aliyun.openservices.ons.api.bean.Subscription;import java.util.HashMap;import java.util.Map;import java.util.Properties;public class Main {    public static void main(String[] args){        String nameSrvAddr = "xxx";        String accessKey = "xxx";        String secretKey = "xxx";        String groupId1 = "Goup_ID_1";        String topic1 = "xxx_1";        String tag1 = "xxx_1";        BatchMessageListener batchMessageListener1 = (messages, context) -> Action.CommitMessage;        BatchConsumerBean batchConsumerBean1 = batchConsumerBean(nameSrvAddr,accessKey,secretKey,                                                                 groupId1,topic1,tag1,batchMessageListener1);        batchConsumerBean1.start();        String groupId2 = "Goup_ID_2";        String topic2 = "xxx_2";        String tag2 = "xxx_2";        BatchMessageListener batchMessageListener2 = (messages, context) -> Action.CommitMessage;        BatchConsumerBean batchConsumerBean2 = batchConsumerBean(nameSrvAddr,accessKey,secretKey,                                                                 groupId2,topic2,tag2,batchMessageListener2);        batchConsumerBean2.start();    }    private static BatchConsumerBean batchConsumerBean(String nameSrvAddr,String accessKey,String secretKey,String groupId,String topic,String tag,BatchMessageListener batchMessageListener){        BatchConsumerBean batchConsumerBean = new BatchConsumerBean();        Properties properties = new Properties();        properties.put(PropertyKeyConst.NAMESRV_ADDR,nameSrvAddr);        properties.put(PropertyKeyConst.AccessKey,accessKey);        properties.put(PropertyKeyConst.SecretKey,secretKey);        properties.put(PropertyKeyConst.GROUP_ID,groupId);        batchConsumerBean.setProperties(properties);        Subscription subscription = new Subscription();        subscription.setTopic(topic);        subscription.setExpression(tag);        Map subscriptionTable = new HashMap<>();        subscriptionTable.put(subscription,batchMessageListener);        batchConsumerBean.setSubscriptionTable(subscriptionTable);        return batchConsumerBean;    }}
分析過程

首先分析示例代碼中與BatchConsumerBean相關聯的對象,然后分析控制臺展示消費端堆棧信息的流程,最后分析下不同版本的RocketMQ Client SDK對消費端消費線程命名方式的變化。

BatchConsumerBean

示例代碼中創建了兩個BatchConsumerBean實例,與BatchConsumerBean實例相關聯的對象如下:

與BatchConsumerBean關聯的對象

從上圖看,BatchConsumerBean實例是比較重的,所以上面的示例代碼可以優化為只創建一個BatchConsumerBean實例,與該問題不太相關,暫時忽略;上圖中與該問題直接相關的是ClientRemotingProcessor、MQClientInstance、DefaultMQPushConsumerImpl、ConsumerStatsManager,下面繼續分析。

堆棧信息展示流程

下面描述的是在瀏覽器請求一個Group ID單個消費端堆棧信息的流程。

堆棧信息展示流程

瀏覽器請求控制臺應用

當在控制臺單機某個消費端堆棧信息的時候,瀏覽器會向控制臺應用發起http請求,主要請求參數是:GroupID,ClientId,其中每個MQClientInstance實例對應一個ClientId。

控制臺應用請求Broker

控制臺應用收到瀏覽器請求后,主要進行以下操作:

String topic = MixAll.RETRY_GROUP_TOPIC_PREFIX + consumerGroup;TopicRouteData topicRouteData = this.examineTopicRouteInfo(topic);List brokerDatas = topicRouteData.getBrokerDatas();if (brokerDatas != null) {    for (BrokerData brokerData : brokerDatas) {        String addr = brokerData.selectBrokerAddr();        if (addr != null) {            return this.mqClientInstance.getMQClientAPIImpl().getConsumerRunningInfo(addr, consumerGroup, clientId, jstack,timeoutMillis * 3);        }    }}
根據%RETRY% + GroupIID查找對應的TopicRouteData從TopicRouteData中選擇一個Broker的地址發送getConsumerRunningInfo請求Broker請求Consumer

Broker收到請求后,主要進行以下操作:

ClientChannelInfo clientChannelInfo = this.brokerController.getConsumerManager().findChannel(consumerGroup, clientId);RemotingCommand newRequest = RemotingCommand.createRequestCommand(requestCode, null);newRequest.setExtFields(request.getExtFields());newRequest.setBody(request.getBody());return this.brokerController.getBroker2Client().callClient(clientChannelInfo.getChannel(), newRequest);
AdminBrokerProcessor響應查詢請求根據GroupID和ClientId找到對應Consumer實例的channel socket通過channel socket發送請求到Consumer實例Consumer處理邏輯

Consumer收到請求后,主要進行以下操作:

ConsumerRunningInfo consumerRunningInfo = this.mqClientFactory.consumerRunningInfo(requestHeader.getConsumerGroup());if (requestHeader.isJstackEnable()) {  Map map = Thread.getAllStackTraces();  String jstack = UtilAll.jstack(map);  consumerRunningInfo.setJstack(jstack);}
通過MQClientInstance實例請求Consumer實例的consumerRunningInfo方法獲取Consumer運行信息,如:pullRT、pullTPS、consumeRT、consumeOKTPS、consumeFailedTPS等信息獲取JVM所有線程棧信息將獲取到的ConsumerRunningInfo返回給Broker。

其中第2步【獲取JVM所有線程棧信息】就是我們需要查看的堆棧信息,目前控制臺主要展示了以ConsumeMessageThread__開頭的線程和RebalanceService線程,這塊期望只展示與該消費端相關的ConsumeMessageThread__線程和Rebalance線程,不期望將不相關的消費端線程也展示出來。

ConsumeMessageThread線程的命名

在當前版本中處理業務的消費者線程名的形式是:ConsumeMessageThread_數字,ConsumeMessageConcurrentlyService類中相關代碼如下:

//該線程池用于處理業務邏輯this.consumeExecutor = new ThreadPoolExecutor(  this.defaultMQPushConsumer.getConsumeThreadMin(),  this.defaultMQPushConsumer.getConsumeThreadMax(),  1000 * 60,  TimeUnit.MILLISECONDS,  this.consumeRequestQueue,  new ThreadFactoryImpl("ConsumeMessageThread_"));

新版本中線程的命名中增加了GroupId,相關代碼如下:

String consumeThreadPrefix = null;if (consumerGroup.length() > 100) {    consumeThreadPrefix = new StringBuilder("ConsumeMessageThread_").append(consumerGroup, 0, 100).append("_").toString();} else {    consumeThreadPrefix = new StringBuilder("ConsumeMessageThread_").append(consumerGroup).append("_").toString();}this.consumeExecutor = new ThreadPoolExecutor(    this.defaultMQPushConsumer.getConsumeThreadMin(),    this.defaultMQPushConsumer.getConsumeThreadMax(),    1000 * 60,    TimeUnit.MILLISECONDS,    this.consumeRequestQueue,    new ThreadFactoryImpl(consumeThreadPrefix));

線程名形式為:ConsumeMessageThread_GroupId__數字,從一定程度對以上問題進行了優化。

總結ONS SDK對RocketMQ Client進行了封裝,更加方便業務的使用,Consumer對象比較重,需要根據業務采用合理的初始化方式ConsumerStatsManager記錄了消費端的一些統計信息ConsumeMessageConcurrentlyService對消費端線程命名進行了優化?

關鍵詞:

下一篇:諸多精進行跡(六)
上一篇:最后一頁

科技

 
免费国产成人av_国产又黄又猛的视频_免费国产a级片_国产日韩一区二区在线观看_久久av喷吹av高潮av_国产亚洲视频一区_成人网站免费观看入口_91高清国产视频_www国产黄色_久久av秘一区二区三区_日本男女交配视频_免费看av软件
人人爱人人干婷婷丁香亚洲| 中文日韩欧美| 国内精品伊人| 日韩免费av| 午夜亚洲精品| 精品久久久久中文字幕小说| 91久久午夜| 大香伊人久久精品一区二区| 99国产精品久久久久久久 | 日韩精品一区二区三区中文| 卡一卡二国产精品| 欧美 日韩 国产一区二区在线视频| 婷婷亚洲成人| 99精品综合| 国产精品一区二区三区www| 色爱av综合网| 国产精品伊人| 蜜桃视频一区二区| 久久久久午夜电影| 麻豆成人av在线| 中文字幕一区二区av| 久久久夜精品| 国产在线日韩精品| 91精品国产自产在线丝袜啪| 尹人成人综合网| 亚洲天堂免费电影| 国产精品115| 欧美亚洲专区| 蜜臀精品久久久久久蜜臀| 视频福利一区| 日韩综合精品| 高潮一区二区| 国产欧美日韩精品一区二区免费 | 亚洲视频www| 成人午夜精品| 国产一区二区三区精品在线观看| 欧美中文高清| 日韩高清不卡一区| 亚洲免费在线| 91久久久精品国产| 久久久国产精品一区二区中文| 精品国产精品国产偷麻豆| 青草久久视频| 日本亚洲欧美天堂免费| 免费在线视频一区| 蜜桃视频第一区免费观看| 最新日韩欧美| 丝袜美腿亚洲一区二区图片| 亚洲欧美日韩视频二区| 亚洲一区国产一区| 亚洲综合不卡| 在线视频精品| 模特精品在线| 视频在线观看一区| 久久亚洲美女| 婷婷精品在线观看| 91精品国产自产精品男人的天堂| 天海翼精品一区二区三区| 亚洲人成在线影院| 亚洲伊人精品酒店| 深夜福利亚洲| 国产欧美一级| 91欧美国产| 日韩欧美看国产| 激情综合激情| 久久高清免费观看| 日本成人中文字幕在线视频| 国产亚洲精品美女久久久久久久久久| 国产日产精品_国产精品毛片| 久久国产麻豆精品| 荡女精品导航| 国产一区日韩欧美| 一区二区91| 免费在线亚洲欧美| 日韩电影免费网站| 女人天堂亚洲aⅴ在线观看| 石原莉奈一区二区三区在线观看| 深夜福利亚洲| 国产不卡一区| 免费观看久久av| 免费高清在线一区| 国产精品乱战久久久| 久久青青视频| 亚洲特色特黄| 日韩av中文在线观看| 国产aa精品| 午夜欧美精品| 国产亚洲久久| 91精品亚洲| 911亚洲精品| 久久九九国产| 日韩av午夜在线观看| 91视频久久| 免费在线看一区| a国产在线视频| 亚洲我射av| 日本少妇一区| 日韩av成人高清| 久久久777| 国产精品v日韩精品v欧美精品网站| 三上悠亚国产精品一区二区三区| 伊人久久大香伊蕉在人线观看热v| 高清一区二区三区av| 西西人体一区二区| 超碰99在线| 青青草91视频| 午夜久久99| 中国字幕a在线看韩国电影| 亚洲视频二区| 欧美粗暴jizz性欧美20| 麻豆精品在线播放| 日韩精品一区二区三区免费观看| 日本天堂一区| 欧美va天堂在线| 精品72久久久久中文字幕| 视频一区国产视频| 日产精品一区| 国产精品免费99久久久| 天堂av在线一区| 久久久噜噜噜| 色欧美自拍视频| 国产精品免费99久久久| 久久国产高清| 香蕉精品视频在线观看| 国产成人久久精品一区二区三区| 日本在线一区二区三区| 香蕉国产精品| 国产精品久久久久av电视剧| 日韩一区二区三区免费视频| 亚洲福利一区| 日韩欧美三级| 成人亚洲精品| 精品国产亚洲一区二区在线观看| 亚洲1区在线观看| 国产农村妇女精品一二区| 久久国产主播| 日韩一区亚洲二区| 97人人精品| 黄毛片在线观看| 欧美xxxx性| 国产精品99久久免费观看| 日韩av资源网| 国产一卡不卡| 日韩精品视频网| 亚洲久久一区| 日本亚洲不卡| 日本精品国产| 欧美一区在线观看视频| 日韩黄色免费网站| 免费人成在线不卡| 亚洲在线电影| 亚洲人成在线影院| 亚洲精品一二| 欧美日韩黄网站| 久久av免费| 国产精品99在线观看| 国产一区二区三区国产精品| 国产精品久一| 精品欧美日韩精品| 精品一区二区三区中文字幕 | 国产高清不卡| 久久久精品网| 日韩视频一区二区三区在线播放免费观看| 久久婷婷亚洲| 国产精品日本| 亚洲欧洲免费| 欧美日本久久| 国产精品黑丝在线播放| 日韩网站中文字幕| 午夜久久美女| 日本成人在线一区| 久久精品国产网站| 免费高潮视频95在线观看网站| 久久香蕉国产| 午夜在线精品| 国产探花在线精品| 国产成人精品福利| 欧美精品一二| 日韩三区四区| 丰满少妇一区| 欧美日韩国产高清| 人人爱人人干婷婷丁香亚洲| 精品国产第一福利网站| 影院欧美亚洲| 青青国产精品| 日韩亚洲一区在线| 中文字幕一区日韩精品| 免费在线播放第一区高清av| 久久视频精品| 777久久精品| 日本免费久久| 亚洲欧洲专区| av高清不卡| 日韩亚洲精品在线观看| 中文字幕在线视频久| 视频一区二区三区入口| 国内精品伊人| 综合激情在线| 日韩深夜视频| 日本中文字幕不卡|