文章詳情頁
java - 消息隊列處理臨界時間問題
瀏覽:124日期:2023-11-28 08:05:45
問題描述
現在從消息隊列接收消息,然后寫入文件。每小時寫一個,是批量寫入。但是出現個問題,每次寫的新文件開頭都有一些應該屬于上個小時得數據,消息體有time。如何保證所有消息都嚴格寫入自己小時得文件?,F在想到的是將批量寫入的buffer按小時區分,Map<hour,buffer>,一個buffer對應一個小時,以buffer 對應的小時字段生成文件名,這樣就保證每個buffer 里的數據都屬于自己的文件。還有其他更好的方法嗎?
問題解答
回答1:文件在小時整點生成,每個消息都帶上各自的時間戳,匹配寫
回答2:感覺你這個問題可能有以下幾個原因造成的:
producer重復發送了消息
mq重復發送了消息給consumer
前一小時consumer沒有告知mq已經消費消息,導致后一個小時mq又發送了消息
參考資料:
duplicated-messages-on-activemq
avoiding-duplicated-messages-on-jms-activemq
duplicate-detection
標簽:
java
相關文章:
1. android - weex 項目createInstanceReferenceError: Vue is not defined2. pdo 寫入到數據庫的內容為中文的時候寫入亂碼3. PHPExcel表格導入數據庫怎么導入4. android - 哪位大神知道java后臺的api接口的對象傳到前端后輸入日期報錯,是什么情況?求大神指點5. javascript - 如圖,百度首頁,查看源代碼為什么什么都沒有?6. vue2.0+webpack 如何使用bootstrap?7. PHP類封裝的插入數據,總是插入不成功,返回false;8. mac連接阿里云docker集群,已經卡了2天了,求問?9. javascript - 前端開發框架express,在他的模板引擎下怎么給按鈕添加綁定事件?10. python - 小白django提交數據后,沒有存儲到數據庫(查閱資料并沒有發現問題)
排行榜
