久久精品国产亚洲高清|精品日韩中文乱码在线|亚洲va中文字幕无码久|伊人久久综合狼伊人久久|亚洲不卡av不卡一区二区|精品久久久久久久蜜臀AV|国产精品19久久久久久不卡|国产男女猛烈视频在线观看麻豆

    1. <style id="76ofp"></style>

      <style id="76ofp"></style>
      <rt id="76ofp"></rt>
      <form id="76ofp"><optgroup id="76ofp"></optgroup></form>
      1. 千鋒教育-做有情懷、有良心、有品質(zhì)的職業(yè)教育機(jī)構(gòu)

        手機(jī)站
        千鋒教育

        千鋒學(xué)習(xí)站 | 隨時(shí)隨地免費(fèi)學(xué)

        千鋒教育

        掃一掃進(jìn)入千鋒手機(jī)站

        領(lǐng)取全套視頻
        千鋒教育

        關(guān)注千鋒學(xué)習(xí)站小程序
        隨時(shí)隨地免費(fèi)學(xué)習(xí)課程

        當(dāng)前位置:首頁  >  技術(shù)干貨  > Redis分布式鎖+信號量進(jìn)行限流的原理與代碼實(shí)現(xiàn)

        Redis分布式鎖+信號量進(jìn)行限流的原理與代碼實(shí)現(xiàn)

        來源:千鋒教育
        發(fā)布人:syq
        時(shí)間: 2022-10-09 09:29:03 1665278943

          一. 前言

          上周小千在《記一次OOM問題的解決連載一 流式查詢》中寫到,我在“中通全球創(chuàng)研中心”的學(xué)生為了避免出現(xiàn)OOM問題,把一個(gè)站點(diǎn)一個(gè)月流水的數(shù)據(jù),用Mybatis流式查詢的方式,把數(shù)據(jù)分批次讀進(jìn)內(nèi)存再寫到硬盤上。這樣處理之后確實(shí)在一定程度上減少了OOM發(fā)生的次數(shù),但仍然會在月初各個(gè)站點(diǎn),集中進(jìn)行上個(gè)月份月結(jié)報(bào)表時(shí)出現(xiàn)OOM的現(xiàn)象。

        Redis分布式鎖

          究其原因,月結(jié)報(bào)表的制作和上傳是一個(gè)很燒資源的過程,如果全國的中通站點(diǎn)都集中在月初時(shí)并發(fā)地制作月結(jié)報(bào)表,服務(wù)器根本承受不了這樣的壓力。

          鑒于此,小千的這個(gè)學(xué)生打算利用Redisson分布式鎖結(jié)合信號量進(jìn)行限流。也就是根據(jù)服務(wù)器的實(shí)際承受能力,后臺允許同時(shí)制作10份月結(jié)報(bào)表。如果服務(wù)器正在同時(shí)制作10份月結(jié)報(bào)表,那么其他制作月結(jié)報(bào)表的請求只能排隊(duì),直到有任務(wù)完成讓出一個(gè)信號量,才能處理一個(gè)新的請求。制作完成的月結(jié)報(bào)表會被上傳到文件服務(wù)器,后臺會通知前端客戶自行下載報(bào)表。

          那么以上這個(gè)解決思路,到底該怎么實(shí)現(xiàn)呢?

          二. 實(shí)現(xiàn)過程

          2.1 實(shí)現(xiàn)原理

          其實(shí)redisson分布鎖信號量的實(shí)現(xiàn)原理非常簡單,就是在redis中的一個(gè)整數(shù),當(dāng)有制作報(bào)表的請求時(shí),我們首先嘗試獲得一個(gè)信號量,如果能夠獲得(也就是信號量的整數(shù)大于0)就執(zhí)行制作報(bào)表的任務(wù),然后讓信號量總數(shù)減1。制作報(bào)表的任務(wù)完成之后,再調(diào)用release()方法釋放一個(gè)信號量,信號總量+1。

          2.2 核心代碼實(shí)現(xiàn)

          接下來小千就把核心代碼給大家展示一下。我們先在redis中初始化一個(gè)信號量,并且設(shè)置為10個(gè)。

        1

          當(dāng)某個(gè)站點(diǎn)發(fā)出打印報(bào)表的請求時(shí),先把任務(wù)記錄到數(shù)據(jù)庫中,并把任務(wù)的狀態(tài)設(shè)置為【等待中】。

        2

          當(dāng)流式查詢把所有的數(shù)據(jù)查出,并生成報(bào)表之后,我們應(yīng)該上傳報(bào)表到文件服務(wù)器,修改任務(wù)的狀態(tài)為【任務(wù)完成】,并釋放一個(gè)信號量出來。

        3

          三. 后話

          為了解決此次OOM的問題,我們使用到了流式查詢分頁讀取數(shù)據(jù),又使用到了分布式鎖的信號量限流,來限制同時(shí)執(zhí)行任務(wù)的個(gè)數(shù)。但小千的這個(gè)學(xué)生發(fā)現(xiàn),大數(shù)據(jù)讀取、生成excel、文件上傳這些操作,每一個(gè)都非常耗時(shí),為了不讓這三個(gè)操作彼此影響性能,最后還要使用MQ解耦,把這三個(gè)操作拆分成3個(gè)服務(wù)。至于結(jié)合MQ進(jìn)行具體解決的方案,小千會在以后的文章中繼續(xù)連載,請各位同學(xué)繼續(xù)關(guān)注哦。

        tags:
        聲明:本站稿件版權(quán)均屬千鋒教育所有,未經(jīng)許可不得擅自轉(zhuǎn)載。
        10年以上業(yè)內(nèi)強(qiáng)師集結(jié),手把手帶你蛻變精英
        請您保持通訊暢通,專屬學(xué)習(xí)老師24小時(shí)內(nèi)將與您1V1溝通
        免費(fèi)領(lǐng)取
        今日已有369人領(lǐng)取成功
        劉同學(xué) 138****2860 剛剛成功領(lǐng)取
        王同學(xué) 131****2015 剛剛成功領(lǐng)取
        張同學(xué) 133****4652 剛剛成功領(lǐng)取
        李同學(xué) 135****8607 剛剛成功領(lǐng)取
        楊同學(xué) 132****5667 剛剛成功領(lǐng)取
        岳同學(xué) 134****6652 剛剛成功領(lǐng)取
        梁同學(xué) 157****2950 剛剛成功領(lǐng)取
        劉同學(xué) 189****1015 剛剛成功領(lǐng)取
        張同學(xué) 155****4678 剛剛成功領(lǐng)取
        鄒同學(xué) 139****2907 剛剛成功領(lǐng)取
        董同學(xué) 138****2867 剛剛成功領(lǐng)取
        周同學(xué) 136****3602 剛剛成功領(lǐng)取
        相關(guān)推薦HOT
        大數(shù)據(jù)測試工程師需要具備哪些技能?

        一、理解大數(shù)據(jù)概念大數(shù)據(jù)測試工程師需要理解大數(shù)據(jù)的基本概念和原理,如分布式存儲、MapReduce、實(shí)時(shí)計(jì)算等。他們還需要了解如何處理大規(guī)模的...詳情>>

        2023-10-14 23:43:03
        為什么SpringBoot的 jar 可以直接運(yùn)行?

        一、JAR文件的結(jié)構(gòu)與執(zhí)行方式Spring Boot的JAR包是Java Archive的縮寫,它是一種壓縮文件格式,可以將Java項(xiàng)目的類文件、資源文件以及依賴庫等...詳情>>

        2023-10-14 23:01:49
        站群服務(wù)器是什么?

        站群服務(wù)器的含義與用途站群服務(wù)器主要用于支持站群,即由一組相互鏈接的網(wǎng)站組成的群體。這些網(wǎng)站通常由同一組織或個(gè)人擁有,并且經(jīng)常會互相鏈...詳情>>

        2023-10-14 22:46:12
        自編碼器是什么?

        一、自編碼器原理自編碼器的設(shè)計(jì)靈感源于神經(jīng)科學(xué)中關(guān)于感知系統(tǒng)的認(rèn)知原理,它的核心思想是將輸入數(shù)據(jù)經(jīng)過編碼過程,形成一個(gè)隱藏層的特征表示...詳情>>

        2023-10-14 22:41:10
        什么是云網(wǎng)融合?

        一、云網(wǎng)融合的定義云網(wǎng)融合是指將云計(jì)算與網(wǎng)絡(luò)技術(shù)相結(jié)合,實(shí)現(xiàn)資源的共享、業(yè)務(wù)的協(xié)同,將網(wǎng)絡(luò)與云端服務(wù)深度融合,提供更靈活、高效、安全的...詳情>>

        2023-10-14 22:31:47
        蚌埠市| 张家口市| 宁远县| 亳州市| 永宁县| 太仓市| 北碚区| 连州市| 潜山县| 宁城县| 临泉县| 收藏| 西畴县| 漯河市| 喀喇| 固镇县| 陇西县| 海宁市| 鹤山市| 化德县| 天门市| 克山县| 曲阜市| 中阳县| 禄丰县| 天门市| 三门县| 卢湾区| 罗山县| 吉林省| 德保县| 霍城县| 罗田县| 九龙坡区| 蒙自县| 将乐县| 方正县| 丹东市| 伽师县| 陆川县| 陇南市|