版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
1、微服務(wù)系統(tǒng)和數(shù)據(jù)庫(kù)設(shè)計(jì)方案1 .微服務(wù)本質(zhì)微服務(wù)架構(gòu)從本質(zhì)上說其實(shí)就是分布式架構(gòu),與其說是一種新架構(gòu), 不如說是一種微服務(wù)架構(gòu)風(fēng)格。簡(jiǎn)單來(lái)說,微服務(wù)架構(gòu)風(fēng)格是要開發(fā)一種由多個(gè)小服務(wù)組成的應(yīng)用。每個(gè)服務(wù)運(yùn)行于獨(dú)立的進(jìn)程,并且采用輕量級(jí)交互。多數(shù)情況下是一個(gè)http的資源api。這些服務(wù)具備獨(dú)立業(yè)務(wù)能力并可以通過自動(dòng)化部署方式獨(dú)立部署。這種風(fēng)格使最小化集中管理,從而可以使用多種不同的編程語(yǔ)言和數(shù)據(jù)存儲(chǔ)技術(shù)。對(duì)于微服務(wù)架構(gòu)系統(tǒng), 由于其服務(wù)粒度小, 模塊化清晰,因此首先要做的是對(duì)系統(tǒng)整體 進(jìn)行功能、服務(wù)規(guī)劃,優(yōu)先考慮如何在交付過程中,從工程實(shí)踐出發(fā),組織好代碼結(jié)構(gòu)、配 置、測(cè)試、部署、運(yùn)維、監(jiān)控的整
2、個(gè)過程,從而有效體現(xiàn)微服務(wù)的獨(dú)立性與可部署性。本文將從微服務(wù)系統(tǒng)的設(shè)計(jì)階段、開發(fā)階段、測(cè)試階段、部署階段進(jìn)行綜合闡述。理解微服務(wù)架構(gòu)和理念是核心。2 .系統(tǒng)環(huán)境名稱版本說明jdk1.8spring bootspring frameworkribbonkafkarabbitmq3 . 微服務(wù)架構(gòu)的挑戰(zhàn)可靠性:由于采用遠(yuǎn)程調(diào)用的方式, 任何一個(gè)節(jié)點(diǎn)、 網(wǎng)絡(luò)出現(xiàn)問題, 都將使得服務(wù)調(diào)用失敗,隨著微服務(wù)數(shù)量的增多,潛在故障點(diǎn)也將增多。也就是沒有充分的保障機(jī)制,則單點(diǎn)故障會(huì)大量增加。運(yùn)維要求高:系統(tǒng)監(jiān)控、高可用性、自動(dòng)化技術(shù)分布式復(fù)雜性:網(wǎng)絡(luò)延遲、系統(tǒng)容錯(cuò)、分布式事務(wù)部署依賴性強(qiáng):服務(wù)依賴、多版本問題性
3、能(服務(wù)間通訊成本高):無(wú)狀態(tài)性、進(jìn)程間調(diào)用、跨網(wǎng)絡(luò)調(diào)用數(shù) 據(jù)一致性:分布式事務(wù)管理需要跨越多個(gè)節(jié)點(diǎn)來(lái)保證數(shù)據(jù)的瞬時(shí)一致性, 因此比起傳統(tǒng)的單體架構(gòu)的事務(wù),成本要高得多。另外, 在分布式系統(tǒng)中,通常會(huì)考慮通過數(shù)據(jù)的最終一致性來(lái)解決數(shù)據(jù)瞬時(shí)一致帶來(lái)的系統(tǒng)不可用。重復(fù)開發(fā):微服務(wù)理念崇尚每個(gè)微服務(wù)作為一個(gè)產(chǎn)品看待, 有自己的團(tuán)隊(duì)開發(fā), 甚至可以有自己完全不同的技術(shù)、 框架, 那么與其他微服務(wù)團(tuán)隊(duì)的技術(shù)共享就產(chǎn)生了矛盾, 重復(fù)開發(fā)的工 作即產(chǎn)生了。4 . 架構(gòu)設(shè)計(jì)4.1. 思維設(shè)計(jì)微服務(wù)架構(gòu)設(shè)計(jì)的根本目的是實(shí)現(xiàn)價(jià)值交付,微服務(wù)架構(gòu)只有遵循devops理念方可進(jìn)行的更順暢,思維方式的轉(zhuǎn)變是最重要的。自
4、動(dòng)化可幌化交源庫(kù)取mqb苴實(shí)現(xiàn)微服務(wù)技術(shù)架構(gòu), 現(xiàn)有產(chǎn)品需要進(jìn)行技術(shù)上的改進(jìn)以及相關(guān)配套服務(wù)的實(shí)現(xiàn),采用分階段實(shí)施、以及試點(diǎn)產(chǎn)品優(yōu)先實(shí)施的策略,主要包括如下:一、技術(shù)上的改進(jìn):1、前后端分離,web前端通過http/https協(xié)議調(diào)用微服務(wù)的 api網(wǎng)關(guān),由api網(wǎng)關(guān)再 經(jīng)過路由服務(wù)調(diào)用相應(yīng)的微服務(wù)2、不同微服務(wù)之間通過 restt式互相調(diào)用3、微服務(wù)之間通過消息中間件實(shí)現(xiàn)消息交互機(jī)制二、配套服務(wù)與功能實(shí)現(xiàn):1、需要進(jìn)行相應(yīng)的自動(dòng)化服務(wù)實(shí)現(xiàn),包括自動(dòng)化構(gòu)建、自動(dòng)化安裝部署、自動(dòng)化測(cè)試、自動(dòng)化平臺(tái)發(fā)布(docker實(shí)現(xiàn))2、管理服務(wù),對(duì)于微服務(wù)架構(gòu),必須配套相應(yīng)的監(jiān)控與管理服務(wù)、日志管理服務(wù)等3
5、、協(xié)作服務(wù),運(yùn)用 devops思想提升開發(fā)、測(cè)試、運(yùn)維的高效溝通與協(xié)作,實(shí)現(xiàn)開發(fā) 與運(yùn)維的一體化最新可編輯word文檔4.2.微服務(wù)架構(gòu)設(shè)計(jì)no suggestwebujservices registryspring cloudeureka serversvn/avsn架構(gòu)圖1zuul afjlzuul api gdlewhy肺bcmnjrfikeb 器的hlbbofi笈赳均衡班就均於岫聞?證 曲題篇hvurheureka注冊(cè)勺心業(yè)如槌招策用irdru 新?lián){1feign 口陋nt棺若集用綺lfenthyitfur躋希spring seddonsprirw sc:好布式事第中心rm總存池5)ri
6、nj cloud匚0加1置中心 cgh港單業(yè)帚*我勢(shì)集酎pringadninturhiw 商疑監(jiān)控zlffan口感b際實(shí)時(shí)分布式u太累跳loestdslwelisicseafclwkrbwih最新可編輯word文檔架構(gòu)圖 21、我們把整個(gè)系統(tǒng)根據(jù)業(yè)務(wù)拆分成若干個(gè)子系統(tǒng)或微服務(wù)。2、每個(gè)子系統(tǒng)可以部署多個(gè)應(yīng)用,多個(gè)應(yīng)用之間使用負(fù)載均衡。3、需要一個(gè)服務(wù)注冊(cè)中心eureka,所有的服務(wù)都在注冊(cè)中心注冊(cè),負(fù)載均衡也是通過在注冊(cè)中心注冊(cè)的服務(wù)來(lái)使用一定策略來(lái)實(shí)現(xiàn)。 eureka 可部署多個(gè),進(jìn)行高可用保證。4、所有的客戶端都通過同一個(gè)網(wǎng)關(guān)地址訪問后臺(tái)的服務(wù),通過路由配置zuul 網(wǎng)關(guān)來(lái)判斷一個(gè)url請(qǐng)
7、求由哪個(gè)服務(wù)處理。請(qǐng)求轉(zhuǎn)發(fā)到服務(wù)上的時(shí)候使用負(fù)載均衡ribbon。5、服務(wù)之間采用feign 進(jìn)行調(diào)用。6、 使用斷路器hystrix , 及時(shí)處理服務(wù)調(diào)用時(shí)的超時(shí)和錯(cuò)誤, 防止由于其中一個(gè)服務(wù)的問題而導(dǎo)致整體系統(tǒng)的癱瘓。7、還需要一個(gè)監(jiān)控功能,監(jiān)控每個(gè)服務(wù)調(diào)用花費(fèi)的時(shí)間等。8 、使用springcloud config 進(jìn)行統(tǒng)一的配置管理,需要考慮與公司的配置管理平臺(tái)如何配合使用。9 、 hystrix ,監(jiān)控和斷路器。我們只需要在服務(wù)接口上添加hystrix 標(biāo)簽,就可以實(shí)現(xiàn)對(duì)這個(gè)接口的監(jiān)控和斷路器功能。10 、 hystrix dashboard ,監(jiān)控面板,他提供了一個(gè)界面,可以監(jiān)控各
8、個(gè)服務(wù)上的服務(wù)調(diào) 用所消耗的時(shí)間等。11、turbine,監(jiān)控聚合,使用 hystrix監(jiān)控,我們需要打開每一個(gè)服務(wù)實(shí)例的監(jiān)控信 息來(lái)查看。 而 turbine 可以幫助我們把所有的服務(wù)實(shí)例的監(jiān)控信息聚合到一個(gè)地方統(tǒng)一查看。這樣就不需要挨個(gè)打開一個(gè)個(gè)的頁(yè)面一個(gè)個(gè)查看。架構(gòu)的可靠性保證:在關(guān)鍵節(jié)點(diǎn)做主備、集群部署,防止單點(diǎn)故障。 待后續(xù)確認(rèn)問題:1、access control: zuul網(wǎng)關(guān)提供了相關(guān)控制功能,與我司cas如何結(jié)合使用2、 config server: spring cloud 提供了遠(yuǎn)程配置中心,與我司的配置管理平臺(tái)如何結(jié)合使用5. 設(shè)計(jì)階段5.1. 總體設(shè)計(jì)1、功能規(guī)劃:對(duì)
9、產(chǎn)品功能進(jìn)行拆分,拆分為若干個(gè)微服務(wù);一個(gè)功能可以創(chuàng)建多個(gè)微服務(wù)并部署在多個(gè)服務(wù)器節(jié)點(diǎn)上,以便進(jìn)行負(fù)載均衡。2、設(shè)計(jì)原子服務(wù)層,梳理和抽取核心應(yīng)用、公共應(yīng)用,作為獨(dú)立的服務(wù)下沉到核心和公共能力層,逐漸形成穩(wěn)定的服務(wù)中心,使應(yīng)用能更快速的響應(yīng)多變的客戶需求。3、為每個(gè)服務(wù)設(shè)計(jì) api接口( restt式)4、為不同的服務(wù)進(jìn)行分類,不同類型的服務(wù)需要的資源不同,可以配置不同的資源,包才cpu內(nèi)存、存儲(chǔ)等。5.2. 服務(wù)拆分原則1、粒度微小:根據(jù)業(yè)務(wù)功能劃分服務(wù)粒度,總的原則是服務(wù)內(nèi)部高內(nèi)聚,服務(wù)之間低耦合。2、責(zé)任單一:每個(gè)服務(wù)只做一件事,即單一職責(zé)原則。3、隔離性原則:每個(gè)服務(wù)相互隔離,且不互相
10、影響4、業(yè)務(wù)無(wú)關(guān)優(yōu)先原則:基礎(chǔ)服務(wù),是一些基礎(chǔ)組件,與具體的業(yè)務(wù)無(wú)關(guān)。比如:短信服務(wù)、郵件服務(wù)。這 里的服務(wù)最容易劃分出來(lái)做微服務(wù),也是我們第一優(yōu)先級(jí)分離出來(lái)的服務(wù)。5.3. 服務(wù)規(guī)劃為實(shí)現(xiàn)負(fù)載均衡, 允許相同的服務(wù)在多個(gè)節(jié)點(diǎn)注冊(cè)相同的服務(wù)名, 不同的端口。 如果沒有前期的規(guī)劃, 不同的服務(wù)提供者可能會(huì)注冊(cè)相同的服務(wù)名, 導(dǎo)致消費(fèi)者調(diào)用服務(wù)時(shí)產(chǎn)生調(diào)用混亂。因此,需進(jìn)行服務(wù)名的統(tǒng)一規(guī)劃:1、規(guī)劃期統(tǒng)一制定每個(gè)服務(wù)提供者的服務(wù)名或者模塊標(biāo)示。2、服務(wù)名的命名規(guī)則:modulename_servicename ,且所有字符小寫,不同單詞之間以下劃線分隔。如用戶管理模塊提供了獲取用戶信息的服務(wù),則命名
11、為: user_get_info 。3、新增服務(wù)名時(shí),需要提出申請(qǐng),審批通過后方可使用,為減少審批復(fù)雜度,可只審批 modulename ,即在模塊內(nèi)部可以自由增加服務(wù)名,不需要進(jìn)行審批。5.4. 開發(fā)策略總體原則:不同的微服務(wù)需進(jìn)行物理隔離。1、svn策略:svn上創(chuàng)建獨(dú)立的分支,不同微服務(wù)的代碼提交不受相互影響;-由配置管理員統(tǒng)一控制。問題:開發(fā)分支與集成分支,都將增加很多,維護(hù)工作量增加。2、編譯策略:代碼編譯時(shí),各個(gè)微服務(wù)獨(dú)立編譯、打包,杜絕直接的依賴;3、工程構(gòu)建:代碼開發(fā)時(shí),各微服務(wù)創(chuàng)建獨(dú)立的工程,工程之間不能產(chǎn)生直接依賴4、持續(xù)集成:每個(gè)微服務(wù)獨(dú)立執(zhí)行持續(xù)集成。5、版本集成:由統(tǒng)
12、一的集成工具,實(shí)現(xiàn)自動(dòng)化的版本集成,將所有微服務(wù)集成到統(tǒng)一 的版本發(fā)布包中。5.5. 版本策略每個(gè)微服務(wù)可以獨(dú)立制作版本,伴隨著服務(wù)的增多,svn分支增多,版本也將增多,版本管理的復(fù)雜度將成指數(shù)級(jí)增加。 在服務(wù)之間依賴較多時(shí), 每個(gè)服務(wù)的升級(jí)或降級(jí)都將影響 其他服務(wù)的正常運(yùn)行。因此需執(zhí)行如下策略:1、所有服務(wù)的版本制作交由專業(yè)的版本管理員執(zhí)行。2、采用自動(dòng)化的版本制作策略,最大程度的減少人工操作。3、每個(gè)服務(wù)的版本必須有詳細(xì)的版本計(jì)劃、版本說明,對(duì)于版本說明要制定模板,明確需要提交的內(nèi)容、版本號(hào)、svn標(biāo)簽等。4、對(duì)項(xiàng)目經(jīng)理的要求提升,需對(duì)整體的版本計(jì)劃有嚴(yán)格的制定,尤其是版本之間的依賴關(guān)系要
13、非常明確,版本升級(jí)、降級(jí)的風(fēng)險(xiǎn)評(píng)估需完全充分。發(fā)公告等流程。5、 接口管理: 嚴(yán)格執(zhí)行接口管理制度,任何接口的變更必須進(jìn)行審批、5.6. 數(shù)據(jù)庫(kù)挑戰(zhàn)與策略每個(gè)微服務(wù)都有自己獨(dú)立的數(shù)據(jù)庫(kù), 那么后臺(tái)管理的聯(lián)合查詢?cè)趺刺幚恚窟@應(yīng)該是大家會(huì)普遍遇到的一個(gè)問題,有四種處理方案。1)嚴(yán)格按照微服務(wù)的劃分來(lái)做,微服務(wù)相互獨(dú)立,各微服務(wù)數(shù)據(jù)庫(kù)也獨(dú)立,后臺(tái)需要 展示數(shù)據(jù)時(shí), 調(diào)用各微服務(wù)的接口來(lái)獲取對(duì)應(yīng)的數(shù)據(jù), 再進(jìn)行數(shù)據(jù)處理后展示出來(lái), 這是標(biāo)準(zhǔn)的用法,也是最麻煩的用法。2) 將業(yè)務(wù)高度相關(guān)的表放到一個(gè)庫(kù)中,將業(yè)務(wù)關(guān)系不是很緊密的表嚴(yán)格按照微服務(wù)模式來(lái)拆分,這樣既可以使用微服務(wù),也避免了數(shù)據(jù)庫(kù)分散導(dǎo)致后臺(tái)系
14、統(tǒng)統(tǒng)計(jì)功能難以實(shí)現(xiàn), 是一個(gè)折中的方案。3) mysql+mha高可用架構(gòu) 、mysql分布式 proxy水平擴(kuò)展架構(gòu)、 mysql緩存高并 發(fā)讀架構(gòu)、mysql小文件系統(tǒng)大字段存取架構(gòu)、mysql inforbright/greenplum統(tǒng)計(jì)分析架構(gòu)。4)數(shù)據(jù)庫(kù)嚴(yán)格按照微服務(wù)的要求來(lái)切分,以滿足業(yè)務(wù)高并發(fā),實(shí)時(shí)或者準(zhǔn)實(shí)時(shí)將各微服務(wù)數(shù)據(jù)庫(kù)數(shù)據(jù)同步到 nosql 數(shù)據(jù)庫(kù)中,在同步的過程中進(jìn)行數(shù)據(jù)清洗,用來(lái)滿足后臺(tái)業(yè)務(wù)系統(tǒng)的使用,推薦使用 mongodb、hbase等。第一種方案適合業(yè)務(wù)較為簡(jiǎn)單的小公司; 第二種方案, 適合在原有系統(tǒng)之上, 慢慢演化為微服務(wù)架構(gòu)的公司; 第三種適合大型高并發(fā)的互
15、聯(lián)網(wǎng)公司; 第四種適合超大型擴(kuò)張能力強(qiáng) 高并發(fā)公司。建議,我們當(dāng)前采用第二種方案。5.7. 負(fù)載均衡不再采用一般的增加負(fù)載均衡服務(wù)器的方式進(jìn)行負(fù)載均衡,如 f5、nginx、lvs等,而 是把負(fù)載均衡的功能以庫(kù)的方式集成到服務(wù)消費(fèi)方的進(jìn)程內(nèi),這種方案稱為軟負(fù)載均衡(soft load balancing) 或者客戶端負(fù)載均衡。 在 spring cloud 中配合 eureka 的服務(wù)注冊(cè)功能,ribbon子項(xiàng)目則為res珞戶端實(shí)現(xiàn)了負(fù)載均衡。最新可編輯word 文檔匚土 iclient鼠、fejcm .jauth servicemomrrordashhoajrdturbine使用ribbon
16、進(jìn)行負(fù)載均衡,其工作原理可以概括為下面四個(gè)步驟:1. ribbon首先根據(jù)其所在 zone優(yōu)先選擇一個(gè)負(fù)載較少的eureka server;2. 定期從eureka server更新并過濾服務(wù)實(shí)例列表;3. 根據(jù)指定的負(fù)載均衡策略,從可用的服務(wù)器列表中選擇一個(gè)服務(wù)實(shí)例的地址4. 然后通過restclient進(jìn)行服務(wù)調(diào)用。ribbon本身提供了下面幾種負(fù)載均衡策略:roundrobinrule:輪詢策略,ribbon以輪詢的方式選擇服務(wù)器,這個(gè)是默認(rèn)值。所以示例中所啟動(dòng)的兩個(gè)服務(wù)會(huì)被循環(huán)訪問;randomrule:隨機(jī)選擇,也就是說 ribbon會(huì)隨機(jī)從服務(wù)器列表中選擇一個(gè)進(jìn)行訪 問;besta
17、vailablerule:最大可用策略,即先過濾出故障服務(wù)器后,選擇一個(gè)當(dāng)前并發(fā)請(qǐng)求數(shù)最小的;weightedresponsetimerule:帶有加權(quán)的輪詢策略,對(duì)各個(gè)服務(wù)器響應(yīng)時(shí)間進(jìn)行加權(quán)處理,然后在采用輪詢的方式來(lái)獲取相應(yīng)的服務(wù)器;availabilityfilteringrule:可用過濾策略,先過濾出故障的或并發(fā)請(qǐng)求大于閾值一部分服務(wù)實(shí)例,然后再以線性輪詢的方式從過濾后的實(shí)例清單中選出一個(gè); zoneavoidancerule: 區(qū)域感知策略,先使用主過濾條件(區(qū)域負(fù)載器,選擇最優(yōu)區(qū)域)對(duì)所有實(shí)例過濾并返回過濾后的實(shí)例清單,依次使用次過濾條件列表中的過濾條件對(duì)主過濾條件的結(jié)果進(jìn)行過濾
18、,判斷最小過濾數(shù)(默認(rèn)1)和最小過濾百分比(默認(rèn)0),最后對(duì)滿足條件的服務(wù)器則使用roundrobinrule(輪詢方式)選擇一個(gè)服務(wù)器實(shí)例。5.8. 性能策略1、網(wǎng)絡(luò)優(yōu)化:優(yōu)化組網(wǎng)結(jié)構(gòu),提升網(wǎng)絡(luò)間通訊性能;2、配置優(yōu)化:優(yōu)化 spring cloud組件集以及其他組件的配置信息,使得性能最大化。5.9. 技術(shù)管理策略微服務(wù)的架構(gòu)理念中指出各微服務(wù)可以獨(dú)立建設(shè),可以使用不同的技術(shù)、 語(yǔ)言、框架等,以便能更快速的使用新技術(shù)、新框架等響應(yīng)特定客戶需求,解決單體應(yīng)用架構(gòu)更新技術(shù)、更 新框架時(shí)面臨的困難或阻礙。但這也同時(shí)帶來(lái)了諸多問題,如下:1、各服務(wù)是否可以任意使用自己的技術(shù)、自己的組件、框架呢?如
19、果這樣,勢(shì)必帶來(lái) 更大的管理困難、維護(hù)困難、技術(shù)共享困難。2、公共的方法如何實(shí)現(xiàn)共享?如格式化時(shí)間的一個(gè)簡(jiǎn)單方法需要共享,也需要封裝為一個(gè)服務(wù)接口嗎?管理策略:1、總體原則:仍然需要進(jìn)行統(tǒng)籌考慮,所有組件統(tǒng)一管理,組件放置在產(chǎn)品倉(cāng)庫(kù)中, 每個(gè)產(chǎn)品或服務(wù)需要共享組件時(shí),從產(chǎn)品倉(cāng)庫(kù)獲取。最新可編輯word文檔打破傳就.創(chuàng)造c2b模式的產(chǎn)品研發(fā)產(chǎn)品替店(倉(cāng)庫(kù))應(yīng)用春統(tǒng)應(yīng)用親統(tǒng)口窕淵版交付鹿會(huì)產(chǎn)品筐理中心:搭枳木式的快速開發(fā),快速裝模式產(chǎn)晶潔h產(chǎn)品發(fā)布產(chǎn)鼎坦第產(chǎn)品里新打造產(chǎn)店模式r產(chǎn)品商店提供小產(chǎn)品、事件.由客戶購(gòu)買,靈活紐裝臼己的商品2、特殊情況:特殊服務(wù)需要使用特殊的組件、框架,需提出申請(qǐng),統(tǒng)籌規(guī)
20、劃后進(jìn)行決*。6 .開發(fā)階段6.1. 服務(wù)的調(diào)用6.1.1. aip網(wǎng)關(guān)調(diào)用所有服務(wù)通過zuul網(wǎng)關(guān)進(jìn)行調(diào)用,不允許直接調(diào)用微服務(wù)提供者。zuul可能會(huì)成為系統(tǒng)瓶頸,在項(xiàng)目復(fù)雜時(shí)可考慮為zuul進(jìn)行主備或負(fù)載均衡處理。zuul代理機(jī)制dept利盤郭acompinv客戶端rpc前翳springuodt)zllulrh!躇由喙七rm后端(springcfoud ) mvbans mvbafls* mybatls mvbatls6.1.2. 同步調(diào)用采用http restt式進(jìn)行調(diào)用,針對(duì)業(yè)務(wù)需求可以進(jìn)行負(fù)載均衡,負(fù)載均衡的調(diào)用方式有兩種:1、feignclient2、resttemplate建議使
21、用feignclient方式進(jìn)行服務(wù)調(diào)用。不管是什么方式,他都是通過 res假口調(diào)用服務(wù)的http接口,參數(shù)和結(jié)果默認(rèn)都是通 過jackson序列化和反序列化。因?yàn)?spring mvc的restcontroller定義的接口,返回的數(shù)據(jù) 都是通過jackson序列化成json數(shù)據(jù)。6.1.3. 異步調(diào)用rabbitmq、kafka、spring cloud stream均是可以選擇的方案。 spring cloud stream ,基于 redis、rabbit、kafka 實(shí)現(xiàn)的消息微服務(wù),簡(jiǎn)單聲明模型用以在 spring cloud應(yīng)用中收發(fā)消息。6.1.4. 服務(wù)間調(diào)用的權(quán)限驗(yàn)證般我們
22、的api接口都需要某種授權(quán)才能訪問,登陸成功以后,然后通過token或者cookie等方式才能調(diào)用接口。使用spring cloud nefix框架的話,登錄的時(shí)候,把登錄請(qǐng)求轉(zhuǎn)發(fā)到相應(yīng)的用戶服務(wù)上,登陸成功后,會(huì)設(shè)置cookie或header token等。然后客戶端接下來(lái)的請(qǐng)求就會(huì)帶著這些驗(yàn)證信息,從zuul網(wǎng)關(guān)傳到相應(yīng)的服務(wù)上進(jìn)行驗(yàn)證。zuul網(wǎng)關(guān)在把請(qǐng)求轉(zhuǎn)發(fā)到后臺(tái)的服務(wù)的時(shí)候,會(huì)默認(rèn)把一些header傳到服務(wù)端,如:cookie、set-cookie、authorization 。這樣,客戶端請(qǐng)求的相關(guān) headers就可以傳遞到服務(wù)端, 服務(wù)端設(shè)置的cookie也可以傳到客戶端。但是
23、,如果你想禁止某些header透?jìng)鞯椒?wù)端,可以在 zuul網(wǎng)關(guān)的application.yml配置里通過下面的方式禁用:zuul:routes:users:path: /users/*sensitiveheaders: cookie,set-cookie,authorizationserviceid: userheader里面也不會(huì)剛才說了我們的某個(gè)服務(wù)有時(shí)候需要調(diào)用另一個(gè)服務(wù),這時(shí)候,這個(gè)請(qǐng)求不是客戶端發(fā)起,他的請(qǐng)求的有任何驗(yàn)證信息。這時(shí)候,要么,通過防火墻等設(shè)置,保證服務(wù)間調(diào)用的接口,只能某幾個(gè)地址訪問;要么,就通過某種方式設(shè)置 header。同時(shí),如果你想在某個(gè)服務(wù)里面獲得這個(gè)請(qǐng)求的真
24、是ip,(因?yàn)檎?qǐng)求的通過網(wǎng)關(guān)轉(zhuǎn)發(fā)而來(lái),你直接通過request獲彳導(dǎo)ip得到的是網(wǎng)關(guān)的ip),就可以從headerx-forwarded-host獲得。如果想禁用這個(gè) header,也可以:zuul.addproxyheaders = false如果你使用resttemplate的方式調(diào)用,可以在請(qǐng)求里面添加一個(gè)有header的options也可以通過如下的攔截器的方式設(shè)置,它對(duì) resttemplate方式和feignclient的方式都可以起作用:beanpublic requestinterceptor requestinterceptor() return new requestint
25、erceptor() overridepublic void apply(requesttemplate template) string authtoken = gettoken();template.header(auth_token_header, authtoken);;6.1.5. 服務(wù)編排主要的作用是減少項(xiàng)目中的相互依賴。比如現(xiàn)在有項(xiàng)目a調(diào)用項(xiàng)目b,項(xiàng)目b調(diào)用項(xiàng)目c.一直到h,是一個(gè)調(diào)用鏈,那么項(xiàng)目上線的時(shí)候需要先更新最底層的h再更新g.更新c更新b最后是更新項(xiàng)目a。這只是這一個(gè)調(diào)用鏈,在復(fù)雜的業(yè)務(wù)中有非常多的調(diào)用,如果要記住每一個(gè)調(diào)用鏈對(duì)開發(fā)運(yùn)維人員來(lái)說就是災(zāi)難。有這樣一個(gè)好辦法
26、可以盡量的減少項(xiàng)目的相互依賴,就是服務(wù)編排,一個(gè)核心的業(yè)務(wù)處理項(xiàng)目,負(fù)責(zé)和各個(gè)微服務(wù)打交道。比如之前是 a調(diào)用b, b掉用c, c調(diào)用d,現(xiàn)在統(tǒng)一在一個(gè)核心項(xiàng)目 w中來(lái)處理,w服務(wù)使用a的時(shí)候去調(diào)用b,使用b的時(shí)候 w去調(diào)用co其實(shí)可以理解為面向?qū)ο蟮脑O(shè)計(jì),減少方法之間的一層層嵌套調(diào)用,而采取一個(gè)方法進(jìn)行業(yè)務(wù)流程的串聯(lián),如方法w實(shí)現(xiàn)一個(gè)完整的業(yè)務(wù)處理,則采取下面方式:function w ()1、調(diào)用方法a;2、調(diào)用方法b;3、調(diào)用方法c;6.2. 服務(wù)的熔斷處理在服務(wù)之間進(jìn)行調(diào)用時(shí),由于各種原因會(huì)導(dǎo)致遠(yuǎn)程服務(wù)不可用或壓力過載等異常導(dǎo)致的故障蔓延,此時(shí)需要有一種機(jī)制進(jìn)行保護(hù)處理。 spring
27、 cloud通過netflix的hystrix組件實(shí)現(xiàn)熔斷和降級(jí)處理解決此問題。斷路器 (cricuit breaker)是一種能夠在遠(yuǎn)程服務(wù)不可用時(shí)自動(dòng)熔斷(打開開關(guān)),并在遠(yuǎn)程服務(wù)恢復(fù)時(shí)自動(dòng)恢復(fù)(閉合開關(guān))的設(shè)施,spring cloud通過netflix的hystrix組件提供斷路器、資源隔離與自我修復(fù)功能。spring cloud hystrix 熔斷器opensuccesstry one requestfas: failingmilopen circuitsuccessclose circuitcircuit breaker statt diagramhystrix熔斷處理做服務(wù)xl
28、用事欲沖; r機(jī)庸卡電, 八爵椎瓶機(jī).6.3. 統(tǒng)一日志管理不同微服務(wù)部署在不同節(jié)點(diǎn)上, 登錄每個(gè)節(jié)點(diǎn)查看日志是比較麻煩的, 同時(shí)對(duì)于需要關(guān) 聯(lián)多個(gè)微服務(wù)日志聯(lián)合查看分析的情況將更加麻煩。伴隨節(jié)點(diǎn)數(shù)量的增加,如果沒有合適的管理機(jī)制與工具,定位問題、發(fā)現(xiàn)問題的復(fù)雜性將越來(lái)越大,將成指數(shù)級(jí)增長(zhǎng),因此需要進(jìn) 行統(tǒng)一日志管理。1、建立統(tǒng)一的日志管理規(guī)范;2、開發(fā)并使用統(tǒng)一的日志組件,為所有微服務(wù)提供統(tǒng)一的日志服務(wù),由 10g4j或blitz4j 封裝;3、在每個(gè)服務(wù)節(jié)點(diǎn)上部署日志采集agent組件,由此agent進(jìn)行日志的采集與轉(zhuǎn)發(fā);4、建立統(tǒng)一的日志中心,所有日志寫入日志中心。說明:上述日志的實(shí)現(xiàn)由
29、公司的“日志管理平臺(tái)”進(jìn)行實(shí)現(xiàn),采用的是elk集合框架。6.4. 統(tǒng)一監(jiān)控管理使用hystrix組件進(jìn)行服務(wù)的監(jiān)控,使用nagios進(jìn)行服務(wù)器等資源的監(jiān)控。1、hystrix,監(jiān)控和斷路器。我們只需要在服務(wù)接口上添加hystrix標(biāo)簽,就可以實(shí)現(xiàn)對(duì)這個(gè)接口的監(jiān)控和斷路器功能。2、hystrix dashboard,監(jiān)控面板,他提供了一個(gè)界面,可以監(jiān)控各個(gè)服務(wù)上的服務(wù)調(diào) 用所消耗的時(shí)間等。3、turbine,監(jiān)控聚合,使用 hystrix監(jiān)控,我們需要打開每一個(gè)服務(wù)實(shí)例的監(jiān)控信息 來(lái)查看。而turbine可以幫助我們把所有的服務(wù)實(shí)例的監(jiān)控信息聚合到一個(gè)地方統(tǒng)一查看。這樣就不需要挨個(gè)打開一個(gè)個(gè)的頁(yè)
30、面一個(gè)個(gè)查看。6.5. 統(tǒng)一配置管理實(shí)現(xiàn)各微服務(wù)的統(tǒng)一參數(shù)配置以及版本管理,可采用公司的配置管理平臺(tái)或者springcloud config配置中心。spring cloud config配置中心remoterepositoryspring cloud config 就是我們通常意義上的配置中心。spring cloud config- 把應(yīng)用原本放在本地文件的配置抽取出來(lái)放在中心服務(wù)器,本質(zhì)是配置信息從本地遷移到云端 。從而能夠提供更好的管理、發(fā)布能力。spring cloud config分服務(wù)端和客戶端,服務(wù)端負(fù)責(zé)將 git (svn)中存儲(chǔ)的配置文件 發(fā)布成rest接口,客戶端可以從服
31、務(wù)端 rest接口獲取配置。但客戶端并不能主動(dòng)感知到配 置的變化,從而主動(dòng)去獲取新的配置,這需要每個(gè)客戶端通過post方法觸發(fā)各自的/refresh 。為解決配置信息能及時(shí)通知到各服務(wù),同時(shí)減少每個(gè)微服務(wù)處理配置信息更新的復(fù)雜 度,為此我們通過消息總線來(lái)解決此問題,方案如下:cofwig sarv&f“eke a - 21. git 倉(cāng)庫(kù)、config server 、以及微服務(wù)“service a 、service b”的實(shí)例中都引入了 spring cloud bus ,所以他們都連接到了rabbitmq的消息總線上。2. 從git倉(cāng)庫(kù)中配置的修改到發(fā)起 /bus/refresh 的pos
32、t青求這一步可以通過git倉(cāng)庫(kù)的web hook來(lái)自動(dòng)觸發(fā)。3. /bus/refresh請(qǐng)求不再發(fā)送到具體服務(wù)實(shí)例上,而是發(fā)送給config server ,并通過destination參數(shù)來(lái)指定需要更新配置的服務(wù)或?qū)嵗?. 由于所有連接到消息總線上的應(yīng)用都會(huì)接受到更新請(qǐng)求,所以在 web hook中就不需要維護(hù)所有節(jié)點(diǎn)內(nèi)容來(lái)進(jìn)彳t更新,從而解決了通過webhook來(lái)逐個(gè)進(jìn)行刷新的問題。6.6. 分布式 session采用redis作為緩存組件以及 session的共享組件。redis6.7. rest資源響應(yīng)結(jié)構(gòu)制定規(guī)范和解析方法。6.8. api調(diào)用鏈追蹤微服務(wù)架構(gòu)上通過業(yè)務(wù)來(lái)劃分服務(wù)
33、的,通過rest調(diào)用,對(duì)外暴露的一個(gè)接口, 可能需要很多個(gè)服務(wù)協(xié)同才能完成這個(gè)接口功能,如果鏈路上任何一個(gè)服務(wù)出現(xiàn)問題或者網(wǎng)絡(luò)超時(shí),都會(huì)形成導(dǎo)致接口調(diào)用失敗。隨著業(yè)務(wù)的不斷擴(kuò)張,服務(wù)之間互相調(diào)用會(huì)越來(lái)越復(fù)雜。spring cloud sleuth主要功能就是在分布式系統(tǒng)中提供追蹤解決方案,并且兼容支持了zipkin ,你只需要在 pom 文件中引入相應(yīng)的依賴即可。end time 044htd17-c3 vufld ziptoiri.c?zipkiriwatikmzbfildtuniim 看聞仲frfmiseirtfkrisifud膛.cfllifihibnemfmlicqniihwnwshi
34、dysc44bo333zgmwrvkwnm.live 立 0口呼廿i:total目曲所息:。jwmex-d m111s f青力曲eml 8輒ki&* nrcns, : n-pujfi.-telnnszhs&i6.9. 單元測(cè)試做微服務(wù)架構(gòu),進(jìn)行系統(tǒng)測(cè)試的復(fù)雜度較大,為保證產(chǎn)品質(zhì)量與開發(fā)、測(cè)試效率,單元 測(cè)試是必不可少的。可采用mock方式進(jìn)行測(cè)試模擬,由持續(xù)集成進(jìn)行自動(dòng)化單元測(cè)試的執(zhí)行以及結(jié)果輸出。6.10. 代碼調(diào)試對(duì)于單體架構(gòu)系統(tǒng), 可直接本地化調(diào)試,但對(duì)于微服務(wù)架構(gòu), 接口間的調(diào)用需采用遠(yuǎn)程 通訊的方式,也就是說被調(diào)用的服務(wù)必須啟動(dòng)后方可被調(diào)用,因此當(dāng)微服務(wù)增多時(shí),你可能需要啟動(dòng)大量的微
35、服務(wù)或者 web服務(wù)器,這給本地化調(diào)用與調(diào)試帶來(lái)了困難。解決方案待研究。7 .測(cè)試3,單元測(cè)讀力辭再住科檢查迭代1統(tǒng)tc椒范4.持捉 集成,user story backtog口spnrt us5 caje/task 6addog c?代碼質(zhì)保證步賺雨埼希求民代碼怦 用和重構(gòu)7.1. 自動(dòng)化測(cè)試單元測(cè)試:由開發(fā)人員實(shí)現(xiàn)。采用mock方式進(jìn)行測(cè)試模擬,由持續(xù)集成進(jìn)行自動(dòng)化單元測(cè)試的執(zhí)行以及結(jié)果輸 出。業(yè)務(wù)測(cè)試:開發(fā)進(jìn)行實(shí)現(xiàn),測(cè)試也需考慮如何實(shí)現(xiàn)。將多個(gè)服務(wù)或業(yè)務(wù)單元進(jìn)行串聯(lián),測(cè)試一個(gè)完整的業(yè)務(wù),甚至是不同業(yè)務(wù)之間組成的系統(tǒng)測(cè)試,需要采用相關(guān)的自動(dòng)化測(cè)試框架執(zhí)行,如robotframework自動(dòng)化測(cè)試框架。主干本型m碑分瑩蔚等7.2. 依賴測(cè)試也可以稱為接口測(cè)試或者契約測(cè)試, 在微服務(wù)逐漸增多的情況下, 如何有效保證服務(wù)之 間能夠按照接口的約定正常工作, 即符合契約,成為微服務(wù)實(shí)施過程中, 測(cè)試面臨的主要挑 戰(zhàn)。一、開發(fā)自動(dòng)化的接口測(cè)試工具,1、檢測(cè)接口是否滿足約定2、檢測(cè)接口是否發(fā)生變化3、檢測(cè)接口是否可以正常被調(diào)用。二、測(cè)試方法:采取基于消費(fèi)者驅(qū)動(dòng)的契約測(cè)試,測(cè)試架構(gòu)如下:3依1滿足鴻聿者的樊均隔要蛤m肖麥者的契約其優(yōu)勢(shì)如下:從價(jià)值實(shí)現(xiàn)的角度定義契約從消費(fèi)者使用契約的角度出發(fā),首先保證消費(fèi)者基于此契約是可以實(shí)現(xiàn)價(jià)值的,
溫馨提示
- 1. 本站所有資源如無(wú)特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 深度解析(2026)《GBT 19388-2003轎車輪胎滾動(dòng)周長(zhǎng)試驗(yàn)方法》
- 電子集團(tuán)系統(tǒng)架構(gòu)師崗位考試題庫(kù)含答案
- 金融分析師與投資顧問面試題集
- 游戲開發(fā)設(shè)計(jì)師面試題目詳解
- 深度解析(2026)《GBT 19291-2003金屬和合金的腐蝕 腐蝕試驗(yàn)一般原則》
- 冷鉚絞鏈機(jī)項(xiàng)目可行性分析報(bào)告范文(總投資12000萬(wàn)元)
- 環(huán)境衛(wèi)生健康風(fēng)險(xiǎn)評(píng)估與治理策略
- 乙炔壓力表項(xiàng)目可行性分析報(bào)告范文
- 廣東開放大學(xué)2025年秋學(xué)期《社會(huì)調(diào)查研究與方法》形成性考核(含參考答案)
- 年產(chǎn)xxx內(nèi)外墻磚項(xiàng)目可行性分析報(bào)告
- 礦山生態(tài)修復(fù)工程驗(yàn)收規(guī)范
- 法律診所(第三版)課件全套 第1-10章 入門、會(huì)見-調(diào)解
- QC工作流程圖模板
- 電梯維保服務(wù)投標(biāo)方案
- 4繼電控制線路故障檢測(cè)與排除
- 國(guó)家開放大學(xué)《公共部門人力資源管理》期末機(jī)考資料
- 大學(xué)生職業(yè)規(guī)劃與就業(yè)指導(dǎo)知到章節(jié)答案智慧樹2023年廣西中醫(yī)藥大學(xué)
- GB/T 20969.2-2021特殊環(huán)境條件高原機(jī)械第2部分:高原對(duì)工程機(jī)械的要求
- PMBOK指南第6版中文版
- 快速記憶法訓(xùn)練課程速讀課件
- 步戰(zhàn)略采購(gòu)方法細(xì)解 CN revison 課件
評(píng)論
0/150
提交評(píng)論