10-CCTC2016-樂視陳軼飛-私有PaaS在樂視的實踐

私有PaaS在樂視的實踐陳軼飛2016/05/14私有PaaS在樂視的實踐關鍵詞及適合聽眾?公有技術更復雜；要考慮問題太多?私有的更關注核心問題?只解決每個階段的核心問題?適合聽眾?小型互聯(lián)網(wǎng)創(chuàng)業(yè)公司?傳統(tǒng)企業(yè)互聯(lián)網(wǎng)化索私有PaaS在樂視的實踐索私有PaaS在樂視的實踐私有PaaS在樂視的實踐私有PaaS在樂視的實踐設備管理遠程控制邊看邊買視頻通話多屏互動設備管理遠程控制邊看邊買視頻通話多屏互動網(wǎng)絡短信個人云個人云桌面插件瀏覽器免流量私有PaaS私有云平臺技術架構WAF動態(tài)緩存WAF動態(tài)緩存負載均衡應用層(業(yè)務層)redismongoredismongomysqlhbasecache私有PaaS在樂視的實踐PaaS在云平臺中的作用?打通接入層、應用層、服務層?承載了云平臺95%以上的業(yè)務PaaS發(fā)展歷程：階段一PaaS發(fā)展歷程：階段一?團隊剛起步，基礎設施一窮?中控腳本?docker?機器掛了要人工重新部署?容器掛了要重新部署?資源無法合理分配?業(yè)務之間互相影響?Mesos+marathon+docker?灰度發(fā)布、集中配置等新需求?業(yè)務人員不知道需要多少資PaaS狀私有PaaS在樂視的實踐私有系統(tǒng)架構ceberusmesosmasterceberusmesosmaster私有PaaS在樂視的實踐核心組件?zookeeper?nginx：七層負載均衡心私有PaaS在樂視的實踐心據(jù)中心?全球化發(fā)展戰(zhàn)略要求應用全球部署?數(shù)據(jù)中心到控制中心之間的網(wǎng)絡狀況不穩(wěn)定mesosmaster?每個數(shù)據(jù)中心使用一套基?集群與集群之間使用mesos?每個集群包含一組計算節(jié)?mesosslave?docker私有PaaS在樂視的實踐兩種發(fā)布方式?基礎鏡像包含支持業(yè)務代碼運行的基礎組件?應用代碼由zeus進行打包并分發(fā)到不同的數(shù)據(jù)中心?不同業(yè)務可以共享相同的基礎鏡像?接近于業(yè)務開發(fā)的習慣，學習成本低，易于接受?純鏡像方式?業(yè)界常用的容器云部署方式?支持手動/自動觸發(fā)編譯鏡像?通過全球鏡像架構保證各個數(shù)據(jù)中心鏡像一致私有PaaS在樂視的實踐Project+App的組織方式?App是部署的最小單位?用Project來聚合一組邏輯上相關的App私有PaaS在樂視的實多種App類型私有PaaS在樂視的實踐接入層負載均衡Nginxagent知?支持nginx自定義配置私有PaaS在樂視的實踐Metricscollect?及時報警?容器資源使用圖表?為容器評估及擴容/縮容提供依據(jù)?metrics?前端nginx：aresares私有aresaresMetricscollect實現(xiàn)alertalert配置集中化及變更通知?傳統(tǒng)配置管理方式的缺點配置集中化及變更通知?傳統(tǒng)配置管理方式的缺點同應用不同環(huán)境的配置修改多個運行環(huán)境多有有無無hboard私有PaaShboard配置集中化實現(xiàn)AagentAagentB私有PaaS在樂視的實踐灰度發(fā)布?分流點?接入層?分流方案?分流依據(jù)?設備型號?IP地址?區(qū)域?流量百分比?Cookie分流特點本的應用不會走灰度分流環(huán)節(jié)分流特點本的應用不會走灰度分流環(huán)節(jié)在nginx配置略調(diào)用lua代碼分流分流流程灰度版本及分流策略.應用策略生效灰度發(fā)布架構序與測試的集合JenkinsQuickJobJenkinsSLowJob與測試的集合JenkinsQuickJobJenkinsSLowJobssys Trigger-jobJekinsQuickJob流程:.開發(fā)工程師提交源碼到Gerrit，自動觸發(fā)job；JobPassrestapi，自動構建并部署測試環(huán)境；3.Job觸發(fā)冒煙測試用例，并生成“測試報表”；SlowJob流程:交付項目于測試工程師，自動觸發(fā)job；JobPassrestapi構建并部署測試環(huán)境；3.Job觸發(fā)全量測試用例，并生成“測試報表”。私有PaaS在樂視的實踐私有PaaS在樂視的實踐為什么需要微服務?業(yè)務逐步復雜化，從開發(fā)效率、易維護性、性能等角度?多個業(yè)務可能都實現(xiàn)了相同的功能，需要提取出來形成私有PaaS在樂視的實踐舉個例子私有PaaS在樂視的實踐微服務架構實現(xiàn)?兩種微服務形式?輕量級微服務框架?基于thriftRPC框架改造，支持多語言?修改thrift，支持調(diào)用鏈trace?服務注冊中心?服務發(fā)現(xiàn)與負載均衡?下一步支持LoadbalancerpushapiMQ私有PaaS在樂視的實踐pushapiMQ接入層服務層服務層pushdworkerworkerpushdpushd私有PaaS在樂視的實踐服務調(diào)用鏈trace?TraceID：關聯(lián)一次請求相關的日志，全局唯一，在系統(tǒng)?RPCSpanID：識別日志埋點順序和嵌套關系，在系統(tǒng)間傳遞?開始時間?調(diào)用類型?對端IP?參考GoogleDapper論文“Dapper,aLarge-ScaleDistributedSystemsTracingInfrastructure”HYPERLINK"/pubs/pub