中國郵政大數(shù)據(jù)平臺SAP方案v2.0_第1頁
中國郵政大數(shù)據(jù)平臺SAP方案v2.0_第2頁
中國郵政大數(shù)據(jù)平臺SAP方案v2.0_第3頁
中國郵政大數(shù)據(jù)平臺SAP方案v2.0_第4頁
中國郵政大數(shù)據(jù)平臺SAP方案v2.0_第5頁
已閱讀5頁,還剩69頁未讀, 繼續(xù)免費閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)

文檔簡介

1、中國郵政大數(shù)據(jù)平臺SAP方案建議SAP 中國 2015 SAP SE. All rights reserved.2議程郵政大數(shù)據(jù)平臺業(yè)務(wù)需求以及SAP理解SAP大數(shù)據(jù)解決方案數(shù)據(jù)交換平臺數(shù)據(jù)倉庫平臺數(shù)據(jù)管控平臺數(shù)據(jù)的展現(xiàn)與可視化項目實施整體規(guī)劃SAP大數(shù)據(jù)平臺的相關(guān)案例郵政大數(shù)據(jù)平臺業(yè)務(wù)需求以及SAP理解 2015 SAP SE. All rights reserved.4企業(yè)數(shù)據(jù)成熟度分析,每提高一個成熟度,將帶來巨大的業(yè)務(wù)價值無知無知不具備大數(shù)據(jù)功能應(yīng)對應(yīng)對只有部分關(guān)鍵績效歷史數(shù)據(jù)分析,無統(tǒng)一標(biāo)準(zhǔn)了解了解監(jiān)測現(xiàn)有業(yè)務(wù)的整體運行狀況,一定的業(yè)務(wù)預(yù)警功能管理管理具備一定的預(yù)測洞察能力,對特定業(yè)

2、務(wù)領(lǐng)域提出改善業(yè)務(wù)績效的行動建議創(chuàng)新創(chuàng)新大數(shù)據(jù)技術(shù)與業(yè)務(wù)運營融合,利用大數(shù)據(jù)預(yù)測成果自動優(yōu)化和提升業(yè)務(wù)業(yè)務(wù)場景成熟度業(yè)務(wù)場景成熟度大數(shù)據(jù)發(fā)揮的業(yè)務(wù)價值大數(shù)據(jù)發(fā)揮的業(yè)務(wù)價值最難跨越的階段最難跨越的階段目前階段目前階段 2015 SAP SE. All rights reserved.5中國郵政大數(shù)據(jù)平臺建設(shè)的總體要求實現(xiàn)大數(shù)據(jù)、云計算等新技術(shù)的落地應(yīng)用,為其他系統(tǒng)建設(shè)探索經(jīng)驗,開啟郵政云時代建立企業(yè)級數(shù)據(jù)中心,實現(xiàn)企業(yè)數(shù)據(jù)統(tǒng)一歸集,促進(jìn)企業(yè)數(shù)據(jù)共享,成為企業(yè)唯一真實數(shù)據(jù)來源促進(jìn)企業(yè)數(shù)據(jù)共享機(jī)制建立,為生產(chǎn)、經(jīng)營、管理、決策提供數(shù)據(jù)服務(wù)5構(gòu)建企業(yè)數(shù)據(jù)管控體系,實現(xiàn)郵政數(shù)據(jù)安全、標(biāo)準(zhǔn)和質(zhì)量的集中管理

3、,固化數(shù)據(jù)管控流程,推動企業(yè)數(shù)據(jù)治理。統(tǒng)一整合企業(yè)內(nèi)外部結(jié)構(gòu)化、半/非結(jié)構(gòu)化數(shù)據(jù)資源,提高企業(yè)數(shù)據(jù)利用率。推動大數(shù)據(jù)分析,挖掘郵政數(shù)據(jù)潛在價值,為企業(yè)戰(zhàn)略決策、業(yè)務(wù)協(xié)同、風(fēng)險管控等提供有力支撐。 2015 SAP SE. All rights reserved.6提高數(shù)據(jù)成熟度,發(fā)揮大數(shù)據(jù)價值,應(yīng)從五個方面入手大數(shù)據(jù)場景人員、技能和文化數(shù)據(jù)治理信息和應(yīng)用架構(gòu)標(biāo)準(zhǔn)和流程建立數(shù)據(jù)場景或KPI體系組織架構(gòu)創(chuàng)新,以適應(yīng)大數(shù)據(jù)發(fā)展需要進(jìn)行數(shù)據(jù)質(zhì)量、元數(shù)據(jù)治理建立統(tǒng)一的可擴(kuò)展大數(shù)據(jù)分析平臺數(shù)據(jù)流程和制度標(biāo)準(zhǔn)化 2015 SAP SE. All rights reserved.7郵務(wù)數(shù)據(jù)源速遞、物流數(shù)據(jù)源金

4、融數(shù)據(jù)源ERP數(shù)據(jù)源郵政外部數(shù)據(jù)源非結(jié)構(gòu)化數(shù)據(jù)源其它系統(tǒng)數(shù)據(jù)源流數(shù)據(jù)(ESP)數(shù)據(jù)復(fù)制(SRS)ETL(Data Services)ESB(PI)數(shù)據(jù)管控平臺主數(shù)據(jù)治理(MDG)元數(shù)據(jù)管理(信息管家)數(shù)據(jù)質(zhì)量管理(Data Quality)數(shù)據(jù)標(biāo)準(zhǔn)管理數(shù)據(jù)安全管理企業(yè)級數(shù)據(jù)倉庫平臺A-CRM數(shù)據(jù)源SAP HANAIn-memory computing分析SAP BusinessObjects BI探索, 儀表盤, 報表, 圖表, 可視化SAP Lumira 數(shù)據(jù)分析與可視化SAP 移動平臺 (BI Mobile, Mobile Application)SAP Predictive Analys

5、is 預(yù)測分析中國郵政大數(shù)據(jù)平臺建議架構(gòu)數(shù)據(jù)交換平臺歷史數(shù)據(jù)、非機(jī)構(gòu)化數(shù)據(jù)Hadoop分布式文件系統(tǒng)HivePigSpark擴(kuò)展數(shù)據(jù)層(冷存儲)結(jié)構(gòu)化歷史數(shù)據(jù)擴(kuò)展表磁盤數(shù)據(jù)結(jié)構(gòu)化實時數(shù)據(jù)熱表擴(kuò)展存儲(定義)SDAvUDFVoraODS、EDW Data Mart溫存儲(動態(tài)分層)熱存儲(內(nèi)存計算)數(shù)據(jù)老化自動搬移DLM量收數(shù)據(jù) 2015 SAP SE. All rights reserved.8SAP建議數(shù)據(jù)平臺的主要特點HANA RDS(快速實施服務(wù)) SAP產(chǎn)品能夠覆蓋郵政大數(shù)據(jù)平臺的幾大功能模塊 SAP HANA同時滿足企業(yè)數(shù)據(jù)倉庫的ODS、EDW和Data Mart的需求 部署方式靈活

6、:企業(yè)預(yù)置型與云部署 SAP在全球有大量的實施案例 以內(nèi)存計算為核心的大數(shù)據(jù)處理平臺 基于HANA簡化企業(yè)EDW的復(fù)雜度 SAP在內(nèi)存計算領(lǐng)域排名第一 大數(shù)據(jù)領(lǐng)域軟件供應(yīng)商的領(lǐng)導(dǎo)者 理念領(lǐng)先,互聯(lián)網(wǎng)+與工業(yè)4.0的主要倡導(dǎo)者 能夠提供基于產(chǎn)品的快速部署和開發(fā)服務(wù) 遵循業(yè)界通用的接口與開發(fā)標(biāo)準(zhǔn) 支持開源的數(shù)據(jù)處理技術(shù),如Hadoop 能夠與Hadoop/Spark等進(jìn)行深度的技術(shù)j集成 可結(jié)合開源產(chǎn)品實現(xiàn)郵政集團(tuán)數(shù)據(jù)生命周期管理借助SAP提供的全面解決方案,中國郵政可構(gòu)建敏捷、高效能的大數(shù)據(jù)平臺,從而消除業(yè)務(wù)復(fù)雜度,提升企業(yè)整體洞察力數(shù)據(jù)交換平臺 2015 SAP SE. All rights

7、reserved.10郵政大數(shù)據(jù)平臺整合給類型數(shù)據(jù)源數(shù)據(jù)抽取數(shù)據(jù)清洗數(shù)據(jù)合并數(shù)據(jù)排重等操作金融板塊數(shù)據(jù)源速遞物流板塊數(shù)據(jù)源郵政板塊數(shù)據(jù)源ERP數(shù)據(jù)源郵政外部數(shù)據(jù)源各類非結(jié)構(gòu)化數(shù)據(jù)源結(jié)構(gòu)化數(shù)據(jù)非結(jié)構(gòu)化數(shù)據(jù)非結(jié)構(gòu)化數(shù)據(jù)讀取解析郵政企業(yè)級數(shù)據(jù)倉庫 2015 SAP SE. All rights reserved.11SAPSAP的數(shù)據(jù)服務(wù)方案的數(shù)據(jù)服務(wù)方案全面考慮數(shù)據(jù)集成, 數(shù)據(jù)質(zhì)量管理, 數(shù)據(jù)切面及非結(jié)構(gòu)化數(shù)據(jù)獲取問題支持訪問全部關(guān)鍵業(yè)務(wù)數(shù)據(jù)支持訪問全部關(guān)鍵業(yè)務(wù)數(shù)據(jù)(任意數(shù)據(jù)源任意數(shù)據(jù)源,類型和領(lǐng)域類型和領(lǐng)域), 一體化平臺全面解決一體化平臺全面解決數(shù)數(shù)據(jù)的清洗、排重、歸并、衍生、合并、統(tǒng)計、匯總

8、等一系列數(shù)據(jù)據(jù)的清洗、排重、歸并、衍生、合并、統(tǒng)計、匯總等一系列數(shù)據(jù)加工加工問題問題結(jié)構(gòu)數(shù)據(jù)結(jié)構(gòu)數(shù)據(jù)非結(jié)構(gòu)數(shù)據(jù)非結(jié)構(gòu)數(shù)據(jù) 一個運行一個運行時時架構(gòu)及架構(gòu)及一系列服一系列服務(wù)務(wù)業(yè)務(wù)業(yè)務(wù)界面界面統(tǒng)統(tǒng)一的元數(shù)據(jù)一的元數(shù)據(jù)技技術(shù)術(shù)界面界面數(shù)據(jù)服務(wù)解決數(shù)據(jù)服務(wù)解決方案包方案包數(shù)據(jù)抽取數(shù)據(jù)抽取數(shù)據(jù)質(zhì)量數(shù)據(jù)質(zhì)量數(shù)據(jù)切面數(shù)據(jù)切面文本分析文本分析統(tǒng)統(tǒng)一的管理一的管理環(huán)環(huán)境境(調(diào)度, 安全, 用戶管理) 一套源一套源/目目標(biāo)標(biāo)各類型數(shù)據(jù)庫:各類型數(shù)據(jù)庫:OracleDB2Sybase ASESybase IQSQL ServerInformixMySQLTeradataHP NeoViewNetezzaODBCS

9、AP HANA全面接口支持全面接口支持各類型技術(shù)接口:各類型技術(shù)接口:Text delimitedText fixed widthEBCDICXMLCobolExcelHTTPJMSSOAP(Web Services)JSON 2015 SAP SE. All rights reserved.12SAP BusinessObjects Data ServiceSAP BusinessObjects Data Service性能強(qiáng)勁的執(zhí)行引擎使用便捷的開發(fā)工具所有的任務(wù)在統(tǒng)一的圖形界面開發(fā)易于使用,拖拽界面內(nèi)帶數(shù)據(jù)預(yù)覽、結(jié)構(gòu)分析、清洗和調(diào)試交付可信賴的信息集成數(shù)據(jù)質(zhì)量管理跨越BIBI環(huán)境的元數(shù)據(jù)

10、管理端到端沖突分析簡化變動管理性能強(qiáng)勁的執(zhí)行引擎通過高性能并行架構(gòu)支持網(wǎng)格計算最好的企業(yè)應(yīng)用連接性實時和批處理數(shù)據(jù)整合Designer (Windows)Administrator (Web)Request-Response Access ServerReal-time ServicesJob Server and EngineHeterogeneous Data SourcesHeterogeneous Data TargetsWeb ApplicationsLocal RepositoryCentral RepositoryData IntegratorData Integrator 20

11、15 SAP SE. All rights reserved.13SAP SRS (SAP Replication Server)復(fù)制數(shù)據(jù)HANA ODBC SAP Sybase ASE Oracle MS SQL IBM DB2/UDBSAP Sybase Replication Server for HANADBDBDBHANALANWANHANAHANASAP Sybase Replication Server for HANA實時或定時復(fù)制數(shù)據(jù)到HANA數(shù)據(jù)倉庫平臺整體框架 2015 SAP SE. All rights reserved.15真正實現(xiàn)“實時”,業(yè)務(wù)洞察力SAP HAN

12、A 實時,可信的數(shù)據(jù)實時業(yè)務(wù)實時應(yīng)用SAP 商務(wù)套件ERP/CRM等等HadoopHDFS其他信息系統(tǒng)基于(DB2SybaseOracleSQL-Server)實時復(fù)制實時分析BI客戶端工具第三方查詢工具SQLMDXBICS數(shù)據(jù)抽取實時復(fù)制/數(shù)據(jù)抽取什么是SAP HANA? SAP HANA 是一個先進(jìn)的平臺,使用內(nèi)存計算技術(shù)來實現(xiàn)企業(yè)應(yīng)用 數(shù)據(jù)驅(qū)動業(yè)務(wù),在大數(shù)據(jù)下實現(xiàn)實時處理 簡化IT的系統(tǒng)部署,可通過云方式交付SAP HANA為企業(yè)帶來的好處創(chuàng)新平臺,并且在應(yīng)用中不會中斷原有系統(tǒng)應(yīng)用,實現(xiàn)大量數(shù)據(jù)的高速處理提供實時訪問,實時復(fù)制服務(wù)和數(shù)據(jù)集成功能 完整和即時的洞察力與靈活 的數(shù)據(jù)計算引擎,

13、提供預(yù)置的報告和分析模型簡化IT架構(gòu),多用途的內(nèi)存計算平臺減少數(shù)據(jù)處理層次 2015 SAP SE. All rights reserved.16ON-PREMISE | CLOUD | HYBRIDSAP HANA 平臺基于HANA的大數(shù)據(jù)平臺SpatialGraphPredictiveSearchText AnalyticsPlanningDataEnrichmentSeriesDataFunctionLibraries處理服務(wù)Web Server JavaScriptFiori用戶界面Graphic Modeler應(yīng)用服務(wù)ALMApplication Lifecycle Manageme

14、nt列存儲內(nèi)存數(shù)據(jù)庫 OLTP+OLAP多核大規(guī)模并行計算高級壓縮多租戶動態(tài)分層存儲數(shù)據(jù)庫服務(wù)高可用性和災(zāi)難恢復(fù)開放的標(biāo)準(zhǔn)數(shù)據(jù)模型Data VirtualizationELT & Replication集成服務(wù)Hadoop IntegrationStreaming (CEP)Remote DataSync 2015 SAP SE. All rights reserved.17現(xiàn)狀: 大數(shù)據(jù)平臺數(shù)據(jù)規(guī)模龐大,數(shù)據(jù)增長速度快,且數(shù)據(jù)類型多樣(結(jié)構(gòu)化、非結(jié)構(gòu)化)。今后可能會集成更多的外部數(shù)據(jù)050010001500200025003000初始201520162017中國郵政大數(shù)據(jù)平臺數(shù)據(jù)量增

15、長趨勢Data Volume(TB)大數(shù)據(jù)平臺的數(shù)據(jù)溫度管理策略數(shù)據(jù)管理策略(由業(yè)務(wù)應(yīng)用主導(dǎo)定義)SAP HANA熱數(shù)據(jù)實時數(shù)據(jù)HANA動態(tài)分層溫數(shù)據(jù)歷史數(shù)據(jù)數(shù)據(jù)倉庫分析型業(yè)數(shù)據(jù)倉庫分析型業(yè)務(wù)應(yīng)用務(wù)應(yīng)用: 更高效地管理海量數(shù)據(jù),降低整體擁有成本 HANA與溫數(shù)據(jù)層、擴(kuò)展數(shù)據(jù)層深度集成,提升系統(tǒng)性能一體化的數(shù)據(jù)管理品臺,降低系統(tǒng)復(fù)雜度高度可擴(kuò)展的架構(gòu)Hadoop & Spark擴(kuò)展數(shù)據(jù)頻繁訪問數(shù)據(jù)實時計算數(shù)據(jù)歷史數(shù)據(jù)相對復(fù)雜的計算與查詢非活躍數(shù)據(jù)海量非結(jié)構(gòu)化數(shù)據(jù)非復(fù)雜的分析計算熱數(shù)據(jù)熱數(shù)據(jù)SAP HANA溫數(shù)據(jù)溫數(shù)據(jù)HANA動態(tài)分層擴(kuò)展數(shù)據(jù)擴(kuò)展數(shù)據(jù)HadoopSpark數(shù)據(jù)移動數(shù)據(jù)移動D

16、ata Lifecycle manager 2015 SAP SE. All rights reserved.18HANA大數(shù)據(jù)平臺的數(shù)據(jù)存儲層如何有效區(qū)別各數(shù)據(jù)層次內(nèi)存管理內(nèi)存管理操作類型操作類型 日常運行的業(yè)務(wù)應(yīng)用,分析操作和統(tǒng)計報表 實時分析 復(fù)雜的分析、預(yù)測等 密集型計算數(shù)據(jù)特征數(shù)據(jù)特征 當(dāng)前活躍數(shù)據(jù) 信息單位價值高的業(yè)務(wù)數(shù)據(jù)管理數(shù)據(jù)量管理數(shù)據(jù)量 管理數(shù)據(jù)規(guī)模在幾十個TB量級Hadoop企業(yè)級海量數(shù)據(jù)存儲企業(yè)級海量數(shù)據(jù)存儲 低成本的數(shù)據(jù)存儲、通用硬件 高度靈活、可擴(kuò)展架構(gòu)數(shù)據(jù)數(shù)據(jù)特征特征 大量非結(jié)構(gòu)化/半結(jié)構(gòu)化數(shù)據(jù),社交媒體和郵政外部數(shù)據(jù) 非活躍,批量處理數(shù)據(jù) 信息單位價值相對不高的業(yè)

17、務(wù)數(shù)據(jù)數(shù)據(jù)數(shù)據(jù)移動(同前)移動(同前)管理數(shù)據(jù)量管理數(shù)據(jù)量 管理數(shù)據(jù)規(guī)??蛇_(dá)到PB級動態(tài)分層動態(tài)分層HANA的磁盤級處理引擎數(shù)據(jù)特征數(shù)據(jù)特征 歷史數(shù)據(jù)為主 近實時的分析場景 信息單位價值較高的業(yè)務(wù)數(shù)據(jù)數(shù)據(jù)移動(數(shù)據(jù)移動(Data Lifecycle Mgt.) 定義數(shù)據(jù)分割/分區(qū)策略 按照規(guī)則在內(nèi)存和硬盤引擎間移動數(shù)據(jù)管理數(shù)據(jù)量管理數(shù)據(jù)量 管理數(shù)據(jù)規(guī)模在幾百個TB以內(nèi)SAP HANASAP HANAHANA RAMDT數(shù)據(jù)的溫度是隨時間動態(tài)變化的,而且并不是同類型數(shù)據(jù)只存在一個存儲空間,要看具體的業(yè)務(wù)場景和數(shù)據(jù)價值,比如實時數(shù)據(jù)不只是在溫存儲中,也可以在HANA內(nèi)存中,HANA也有處理時間序列

18、的功能。 2015 SAP SE. All rights reserved.19在高度集成的系統(tǒng)內(nèi),提供高性能的數(shù)據(jù)管理,支持可擴(kuò)展架構(gòu)能力基于表級別定義數(shù)據(jù)管理層:內(nèi)存處理 (熱數(shù)據(jù)) 或磁盤處理 (溫數(shù)據(jù))利用磁盤級的列存儲技術(shù),提高數(shù)據(jù)分析訪問性能可支持高達(dá)PB級的數(shù)據(jù)規(guī)模提供集成的安全策略與備份恢復(fù)能力動態(tài)分層處理引擎列式處理引擎的先驅(qū)與領(lǐng)導(dǎo)者久經(jīng)考驗的數(shù)據(jù)處理引擎(大量政府、金融、電信等行業(yè))在TPC-H基準(zhǔn)的領(lǐng)先者優(yōu)勢庫內(nèi)集成,高性能單一系統(tǒng),消除了數(shù)據(jù)冗余統(tǒng)一訪問接口,降低復(fù)雜度郵政可根據(jù)需要定義數(shù)據(jù)管理策略動態(tài)分層支持海量數(shù)據(jù)管理HANA動態(tài)數(shù)據(jù)分層 2015 SAP SE.

19、All rights reserved.20支持豐富的Hadoop處理引擎,支持主要的Hadoop廠商,如Cloudera, Hortonworks, MapR等 Smart Data Access 將外部的數(shù)據(jù)源映射為本地的數(shù)據(jù)表,做到實時訪問外部數(shù)據(jù)源 支持與Hadoop,Teradata, Microsoft SQLServer, Oracle, IBM DB2, IBM Netezza等數(shù)據(jù)庫的集成 Virtual UDF (vUDF) 可自定義的數(shù)據(jù)聯(lián)邦類型 支持訪問Hadoop分布式文件系統(tǒng)(HDFS),無需Mapper/Reducer解析包 支持直接調(diào)用自定義的Map Reduc

20、e任務(wù) vUDF可集成到SQL語句 效益 能夠利用Hadoop集群中HIVE & Spark無法提供的功能 (如. Hadoop Distributed File System (HDFS) 和MapReduce) 提高非結(jié)構(gòu)化數(shù)據(jù)的即席查詢能力SAP HANAvUDF OperatorRFC HadoopHadoopMap ReduceHDFSYARNHIVE與Hadoop的深度集成Smart Data access 2015 SAP SE. All rights reserved.21YARNHDFS其他應(yīng)用文件文件文件SAP HANA - Apache Spark Adapter

21、可用于提高分布式系統(tǒng)連接的性能編譯查詢可以提高應(yīng)用和數(shù)據(jù)分析在各節(jié)點的運行效率基于 Hadoop 的 OLAP 體驗非常常見,可用于從大數(shù)據(jù)中挖掘業(yè)務(wù)洞察,比如向下鉆取 HDFS 數(shù)據(jù)編譯查詢Apache Spark Adapter向下鉆取功能SAP HANA 內(nèi)存平臺 SAP HANA VoraApache SparkSAP HANA VoraApache Spark內(nèi)存存儲應(yīng)用服務(wù)數(shù)據(jù)庫服務(wù)集成服務(wù)處理服務(wù)SAP HANA 平臺SAP HANA VoraApache SparkSAP HANA-ApacheSpark AdapterSAP HANA Vora 內(nèi)置于 Apache Spar

22、k 執(zhí)行架構(gòu)之中,是一款內(nèi)存計算查詢引擎,能夠基于 Hadoop 提供豐富的交互式分析體驗。SAP HANA Vora與Spark的深度集成數(shù)據(jù)倉庫平臺EDW系統(tǒng)的高可用性 2015 SAP SE. All rights reserved.23SAP HANA的備份與恢復(fù)可供選擇的備份方式 文件系統(tǒng)備份利用DAS存儲數(shù)據(jù)的備份集第三方工具備份HANA的Backint可兼容主流的備份軟件存儲快照備份將存儲設(shè)備的數(shù)據(jù)快照作為備份集利用數(shù)據(jù)內(nèi)置的備份功能,低成本的備份與恢復(fù)方案僅需HANA服務(wù)器連接存儲設(shè)備(如NAS)最便捷管理數(shù)據(jù)備份的方式SAP HANA has full control abo

23、ut B&R management 可快速地創(chuàng)建數(shù)據(jù)備份集可與其它備份方式結(jié)合使用,提升系統(tǒng)可恢復(fù)性SAP HANA DatabaseBackup Storage,e.g. NFSCreate backuphdbsqlSAP HANA studioSAP HANA Database3rd Party Backup Server3rd PartyBackup AgenthdbsqlSAP HANA studioCreate backupSAP HANA DatabaseExternal StorageStorage ToolData Area (Disk)Data snapshotPre

24、pare databaseCreate storagesnapshotConfirm storagesnapshot hdbsqlSAP HANA studio首選的備份方式 2015 SAP SE. All rights reserved.24生產(chǎn)節(jié)點HANA DBWorker節(jié)點索引服務(wù)器統(tǒng)計信息服務(wù)器DB分區(qū)1基于MPP的集群架構(gòu)水平線性擴(kuò)展與高可用性熱備節(jié)點HANA DBStandby節(jié)點索引服務(wù)器統(tǒng)計信息服務(wù)器DB分區(qū)NDB分區(qū)2DB分區(qū)N生產(chǎn)節(jié)點生產(chǎn)節(jié)點HANA DBWorker節(jié)點索引服務(wù)器統(tǒng)計信息服務(wù)器HANA DBWorker節(jié)點索引服務(wù)器統(tǒng)計信息服務(wù)器SAP HANA DB

25、日志卷數(shù)據(jù)卷SAS存儲2日志卷數(shù)據(jù)卷SAS存儲NIn-memory computing共享卷Master2Master日志卷數(shù)據(jù)卷SAS存儲1郵政大數(shù)據(jù)平臺分析型數(shù)據(jù)應(yīng)用大規(guī)模并行處理n數(shù)據(jù)均勻分布在各個節(jié)點(數(shù)據(jù)分區(qū)),并行處理n提供更高的處理性能與并發(fā)性n良好的線性擴(kuò)展性n支持大規(guī)模的集群部署,(可支持上百個節(jié)點)n可基于數(shù)據(jù)分布優(yōu)化器(DDO)優(yōu)化數(shù)據(jù)分布高可用集群架構(gòu)n集群中可配置備用節(jié)點,可接管故障的工作節(jié)點n熱備節(jié)點數(shù)量=容錯節(jié)點數(shù)n自動的故障切換與數(shù)據(jù)裝載 2015 SAP SE. All rights reserved.25大數(shù)據(jù)平臺容災(zāi)系統(tǒng)Data CenterOS: DNS

26、, virt. hostnames, virt. IPsPrimary(active)Name ServerIndex serverSecondary(active, data pre-loaded)Name ServerIndex serverHA Solution PartnerClientsApplication ServersHA Solution PartnerTransferbyHANAdatabasekernelInternalDisksInternalDisksDataDisksLogDisksDataDisksLogDisks大大數(shù)據(jù)平臺災(zāi)備中心數(shù)據(jù)平臺災(zāi)備中心 郵政大數(shù)據(jù)平

27、臺數(shù)據(jù)中心郵政大數(shù)據(jù)平臺數(shù)據(jù)中心SyncAsync容災(zāi)中心部署數(shù)據(jù)庫容災(zāi)技術(shù)容災(zāi)系統(tǒng)設(shè)計n鑒于大數(shù)據(jù)平臺為中國郵政的核心業(yè)務(wù)平臺,建議采用兩級容災(zāi)機(jī)制n本地/同城災(zāi)備中心:同步數(shù)據(jù)復(fù)制n異地災(zāi)備中心:可選擇基礎(chǔ)情況較好的省中心,異步數(shù)據(jù)復(fù)制n異地災(zāi)備中心冗余的資源也可以用于開發(fā)/測試n快速的RTO (最小化RTO)n同步復(fù)制零數(shù)據(jù)丟失數(shù)據(jù)庫容災(zāi) (System Replication)n基于HANA的日志復(fù)制技術(shù)n日志通過網(wǎng)絡(luò)傳輸n可支持同步/異步數(shù)據(jù)復(fù)制n災(zāi)備中心可選擇內(nèi)存同步復(fù)制方式(災(zāi)備中心數(shù)據(jù)在內(nèi)存中預(yù)裝載)n能夠保持事務(wù)的一致性:進(jìn)行中的事務(wù)被回滾并被重演,無數(shù)據(jù)丟失數(shù)據(jù)倉庫平臺基于

28、HANA部署企業(yè)云 2015 SAP SE. All rights reserved.27中國郵政企業(yè)云平臺建設(shè)的幾種思路業(yè)務(wù)應(yīng)用(量收、速遞、集郵、物流等業(yè)務(wù))SAP HANASAP HANA企業(yè)云(企業(yè)云(HANA Enterprise Cloud)SAP HANA合作伙伴云合作伙伴云(Partner Cloud) 私有云(Platform-as-a-service) IT基礎(chǔ)設(shè)施 (服務(wù)器、網(wǎng)絡(luò)、存儲等基礎(chǔ)設(shè)施 )整合與企業(yè)內(nèi)部IT基礎(chǔ)設(shè)施集中式的部署與維護(hù)動態(tài)系統(tǒng)擴(kuò)展與資源按需分配企業(yè)級的系統(tǒng)安全性 2014 SAP AG or an SAP affiliate company. Al

29、l rights reserved.27Public企業(yè)級共享數(shù)據(jù)中心企業(yè)級共享數(shù)據(jù)中心 中國郵政自建與維護(hù)企業(yè)級數(shù)中國郵政自建與維護(hù)企業(yè)級數(shù)據(jù)中心據(jù)中心數(shù)據(jù)中心支撐企業(yè)內(nèi)部多業(yè)務(wù)數(shù)據(jù)中心支撐企業(yè)內(nèi)部多業(yè)務(wù)系統(tǒng),做到資源按需分動態(tài)配系統(tǒng),做到資源按需分動態(tài)配運用運用HANA多租戶的技術(shù)多租戶的技術(shù)企業(yè)無需自行IT基礎(chǔ)設(shè)施由SAP提供基礎(chǔ)架構(gòu)與數(shù)據(jù)庫服務(wù)快速的部署與實施及時采用最新的技術(shù)業(yè)務(wù)靈活地擴(kuò)展與計費方式由由SAP提供基礎(chǔ)設(shè)施提供基礎(chǔ)設(shè)施可以選擇購買或者租賃可以選擇購買或者租賃License由由SAP提供管理服務(wù)提供管理服務(wù)由由SAP合作伙伴提供基礎(chǔ)設(shè)施合作伙伴提供基礎(chǔ)設(shè)施可以選擇購買或者

30、租賃可以選擇購買或者租賃License由由SAP合作伙伴提供管理服務(wù)合作伙伴提供管理服務(wù)合作伙伴可以根據(jù)用戶需求靈活地構(gòu)建基礎(chǔ)架構(gòu)良好地本地支持與服務(wù)與硬件供應(yīng)商更緊密地集成與合作 2015 SAP SE. All rights reserved.28Runtimes / Programming Models應(yīng)用服務(wù)數(shù)據(jù)庫服務(wù)UXIdentity Mgmt.SSOPortalAnalyticsAPI Mgmt.MobileCollaborationOn StorePlanningSpatialPredictiveStreamingTextHA / DRSmart DataOther DBs,

31、Hadoop IntegrationMulti_DBTieringGraphCloud ConnectorIntegrationGatewayDoc. MgmtPaaS ( SAP HANA 云平臺)Powered by SAP HANAIaaSSAP | 合作伙伴OpenStack云托管服務(wù)商務(wù)套件SAP數(shù)據(jù)倉庫其它SAP應(yīng)用SaaSCustomer Engagement & CommerceFinanceProcurementHR(HANA Enterprise Cloud)新應(yīng)用新應(yīng)用擴(kuò)展服務(wù)擴(kuò)展服務(wù)集成集成中國郵政大數(shù)據(jù)平臺建設(shè)方向SAP 能夠提供什么樣的云平臺? 2015 S

32、AP SE. All rights reserved.29基于SAP HANA的企業(yè)私有云將云應(yīng)用構(gòu)架于HANA之上SAP HANA PlatformHANA native其它分析其它分析型業(yè)務(wù)型業(yè)務(wù)SAPHANASAPHANA多個應(yīng)用運行在一個HANA實例里 不需要多余的數(shù)據(jù)復(fù)制每個應(yīng)用可以訪問跨系統(tǒng)數(shù)據(jù),雖然這些數(shù)據(jù)屬于其他應(yīng)用系統(tǒng) 實時報表,實時訪問數(shù)據(jù) 靈活擴(kuò)展下層的硬件設(shè)備 智能平衡工作負(fù)載 彈性的架構(gòu)設(shè)計 可基于集團(tuán)內(nèi)存私有云部署,集團(tuán)總部以及各省中心業(yè)務(wù)用戶溝通消費企業(yè)云 可延用現(xiàn)有兩套系統(tǒng)(量收、綜合分析平臺),分別在HANA兩個集群實例環(huán)境中部署虛擬化技術(shù)承載從基礎(chǔ)設(shè)備層到應(yīng)

33、用和平臺層 HANA是新一代云架構(gòu)的基礎(chǔ)Enterprise Storage量收系統(tǒng)量收系統(tǒng)網(wǎng)運系統(tǒng)網(wǎng)運系統(tǒng)集郵系統(tǒng)集郵系統(tǒng)報刊報刊系統(tǒng)系統(tǒng)物流平臺系統(tǒng)物流平臺系統(tǒng) 2015 SAP SE. All rights reserved.30 大數(shù)據(jù)平臺私有云(大數(shù)據(jù)平臺私有云(SAP HANA)基于多租戶構(gòu)架HANA私有云平臺主機(jī) 1 主機(jī) 3 主機(jī) 2 備用節(jié)點 (主機(jī) 4) 報刊業(yè)務(wù)租戶庫物流業(yè)務(wù)租戶庫量收業(yè)務(wù)租戶庫1量收業(yè)務(wù)租戶庫2System DB(Standby)集郵業(yè)務(wù)租戶庫2速遞平臺租戶庫1速遞平臺租戶庫2集郵業(yè)務(wù)租戶庫1System DB(Standby)System DB(Sta

34、ndby)System DB郵政報刊業(yè)務(wù)系統(tǒng)郵政集郵業(yè)務(wù)系統(tǒng)郵政速遞平臺系統(tǒng)郵政物流平臺系統(tǒng) 部署建議 基于HANA MPP集群構(gòu)建郵政集團(tuán)私有云 在一個實例上運行多個業(yè)務(wù)應(yīng)用 根據(jù)業(yè)務(wù)負(fù)載選擇部署節(jié)點 為何要使用多租戶數(shù)據(jù)庫 業(yè)務(wù)隔離 有效利用系統(tǒng)資源 計算資源管理 業(yè)務(wù)數(shù)據(jù)共享 效益 簡化系統(tǒng)管理 靈活可擴(kuò)展 構(gòu)建集團(tuán)內(nèi)部私有云 提高硬件利用率,降低整體成本數(shù)據(jù)管控平臺數(shù)據(jù)管控平臺主數(shù)據(jù)管理 2015 SAP SE. All rights reserved.33郵政各數(shù)據(jù)源主數(shù)據(jù)管理的基本架構(gòu)企業(yè)數(shù)據(jù)創(chuàng)建并管理主數(shù)據(jù)清洗匹配 / 合并創(chuàng)建支配分發(fā)分配 / 分發(fā) / 發(fā)布主數(shù)據(jù) MDM主數(shù)據(jù)

35、分發(fā)信息管理通常被部署的位置n標(biāo)準(zhǔn)化主數(shù)據(jù)n經(jīng)過專業(yè)認(rèn)證審批主數(shù)據(jù)進(jìn)入主數(shù)據(jù)管理n分發(fā)主數(shù)據(jù)金融板塊郵政板塊物流板塊物流板塊速遞板塊速遞板塊普通文件,Excel和 XMLWeb大型主機(jī)ERP 2015 SAP SE. All rights reserved.34數(shù)據(jù)標(biāo)準(zhǔn)化步驟建議34數(shù)據(jù)的維護(hù)流程數(shù)據(jù)元素的屬性標(biāo)準(zhǔn)數(shù)據(jù)的編碼范圍數(shù)據(jù)的分類標(biāo)準(zhǔn)數(shù)據(jù)標(biāo)準(zhǔn)n 編碼是指用于唯一區(qū)別一條數(shù)據(jù)記錄的特殊標(biāo)識n 為了避免由于各企業(yè)各自為政對數(shù)據(jù)進(jìn)行獨立編碼最終導(dǎo)致在企業(yè)橫向整合的過程中發(fā)生重碼、數(shù)據(jù)冗余等情況n 用于將具有相同數(shù)據(jù)屬性、管理要求和系統(tǒng)要求的數(shù)據(jù)進(jìn)行分組的標(biāo)準(zhǔn)n 通過分組實現(xiàn)對數(shù)據(jù)的專項化側(cè)重

36、管理,并為業(yè)務(wù)管理和分析提供必要基礎(chǔ)依據(jù)n 為了保證數(shù)據(jù)標(biāo)準(zhǔn)規(guī)能夠準(zhǔn)確、有效的去規(guī)范數(shù)據(jù)元素的屬性,必須制定一套科學(xué)、合理和高效的工作流,即數(shù)據(jù)的維護(hù)流程n 例如規(guī)定數(shù)據(jù)的申請人和申請流程、審批人和審批流程、數(shù)據(jù)的業(yè)務(wù)歸口管理部門等內(nèi)容n 規(guī)定每個數(shù)據(jù)字段內(nèi)容的填寫規(guī)范,保證所有的數(shù)據(jù)在整個企業(yè)范圍的填寫規(guī)則統(tǒng)一 2015 SAP SE. All rights reserved.35各個業(yè)務(wù)板塊主數(shù)據(jù)數(shù)據(jù)梳理準(zhǔn)備步驟35快遞ERP集團(tuán)統(tǒng)一數(shù)據(jù)清理數(shù)據(jù)優(yōu)化數(shù)據(jù)合規(guī)數(shù)據(jù)查重數(shù)據(jù)確認(rèn)數(shù)據(jù)合并總體思路具體技術(shù)步驟確定數(shù)據(jù)優(yōu)化的具體屬性和內(nèi)容進(jìn)行數(shù)據(jù)總體優(yōu)化確定每個屬性信息特別是關(guān)鍵信息的標(biāo)準(zhǔn)和規(guī)范,在

37、系統(tǒng)中進(jìn)行合規(guī)校驗和修改確定并在系統(tǒng)中實現(xiàn)重復(fù)原則和查重策略根據(jù)數(shù)據(jù)情況分別進(jìn)行系統(tǒng)和人工數(shù)據(jù)確認(rèn)根據(jù)數(shù)據(jù)合并策略和數(shù)據(jù)確認(rèn)結(jié)果在系統(tǒng)中進(jìn)行數(shù)據(jù)合并現(xiàn)有MDM1. 現(xiàn)有MDM的遷移2. 新增主數(shù)據(jù)的規(guī)則規(guī)則梳理、數(shù)據(jù)遷移大數(shù)據(jù)平臺主數(shù)據(jù)與現(xiàn)有MDM雙規(guī)運行一段周期,雙向數(shù)據(jù)同步平滑遷移數(shù)據(jù)管控平臺元數(shù)據(jù)管理 2015 SAP SE. All rights reserved.37SAP信息管家提供強(qiáng)大的元數(shù)據(jù)管理能力對各種類型的場景提供完善的元數(shù)據(jù)管理BI 系統(tǒng)系統(tǒng)數(shù)據(jù)庫數(shù)據(jù)庫ETL模塊工具模塊工具元數(shù)據(jù)集成元數(shù)據(jù)集成其他元數(shù)據(jù)集成可用其他元數(shù)據(jù)集成可用*AltovaBorlandCACOBOL

38、EmbarcaderoEMCGentlewareSilverunKnightbridge (HP)IBMInformaticaMicsosoftMicroStrategyNoMagicOMGOracleSELECT SPARX SystemsSUN SybaseTeradataTigrisVisible Systems Corp W3C 元數(shù)據(jù)與信息管家的集成元數(shù)據(jù)與信息管家的集成SAP BI Platform CWMXML (CWM), RDBMS: MSSQL Server, DB2, Teradata and JDBC Sources*其他元數(shù)據(jù)集成可通過 Meta Integratio

39、n Technology, Inc. (MITI) 2015 SAP SE. All rights reserved.38元數(shù)據(jù)管理保障數(shù)據(jù)來源的可追溯和標(biāo)準(zhǔn)化程度做持續(xù)優(yōu)化q 提供血緣分析和影響分析功能,為保證系統(tǒng)能從元數(shù)據(jù)的變化發(fā)現(xiàn)對數(shù)據(jù)分析的影響,確定某個實體的用途,以及實體之間的關(guān)聯(lián)關(guān)系。q 積分卡功能,對數(shù)據(jù)質(zhì)量是否滿足設(shè)計目標(biāo),提供持續(xù)的監(jiān)控,從各個維度(如:數(shù)據(jù)口徑,依賴關(guān)系等)提供全面的檢查,持續(xù)優(yōu)化數(shù)據(jù)管控平臺數(shù)據(jù)質(zhì)量管理 2015 SAP SE. All rights reserved.40數(shù)據(jù)質(zhì)量管理完整的方法論支持評估(Assess)n理解數(shù)據(jù)質(zhì)量問題提升(Improv

40、e)n(清洗、加強(qiáng)并合并)維持(Sustain)n持續(xù)監(jiān)控AssessAssessSustainSustainImproveImprove典型應(yīng)用場景n企業(yè)合并過程中,系統(tǒng)間主數(shù)據(jù)的合并n建立真正干凈、完整的客戶資料庫n資源、資產(chǎn)管理的必要手段SAP Data Quality 2015 SAP SE. All rights reserved.41Data Quality:完整的方法論支持 數(shù)據(jù)清洗(客戶數(shù)據(jù))n將客戶數(shù)據(jù)進(jìn)行清洗和標(biāo)準(zhǔn)化,例如姓名/地址,郵件,電話,SSN,以及日期n可管理190多個國家的數(shù)據(jù),支持Unicode數(shù)據(jù)讀寫n去除錯誤,發(fā)現(xiàn)數(shù)據(jù)庫中的真實內(nèi)容n提升數(shù)據(jù)完整性,識別匹

41、配,并最終形成單一客戶視圖數(shù)據(jù)清洗(操作數(shù)據(jù))將業(yè)務(wù)數(shù)據(jù)進(jìn)行解析和標(biāo)準(zhǔn)化n例如客戶編號,產(chǎn)品代碼,產(chǎn)品描述,采購日期,部件編號,SKU等n對于更多的定制化結(jié)果需求,可利用基于規(guī)則的解析和規(guī)則編輯架構(gòu)n提供圖形化界面,讓用戶決定數(shù)據(jù)如何被解析,并評估定制化的變化對數(shù)據(jù)的影響 數(shù)據(jù)增強(qiáng)n使用字典中的數(shù)據(jù)補(bǔ)足姓名、地址、電話或者電子郵件信息,從而讓記錄完整n提供地理編碼能力,用于基于地理或者人口統(tǒng)計學(xué)的營銷需求n為客戶地址分派地理空間,用于稅收監(jiān)控,保險投保地區(qū)分布,保險風(fēng)險分布等匹配和合并n識別“雪鳥”:例如具有多個居所的個人或者家庭n創(chuàng)建一個全景單條最佳紀(jì)錄n提供身份識別能力,揭示不明確的關(guān)系,

42、用于欺詐偵測 持續(xù)監(jiān)控n建立現(xiàn)存的或者推斷的業(yè)務(wù)規(guī)則/任務(wù)n自動發(fā)現(xiàn)易被忽略的業(yè)務(wù)規(guī)則和關(guān)系n設(shè)定閥值,定時評估n如果持續(xù)監(jiān)控任務(wù)發(fā)現(xiàn)異常數(shù)據(jù),則自動提醒n提示中包括閥值的細(xì)節(jié)情況數(shù)據(jù)評估n對數(shù)據(jù)進(jìn)行探察,發(fā)現(xiàn)其是否符合業(yè)務(wù)規(guī)則n對來自異構(gòu)數(shù)據(jù)源的數(shù)據(jù)進(jìn)行對比n發(fā)現(xiàn)數(shù)據(jù)缺陷,衡量這些缺陷對業(yè)務(wù)的影響n將發(fā)現(xiàn)的結(jié)果向相關(guān)人士報告n就數(shù)據(jù)清洗中使用的業(yè)務(wù)規(guī)則進(jìn)行溝通n將上述過程自動化,以實現(xiàn)持續(xù)監(jiān)控數(shù)據(jù)分析與可視化平臺 2015 SAP SE. All rights reserved.43數(shù)據(jù)利用能力原始數(shù)據(jù)準(zhǔn)確的數(shù)據(jù)固定報表即席查詢&OLAP敏捷可視化預(yù)測模型優(yōu)化已經(jīng)發(fā)生了什么已經(jīng)發(fā)生了

43、什么為什么會發(fā)生為什么會發(fā)生將會發(fā)生什么將會發(fā)生什么怎樣可以取得更怎樣可以取得更好的結(jié)果好的結(jié)果收益收益利用利用能力能力自助BI通用預(yù)測分析企業(yè)級企業(yè)級BI敏捷可敏捷可視化視化高級分析高級分析 2015 SAP SE. All rights reserved.44商務(wù)智能應(yīng)用分析適應(yīng)不同用戶的要求決策層決策層管理層管理層執(zhí)行層執(zhí)行層管理關(guān)鍵指標(biāo),及時調(diào)整經(jīng)營戰(zhàn)略。比如收購或并購新公司,進(jìn)入新市場,引入新產(chǎn)品;管理層需要獲取和解讀數(shù)據(jù),快速調(diào)整運作戰(zhàn)術(shù)。比如開展/終止銷售計劃,調(diào)整供應(yīng)鏈指標(biāo);日常業(yè)務(wù)操作需求,直接獲得分析內(nèi)容提高操作效率。比如客戶信用狀況,成本費用報表;具體的視角實時瀏覽/行業(yè)

44、規(guī)范(套打)全面的視角實時分析/趨勢分析/預(yù)測推演統(tǒng)一的視角實時告警/交互審批/級聯(lián)分析 2015 SAP SE. All rights reserved.45SAP 商務(wù)智能解決方案一個套件,多個視角查詢與報表查詢與報表自助與預(yù)測自助與預(yù)測儀表盤儀表盤和應(yīng)用和應(yīng)用發(fā)現(xiàn)、預(yù)測、創(chuàng)造發(fā)現(xiàn)、預(yù)測、創(chuàng)造創(chuàng)建互動體驗創(chuàng)建互動體驗發(fā)布信息發(fā)布信息 Lumira 數(shù)據(jù)探索(Explorer*) 預(yù)測分析(Infiniteinsight*) 儀表盤(Dashboards) 即時查詢(Web Intelligence*) 水晶報表(Crystal Reports*)BI 平臺(移動平臺(移動BI)語義層語義層

45、 2015 SAP SE. All rights reserved.46示例:報表與查詢示例 2015 SAP SE. All rights reserved.47示例:儀表板 2015 SAP SE. All rights reserved.48美觀豐富的圖形化引擎n共享的圖形化引擎使之與其它客戶端軟件有相似的外觀n更廣泛的圖表庫,更多交互,創(chuàng)建和修改更簡單n降低新用戶學(xué)習(xí)曲線,同時提高高級用戶的生產(chǎn)力和靈活度n熱點圖n盒型圖n多系列餅圖n云標(biāo)簽可以進(jìn)行分析、格式化、添加計算列、修改查詢和圖表類型圖表參數(shù)和圖層的精細(xì)控制新增圖表類型n散布?xì)馀輬Dn極地氣泡圖 n雙軸圖n樹形圖 2015 SAP

46、 SE. All rights reserved.49隨時隨地的移動應(yīng)用更快、更便利的遠(yuǎn)距溝通讓信息隨處可用的手段n可從任何移動設(shè)備上迅速訪問到所需的信息n具有良好的交互功能,可立即采取行動n部署簡便、快捷交互式、實時采取行動n可鉆取式互動圖標(biāo)、度量、儀表盤n報告到報告的導(dǎo)航n從移動裝置上可以直接改變重要的數(shù)據(jù)n直接的回答和觸發(fā)遙控過程控制EASY 2015 SAP SE. All rights reserved.50SAP大數(shù)據(jù)預(yù)測分析專為業(yè)務(wù)用戶設(shè)計數(shù)據(jù)挖掘/統(tǒng)計學(xué)/概率學(xué) 專業(yè)知識無業(yè)務(wù)分析師數(shù)據(jù) 科學(xué)家業(yè)務(wù)用戶低高SAP 大數(shù)據(jù)預(yù)測分析SAP PA 智能建模+Lumira自助探索SAP

47、 PA 專家建模R語言SAP HANA 分析函數(shù)包 2015 SAP SE. All rights reserved.51BI 平臺平臺HANARDBMSExcel / CSVhadoopBW*ClipboardSAP商務(wù)智能詳細(xì)架構(gòu)報表報表儀表盤儀表盤分析分析水晶報表即席查詢DashboardDesign Studio數(shù)據(jù)探索高級分析平臺客戶端BI工具數(shù)據(jù)源語義層*數(shù)據(jù)源數(shù)據(jù)建模數(shù)據(jù)分析分析共享查看平臺Lumira 服務(wù)器服務(wù)器(基于基于 HANA)Lumira 云云 (基于(基于HANA)Lumira 桌面版桌面版Excel / CSVLumira 服務(wù)器服務(wù)器(內(nèi)存數(shù)據(jù)庫)(內(nèi)存數(shù)據(jù)庫)

48、 2015 SAP SE. All rights reserved.52數(shù)據(jù)準(zhǔn)備可視化探索故事構(gòu)建結(jié)果分享 數(shù)據(jù)源多樣化 內(nèi)存存儲 利用現(xiàn)有企業(yè)級BI中搭建的模型 根據(jù)業(yè)務(wù)分析需求處理數(shù)據(jù),例如:企業(yè)和個人數(shù)據(jù)合并、數(shù)據(jù)計算、數(shù)據(jù)分組等 自由靈活的展現(xiàn) 多種視覺沖擊強(qiáng)烈的可視化組件 持續(xù)增強(qiáng)和增加的可視化組件 與第三方軟件提供商的集成(例如ESRI、VE) 根據(jù)業(yè)務(wù)需求,快速構(gòu)建故事板 快速生成業(yè)務(wù)報告 基于故事板的互動查詢 發(fā)布結(jié)果到部門服務(wù)器、企業(yè)級服務(wù)器或者云 多種設(shè)備端查看分析結(jié)果,實現(xiàn)隨時隨地的分析 發(fā)布故事板到BI平臺,與現(xiàn)有企業(yè)級BI平臺統(tǒng)一管理,包括內(nèi)容、權(quán)限等敏捷可視化的4個

49、步驟 2015 SAP SE. All rights reserved.53關(guān)鍵能力(數(shù)據(jù)自由獲取、整理,自動建模) 2015 SAP SE. All rights reserved.54Lumira加速數(shù)據(jù)探索過程自助自助 業(yè)務(wù)人員可以完成全流程的數(shù)據(jù)分析數(shù)據(jù)整理,數(shù)據(jù)建模,可視化,共享集成集成 與企業(yè)級BI平臺、高級分析高度集成語義層、安全與共享;預(yù)測能力 2015 SAP SE. All rights reserved.55 SAP IQ企業(yè)核心業(yè)務(wù)數(shù)據(jù)數(shù)據(jù)展現(xiàn)BO儀表盤Lumira自助探索其它應(yīng)用系統(tǒng)SAP ERPSAP大數(shù)據(jù)預(yù)測分析系統(tǒng)架構(gòu) 敏捷分析+內(nèi)存數(shù)據(jù)庫+自助探索移動可視化第

50、三方數(shù)據(jù)SAP CRM 歷史數(shù)據(jù)擴(kuò)展存儲Predictive Analysis Libraries | Business Function Libraries | Data Models & Stored ProceduresSAP Predictive Analytics 數(shù)據(jù)挖掘自動化大數(shù)據(jù)內(nèi)存分析平臺數(shù)據(jù)驅(qū)動SAP HANA DataServices數(shù)據(jù)存儲數(shù)據(jù)建模與分析/Hadoop 2015 SAP SE. All rights reserved.56數(shù)據(jù)挖掘和預(yù)測:直觀的可視化應(yīng)用,豐富的預(yù)置預(yù)測模型SAP PA大數(shù)據(jù)預(yù)測分析解決方案方案價值:自動數(shù)據(jù)準(zhǔn)備和探索、完整的數(shù)據(jù)

51、挖掘過程、強(qiáng)大的預(yù)測算法庫直觀地設(shè)計復(fù)雜的預(yù)測模型,可視化分析豐富的建模技術(shù),可擴(kuò)展的預(yù)測模型:關(guān)聯(lián)分析聚類分析決策樹分析神經(jīng)網(wǎng)絡(luò)分析例外分析回歸分析時間序列分析概率分布聚類分析決策樹分析神經(jīng)網(wǎng)絡(luò)分析例外分析時間序列分析多元回歸分析 2015 SAP SE. All rights reserved.57數(shù)據(jù)挖掘和預(yù)測:高效的內(nèi)存預(yù)測分析,支持外部算法調(diào)用SAP PA大數(shù)據(jù)預(yù)測分析解決方案方案價值:結(jié)合了SAP HANA內(nèi)存分析的深度、性能,支持多種高級分析和預(yù)測場景,高效快速地獲取結(jié)果,實現(xiàn)大數(shù)據(jù)的挖掘通過集成R語言,在SAP HANA中訪問3,500種以上的開源算法內(nèi)置于業(yè)務(wù)應(yīng)用中,擴(kuò)展到B

52、I和報表中,對事務(wù)的洞察結(jié)果,可立即傳送到儀表盤、警告提示和移動終端,使業(yè)務(wù)相關(guān)人員都能靈活獲取預(yù)測洞察力 與BI平臺的一體化設(shè)計,通過任何 BI報表或儀表盤均可訪問分析結(jié)果 2015 SAP SE. All rights reserved.58數(shù)據(jù)挖掘和預(yù)測:自動數(shù)據(jù)準(zhǔn)備和探索SAP PA大數(shù)據(jù)預(yù)測分析解決方案方案價值:自動數(shù)據(jù)準(zhǔn)備和探索,包括上千個變量并自動找到重要的指標(biāo) 在幾小時內(nèi)創(chuàng)建和部署模式,而不是數(shù)周可以支持日常決策、解答傳統(tǒng)模型因市場響應(yīng)速度慢而無法解決的商業(yè)問題自動實現(xiàn)選擇變量準(zhǔn)備數(shù)據(jù)變量編碼缺失值處理奇異值處理匹配模型測試模型模型報告模型部署商業(yè)問題選擇變量準(zhǔn)備數(shù)據(jù)建模模型測

53、試?yán)斫鈶?yīng)用選擇商業(yè)問題最相關(guān)的變量,以適合算法需要SAP:自動決定重要變量,多至幾千個變量用不同算法進(jìn)行建模,選擇不同的參數(shù)SAP:結(jié)構(gòu)風(fēng)險最小化理論自動選優(yōu)把數(shù)據(jù)語言轉(zhuǎn)換成商業(yè)描述SAP:獨特的專利技術(shù)準(zhǔn)備數(shù)據(jù):缺失值處理,異常值處理,函數(shù)變換SAP:自動化預(yù)處理 2015 SAP SE. All rights reserved.59數(shù)據(jù)挖掘和預(yù)測:精簡的預(yù)測分析應(yīng)用函數(shù)建模工具 (AFM)SAP PA大數(shù)據(jù)預(yù)測分析解決方案方案價值: 圖形化用戶界面,用于創(chuàng)建基于函數(shù)和PAL算法的程序 模型將存為存儲對象,可以在多個應(yīng)用間重復(fù)使用 可用函數(shù)放置在拖拽列表中 簡單選取輸入/輸出表、參數(shù)、以及過

54、濾器,并生成程序 無需編寫SQL語句代碼,就可創(chuàng)建基于PAL函數(shù)的程序 快速開發(fā)和部署預(yù)測應(yīng)用 簡單易學(xué)的編輯器,使應(yīng)用開發(fā)過程更高效率、有成效、出成果項目實時規(guī)劃概述 2015 SAP SE. All rights reserved.61SAP 開發(fā)方法論 概述業(yè)務(wù)藍(lán)圖設(shè)計業(yè)務(wù)藍(lán)圖設(shè)計開發(fā)與測試開發(fā)與測試 客戶驗收測試與交付客戶驗收測試與交付生產(chǎn)切換生產(chǎn)切換 項目,質(zhì)量及風(fēng)險管理項目,質(zhì)量及風(fēng)險管理校驗校驗客戶驗收客戶驗收數(shù)據(jù)準(zhǔn)備數(shù)據(jù)準(zhǔn)備功能說明書功能說明書 設(shè)計設(shè)計 實現(xiàn)實現(xiàn) 測試測試方案方案制定制定確定平臺實現(xiàn)功能確定平臺實現(xiàn)功能環(huán)境部署環(huán)境部署軟軟/硬件環(huán)境部署硬件環(huán)境部署開發(fā)、測試開

55、發(fā)、測試數(shù)據(jù)遷移數(shù)據(jù)遷移系統(tǒng)遷移系統(tǒng)遷移試運營試運營試運營試運營上線支持上線支持 2015 SAP SE. All rights reserved.62大數(shù)據(jù)平臺實施計劃和主要里程碑2015年9月2016年6月2017年中項目啟動完成系統(tǒng)開發(fā)聯(lián)調(diào)測試項目準(zhǔn)備階段一: 大數(shù)據(jù)平臺的搭建與量收系統(tǒng)遷移階段二: 大數(shù)據(jù)的完善與整體遷移UAT業(yè)務(wù)藍(lán)圖l制定項目計劃l項目組織結(jié)構(gòu)l需求整理及準(zhǔn)備圖例:UAT:用戶確認(rèn)測試 :主要里程碑l生產(chǎn)環(huán)境與認(rèn)證機(jī)制l硬件平臺的部署l平臺應(yīng)用的調(diào)整或二次開發(fā)l數(shù)據(jù)的遷移l平臺上線前核查l應(yīng)急措施與計劃l技術(shù)上線批準(zhǔn)系統(tǒng)實現(xiàn)最終準(zhǔn)備上線和支持l平臺上線l平臺文檔交付l

56、平臺上線后支持平臺一期上線試運行業(yè)務(wù)藍(lán)圖系統(tǒng)實現(xiàn)最終準(zhǔn)備上線和支持l系統(tǒng)上線l系統(tǒng)文檔交付l系統(tǒng)上線后支持l最終用戶培訓(xùn)l系統(tǒng)上線前核查l應(yīng)急措施與計劃l系統(tǒng)上線批準(zhǔn)UAT2016年1月系統(tǒng)設(shè)計數(shù)據(jù)設(shè)計2016年5月l生產(chǎn)環(huán)境與認(rèn)證機(jī)制l硬件平臺的部署l平臺應(yīng)用的調(diào)整或二次開發(fā)l數(shù)據(jù)的遷移l主數(shù)據(jù)的梳理與平臺遷移成功的客戶案例SAP在國內(nèi)外案例分享 2015 SAP SE. All rights reserved.64華能集團(tuán)公司背景與業(yè)務(wù)需求中國華能集團(tuán)公司,是以經(jīng)營電力產(chǎn)業(yè)為主的央企集團(tuán),覆蓋新能源、環(huán)保產(chǎn)業(yè)、煤炭產(chǎn)業(yè)、金融產(chǎn)業(yè)、交通運輸?shù)刃袠I(yè)。發(fā)電裝機(jī)容量1.35億千瓦,位居亞洲第一、世

57、界第二的電力集團(tuán)已跨入世界500強(qiáng)企業(yè),在2012年全球排名246位。集團(tuán)實施三級組織架構(gòu)管理,有二級單位50家,基層單位300多家企業(yè)。金融煤炭科技運輸電力生產(chǎn)2008年就已初步建成傳統(tǒng)數(shù)據(jù)中心,并已經(jīng)覆蓋了二級單位和基層單位:但是,傳統(tǒng)數(shù)據(jù)中心也遇到一系列問題和挑戰(zhàn)傳統(tǒng)數(shù)據(jù)倉庫技術(shù)性能不足,難以滿足在線經(jīng)營分析的要求;沒有與ERP等應(yīng)用系統(tǒng)實時集成;沒有監(jiān)理集團(tuán)統(tǒng)一的真實數(shù)據(jù)源;難以滿足今后大數(shù)據(jù)分析的要求. 2015 SAP SE. All rights reserved.65隨著支持“在線經(jīng)營”的戰(zhàn)略要求,以及ERP系統(tǒng)等實施推廣;集團(tuán)按照“五統(tǒng)一”的原則,自上而下重新規(guī)劃了未來數(shù)據(jù)中

58、心架構(gòu)集團(tuán)數(shù)據(jù)中心的目標(biāo)定位:支持集團(tuán)實時在線經(jīng)營分析集團(tuán)級集中統(tǒng)一的大數(shù)據(jù)中心覆蓋全集團(tuán)業(yè)務(wù),集成所有應(yīng)用數(shù)據(jù)統(tǒng)一的權(quán)威數(shù)據(jù)( Single Source of Truth)開放數(shù)據(jù)生態(tài)系統(tǒng),以支持不同應(yīng)用開發(fā)團(tuán)隊統(tǒng)統(tǒng)一一標(biāo)標(biāo)準(zhǔn)準(zhǔn)統(tǒng)一統(tǒng)一管理管理統(tǒng)一統(tǒng)一建設(shè)建設(shè)統(tǒng)一統(tǒng)一規(guī)劃規(guī)劃統(tǒng)統(tǒng)一一投投資資自自上上而而下下華能集團(tuán)大數(shù)據(jù)平臺的建設(shè)目標(biāo) 2015 SAP SE. All rights reserved.66SLTSLT華能集團(tuán)數(shù)據(jù)中心的總體架構(gòu)特點分析華能集團(tuán)選擇采用SAP HANA構(gòu)建企業(yè)數(shù)據(jù)倉庫,分兩期實現(xiàn)了企業(yè)分析型數(shù)據(jù)的歸并、整合與集中分析與展現(xiàn)企業(yè)商務(wù)智能支持平臺運營數(shù)據(jù)存儲ODS

59、(基于HANA)數(shù)據(jù)管理即席查詢固定報表儀表盤數(shù)據(jù)探索HRFI/COSRMEAM綜合統(tǒng)計系統(tǒng)實時監(jiān)管系統(tǒng)非結(jié)構(gòu)化文檔EDW(基于HANA)數(shù)據(jù)交換平臺(實時同步、數(shù)據(jù)抽取、數(shù)據(jù)轉(zhuǎn)換、數(shù)據(jù)交換)華能業(yè)務(wù)運營/支持類系統(tǒng)實時分析云平臺管理集團(tuán)總部區(qū)域/產(chǎn)業(yè)公司基層電廠其它應(yīng)用系統(tǒng)一期上線二期上線SAP BusinessObject企業(yè)版ODS效益:采用HANA作為ODS(管理一個業(yè)務(wù)周期數(shù)據(jù)),千百倍的提升數(shù)據(jù)庫性能各系統(tǒng)運營數(shù)據(jù)可以準(zhǔn)實時地同步到HANA的ODS可以進(jìn)行面向日常業(yè)務(wù)活動的、高性能的實時分析和決策實現(xiàn)了集團(tuán)分析數(shù)據(jù)的唯一真實信息來源EDW效益:集中管理集團(tuán)總部各業(yè)務(wù)模塊歷史數(shù)據(jù);可準(zhǔn)確、迅速地發(fā)掘業(yè)務(wù)歷史變化便于集團(tuán)層面的審計與監(jiān)控BI展現(xiàn)工具:靈活、豐富的前端展現(xiàn)界面;業(yè)務(wù)人員可通過BOE語

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論