中國電信集團(tuán)EDW-增值業(yè)務(wù)運(yùn)營數(shù)據(jù)中心建設(shè)方案

中國電信集團(tuán)EDW-增值業(yè)務(wù)運(yùn)營數(shù)據(jù)中心建設(shè)方案目錄平臺可移植性2總體方案介紹3關(guān)鍵技術(shù)介紹4成功案例介紹5數(shù)據(jù)分析支撐工作方案6實(shí)施方案和平臺發(fā)展方向7建設(shè)目標(biāo)與重點(diǎn)11

公司研發(fā)實(shí)力形成了成熟的研發(fā)體系，具備快速反應(yīng)及持續(xù)開發(fā)的能力在電信業(yè)務(wù)技術(shù)規(guī)范研究領(lǐng)域處于國內(nèi)領(lǐng)先地位，編制標(biāo)準(zhǔn)與規(guī)范近15項(xiàng)國家專利2項(xiàng)，軟件產(chǎn)品登記數(shù)13個，計算機(jī)軟件著作權(quán)登記數(shù)9個，自主研發(fā)產(chǎn)品獲多項(xiàng)國家級，省、市級和中國電信級獎項(xiàng)2規(guī)范管理專業(yè)實(shí)驗(yàn)室3G實(shí)驗(yàn)室增值業(yè)務(wù)實(shí)驗(yàn)室數(shù)據(jù)多媒體實(shí)驗(yàn)室軟件評測實(shí)驗(yàn)室產(chǎn)品與中國電信廣東研究院戰(zhàn)略合作公司人才、技術(shù)優(yōu)勢開發(fā)知識庫公共組件庫技術(shù)規(guī)范質(zhì)量控制業(yè)務(wù)優(yōu)化UI設(shè)計以RUP指導(dǎo)項(xiàng)目管理、軟件開發(fā)過程通過CMMI3級評估核心業(yè)務(wù)管理支撐系統(tǒng)(MSS）業(yè)務(wù)支撐系統(tǒng)(BSS）運(yùn)營管理系統(tǒng)(OSS)業(yè)務(wù)交互平臺行業(yè)應(yīng)用產(chǎn)品質(zhì)量控制

公司產(chǎn)品與服務(wù)3IP移動固定網(wǎng)絡(luò)MSSOSS系統(tǒng)集成BSSEDA主機(jī)集成網(wǎng)絡(luò)集成SAP二次開發(fā)計費(fèi)帳務(wù)與結(jié)算IBSS/CRM余額管理平臺寬帶后臺統(tǒng)一充值VC服務(wù)開通iSPPUMCCTMASODS增值業(yè)務(wù)平臺轉(zhuǎn)型業(yè)務(wù)平臺統(tǒng)一支付移動支付DACS統(tǒng)一認(rèn)證商企平臺號百平臺114搜索導(dǎo)航全球眼(手機(jī)全球眼)平安城市商務(wù)領(lǐng)航行業(yè)應(yīng)用商務(wù)領(lǐng)航平臺應(yīng)用商務(wù)領(lǐng)航咨詢服務(wù)視頻監(jiān)控自助建站數(shù)字校園IT監(jiān)控金視通協(xié)同辦公系統(tǒng)SAP實(shí)施咨詢ICT業(yè)務(wù)與產(chǎn)品3G移動應(yīng)用號百定制終端校園定制終端政企定制終端任翼行院線通演出票火車票生活搜訂酒店框架桌面火訊影視音樂游戲詞典QQ天氣預(yù)報動漫圖鈴郵箱瀏覽器企業(yè)總機(jī)手機(jī)搜索189郵箱業(yè)務(wù)交互平臺MBOSS本期項(xiàng)目建設(shè)目標(biāo)本系統(tǒng)關(guān)注中國電信所有全國級增值業(yè)務(wù)的運(yùn)營分析，實(shí)現(xiàn)原始業(yè)務(wù)運(yùn)營平臺系統(tǒng)的數(shù)據(jù)采集、數(shù)據(jù)整合和聚合。提供對用戶消費(fèi)行為、業(yè)務(wù)推廣情況、SP/CP分析監(jiān)控方面的應(yīng)用，并實(shí)現(xiàn)跨業(yè)務(wù)、跨平臺的融合分析，為增值業(yè)務(wù)的深度運(yùn)營提供支撐。4本期項(xiàng)目建設(shè)重點(diǎn)技術(shù)方面信息組裝與個性配數(shù)據(jù)質(zhì)量的全程把控知識庫的構(gòu)建系統(tǒng)間互動加強(qiáng)流程的穿越數(shù)據(jù)運(yùn)營的理念滲透到系統(tǒng)的技術(shù)實(shí)現(xiàn)中多維分析跨業(yè)務(wù)、跨平臺融合業(yè)務(wù)分析對于業(yè)務(wù)運(yùn)營全方位的支撐逐步增強(qiáng)構(gòu)建基于云計算的數(shù)據(jù)平臺實(shí)現(xiàn)增值業(yè)務(wù)統(tǒng)一數(shù)據(jù)視圖技術(shù)方面數(shù)據(jù)質(zhì)量的全程把控業(yè)務(wù)方面KPI、綜合查詢、報表分析5目錄建設(shè)目標(biāo)與重點(diǎn)1總體方案介紹3關(guān)鍵技術(shù)介紹4成功案例介紹5數(shù)據(jù)分析支撐工作方案6實(shí)施方案和平臺發(fā)展方向7平臺可移植性267平臺可移植性說明層次產(chǎn)品名稱適應(yīng)軟件平臺適應(yīng)硬件平臺開發(fā)語言備注數(shù)據(jù)獲取Informaticawindows/linux/unix等HP/IBM/DELL等JAVA第三方ETL產(chǎn)品數(shù)據(jù)存儲EDW與平臺無關(guān)與平臺無關(guān)JAVA\PROC第三方產(chǎn)品DM與平臺無關(guān)與平臺無關(guān)JAVA\PROC第三方產(chǎn)品ORACLEwindows/linux/unix等HP/IBM/DELL等JAVA第三方產(chǎn)品[注:ORACLE和IBMDB2二者選一]IBMDB2windows/linux/unix等HP/IBM/DELL等JAVA第三方產(chǎn)品[][注:ORACLE和IBMDB2二者選一]數(shù)據(jù)應(yīng)用BIwindows/linux/unix等HP/IBM/DELL等JAVA第三方BI產(chǎn)品IDAPwindows/linux/unix等HP/IBM/DELL等JAVA自主研發(fā)產(chǎn)品(自助取數(shù))Tomcatwindows/linux/unix等HP/IBM/DELL等JAVA開源平臺數(shù)據(jù)展現(xiàn)Portalwindows/linux/unix等HP/IBM/DELL等JAVA自主研發(fā)產(chǎn)品1)第三方軟件（Informatica、Oracle、DB2、BI等）不直接依賴于具體的硬件平臺、操作系統(tǒng)和特定的數(shù)據(jù)庫；2)自研產(chǎn)品（Portal、IDAP、EDW、DM）是基于JAVA開發(fā)的，具有跨平臺性；目錄建設(shè)目標(biāo)與重點(diǎn)1平臺可移植性2關(guān)鍵技術(shù)介紹4成功案例介紹5數(shù)據(jù)分析支撐工作方案6實(shí)施方案和平臺發(fā)展方向7總體方案介紹38數(shù)據(jù)采集：從NMSC、集團(tuán)IT系統(tǒng)、全國接入及管理網(wǎng)管系統(tǒng)及全國和各省增值業(yè)務(wù)平臺采集相關(guān)數(shù)據(jù)。

數(shù)據(jù)存儲：對以上各數(shù)據(jù)源的數(shù)據(jù)經(jīng)過清洗、轉(zhuǎn)換，按照各數(shù)據(jù)域主題組織、存儲，成為決策分析應(yīng)用的基礎(chǔ)。數(shù)據(jù)應(yīng)用：從業(yè)務(wù)運(yùn)營全流程的各個環(huán)節(jié)提供相關(guān)應(yīng)用分析，為增值業(yè)務(wù)的深度運(yùn)營提供全面的數(shù)據(jù)支撐。數(shù)據(jù)展現(xiàn)：為使用人員提供統(tǒng)一門戶，通過報表、圖形等形式簡便、快捷地訪問系統(tǒng)中的各種數(shù)據(jù)并進(jìn)行各種分析預(yù)測操作?？傮w方案介紹-總體架構(gòu)910總體方案介紹-功能架構(gòu)總體方案介紹-設(shè)備邏輯架構(gòu)VAS-ODMS基于PC云解決方案云內(nèi)云外靈活部署、安全且易于擴(kuò)展；采用數(shù)據(jù)按需服務(wù)思想，原始文件進(jìn)去，分析報告出來；UNIX小型機(jī)按處理能力分成2個硬件分區(qū)，分別部署數(shù)據(jù)庫和接口服務(wù)器，兩臺構(gòu)成集群環(huán)境；多個PC服務(wù)器構(gòu)成云計算環(huán)境，提供ETL數(shù)據(jù)整合服務(wù)和應(yīng)用分析展現(xiàn)服務(wù)?？傮w方案介紹-設(shè)備邏輯架構(gòu)-云計算PC云邏輯架構(gòu)VMWARE虛擬化物理PC，構(gòu)造多虛擬節(jié)點(diǎn)群，建議按1:2虛擬化；虛擬節(jié)點(diǎn)部署ETL、OLAP、REPORT、應(yīng)用平臺程序；配置ETL和應(yīng)用平臺軟件，構(gòu)成集群和高可用性能力；根據(jù)數(shù)據(jù)處理規(guī)模，配置8個虛擬節(jié)點(diǎn)構(gòu)成計算云，4個集群，4個高可用性；根據(jù)系統(tǒng)用戶和應(yīng)用規(guī)模，配置6個節(jié)點(diǎn)構(gòu)成應(yīng)用云，實(shí)現(xiàn)負(fù)載均衡；可選用一臺未作虛擬化PC，作為云計算管控平臺及部署其它管控平臺。13總體方案介紹-應(yīng)用分布式架構(gòu)LoadBalancingRedundantCluster作為應(yīng)用集群請求指派，并根據(jù)應(yīng)用節(jié)點(diǎn)訪問壓力的大小進(jìn)行負(fù)載均衡；LoadBalancing分為主從兩個實(shí)例，以備在運(yùn)行的實(shí)例出現(xiàn)問題是可由后備實(shí)例接管；ApplicationServers包括Web應(yīng)用、報表服務(wù)、OLAP服務(wù)等，都以冗余的方式進(jìn)行分布式部署；DatabaseRedundantCluster冗余部署數(shù)據(jù)庫。14總體方案介紹-設(shè)備部署架構(gòu)分項(xiàng)設(shè)備型號配置要求數(shù)量數(shù)據(jù)庫/接口服務(wù)器HPRX8640同檔分區(qū)一：16c64G（100萬tpmc）分區(qū)二：4c16G（20萬tpmc）2應(yīng)用服務(wù)器HPBL685c同檔每臺刀片服務(wù)器配置:4CPU(4Core)/64G內(nèi)存/2*146G硬盤(其中4臺刀片安裝RedHat企業(yè)版5.3操作系統(tǒng),另外4臺安裝windows2008server系統(tǒng))8SAN交換機(jī)HP8/24SANSwitch同檔24口光纖交換機(jī)2磁盤陣列HPEVA6400同檔25T容量1磁帶庫HPMSL8096同檔5個LOT4驅(qū)動器，55T容量,MSBF:200萬次MTBF:100,000小時1防火墻華為1000E-U2同檔每臺配置4個多模GE光口2核心交換機(jī)華為9303同檔每臺8個多模GE光口，24GE電口2PC臺式機(jī)普通PCIntel酷睿2代1.86GHz或以上，雙核處理器，2MB緩存或以上；4GB或以上；320GB高速硬盤；19”LCD；32速DVDCOMBO；10/100/1000MB自適應(yīng)以太網(wǎng)網(wǎng)卡2數(shù)據(jù)庫ORACLE10g或DB2數(shù)據(jù)庫(2cpulicenses)forRAC1Windows操作系統(tǒng)WinSvrEnt2008R2CHNSOLPNLwindows操作系統(tǒng),25個CAL（連接許可License）6Linux操作系統(tǒng)RedHat企業(yè)版5.3Linux操作系統(tǒng)(4cpulicenses)4OLAPServerSQLSvrStd2008R2CHNSOLPNL1ProcOLAPServer,提供多維存儲和OLAP操作底層支持1報表工具biV6.0OLTP和OLAP的前端報表應(yīng)用和分析展示工具及門戶平臺1ETL工具InformaticaPowerCenter8.6ETL工具,數(shù)據(jù)集中整合、轉(zhuǎn)換、清洗和裝載1虛擬化軟件Vmware虛擬化軟件1備份軟件HeartsOneBackupEnterpriseEditionV8.0備份軟件1殺毒軟件McAfee防病毒軟件6WEB中間件Tomcat6.0Web應(yīng)用平臺（免費(fèi)）1目錄建設(shè)目標(biāo)與重點(diǎn)1平臺可移植性2總體方案介紹3成功案例介紹5數(shù)據(jù)分析支撐工作方案6實(shí)施方案和平臺發(fā)展方向7關(guān)鍵技術(shù)介紹415關(guān)鍵技術(shù)介紹-數(shù)據(jù)模型16數(shù)據(jù)模型采用分層架構(gòu)，分為緩存層、整合層、匯總層、視圖層、應(yīng)用層，元數(shù)據(jù)層對整個數(shù)據(jù)生命周期進(jìn)行管控。關(guān)鍵技術(shù)介紹-Informatica(體系架構(gòu))RepositoryServicesGlobalRepositoryLocalRepositoryMetadataDirectoryEngineVisualizationServerPowerCenterRepositoryClientToolsDesignViewManageXML,Messaging,

andWebServicesPackagedApplicationsRelationalandFlatFilesMainframe

andMidrangeInformaticaDataIntegrationPlatformProviderXML,Messaging,

andWebServicesPackagedApplicationsRelationalandFlatFilesMainframe

andMidrangePortals,Dashboards,

andReportsConsumerIntegrationServiceUNIX(AIX,HPUX,Solaris,Linux)WindowsNT4.0,2000,2003DesignerNavigatorMetadataDiscoveryCollaborationToolsWorkflowMonitorDashboardsMetadataReporterVisualizationToolsRepositoryManagerMetadataAnalysisAdministrationConsoleWorkflowManagerPowerExchangePowerCenterConnectsSAPBWServiceWebServiceHub17關(guān)鍵技術(shù)介紹-Informatica(接口采集)抽取預(yù)處理加載NMSC網(wǎng)管WAP平臺189平臺工作流集中調(diào)度18關(guān)鍵技術(shù)介紹-Informatica(ETL工作流)19關(guān)鍵技術(shù)介紹-Informatica（網(wǎng)格）20關(guān)鍵技術(shù)介紹-Informatica（網(wǎng)格）通過ETL集群向?qū)?，對虛擬化出的四臺ETL服務(wù)器進(jìn)行網(wǎng)格化，設(shè)計集群服務(wù)。21關(guān)鍵技術(shù)介紹-Informatica(分區(qū)并向)22目錄建設(shè)目標(biāo)與重點(diǎn)1平臺可移植性2總體方案介紹3關(guān)鍵技術(shù)介紹4數(shù)據(jù)分析支撐工作方案6實(shí)施方案和平臺發(fā)展方向7成功案例介紹52324成功案例介紹－廣東電信省ODS－總體介紹數(shù)據(jù)質(zhì)量CRM系統(tǒng)計費(fèi)系統(tǒng)結(jié)算系統(tǒng)ETL匯總數(shù)據(jù)域臨時緩存域數(shù)據(jù)共享和數(shù)據(jù)訪問域ODS核心層源系統(tǒng)映射層DM層(C網(wǎng)集市、各中心數(shù)據(jù)集市)EDW營銷分析(整合TMAS和CMMS的統(tǒng)計功能)專題分析主題分析KPI統(tǒng)計報表渠道分析智能取數(shù)數(shù)據(jù)門戶接入……ODSEDW用戶資料數(shù)據(jù)量：支持全省5000萬用戶（含C網(wǎng)）；數(shù)據(jù)存儲量：ODS15T左右；EDW40T左右；數(shù)據(jù)處理量：每天處理18000萬條左右記錄數(shù)，以提供管理層每日快報、關(guān)鍵業(yè)務(wù)日監(jiān)測表等應(yīng)用每月處理數(shù)據(jù)量：5億條左右記錄，在用功能點(diǎn)超千種：每月8日12點(diǎn)前提供管理層運(yùn)營分析會材料－信息月報（白皮書共326張，其中業(yè)務(wù)量白皮書：193張，收入白皮書：133張）每月5日12點(diǎn)前完成全業(yè)務(wù)指標(biāo)體系統(tǒng)計（統(tǒng)計指標(biāo)：361299個，其中移動：111701個，固網(wǎng)：249598個）每月5日12點(diǎn)前整合全省BSS核心系統(tǒng)業(yè)務(wù)數(shù)據(jù)，為業(yè)務(wù)部門提供全省統(tǒng)一口徑的固定報表及動態(tài)報表展示，提供全省統(tǒng)一報表658張，其中電定報表131張；多維分析主題共102個，其中移動：38個，固網(wǎng)：64個實(shí)用情況：每日點(diǎn)擊率達(dá)到2萬以上；報表日均訪問次數(shù)：850次，高峰期報表日訪問1713次，日均多維點(diǎn)擊500人次；接口：對外系統(tǒng)接口有30個左右；成功案例介紹－廣東電信省ODS－每日快報2526成功案例介紹－廣東電信省ODS－管理層看數(shù)27成功案例介紹－廣東電信省ODS－多維分析28成功案例介紹－廣東電信省ODS－關(guān)聯(lián)鉆透分析29成功案例介紹－廣東電信省ODS－多維分析30成功案例介紹－廣東電信省ODS－元數(shù)據(jù)搜索31

客戶關(guān)懷客戶維系客戶挽留數(shù)據(jù)倉庫／客戶集市閉環(huán)流程效果評估目標(biāo)篩選方案審批營銷執(zhí)行策劃執(zhí)行客戶理解數(shù)據(jù)集中方案設(shè)計腳本設(shè)計模型應(yīng)用定義問題數(shù)據(jù)準(zhǔn)備模型構(gòu)建成功案例介紹－針對性營銷及維系挽留系統(tǒng)－閉環(huán)流程根本上解決了分析決策與市場營銷不暢的問題，業(yè)務(wù)分析/人工挖掘的有價值知識，能直達(dá)渠道一線，形成營銷/維系具體工單，并跟蹤評估，持續(xù)完善，實(shí)現(xiàn)“精準(zhǔn)營銷”。截至目前已完成移動/寬帶客戶細(xì)分、流失預(yù)警、欠費(fèi)提醒、交叉銷售、價值提升等多個模型，并在廣東全省推廣，均取得較好效果。32成功案例介紹－針對性營銷及維系挽留系統(tǒng)－功能架構(gòu)省維挽系統(tǒng)由客戶挖掘、營銷策劃、工單流轉(zhuǎn)和營銷評估四個功能域組成客戶挖掘和營銷評估功能域由EDW系統(tǒng)實(shí)現(xiàn)營銷策劃、工單流轉(zhuǎn)、客戶管理、工作支持、營銷共享池在省維挽系統(tǒng)實(shí)現(xiàn)在EDW系統(tǒng)上實(shí)現(xiàn)的功能，界面最終集成到省維挽系統(tǒng)，保證客戶經(jīng)理的使用感知33成功案例介紹－針對性營銷及維系挽留系統(tǒng)－工作界面管理人員首頁重點(diǎn)展示：團(tuán)隊任務(wù)、團(tuán)隊績效指標(biāo)VIP客戶經(jīng)理首頁重點(diǎn)展示：待辦工單、客戶分布、個人績效指標(biāo)34成功案例介紹－針對性營銷及維系挽留系統(tǒng)－價值提升模型我們面臨的價值問題客戶價值象限？客戶潛在價值如何？如何提升客戶價值？有哪些手段？能否提供高潛在價值客戶名單和提升建議？能否提供當(dāng)前高價值客戶名單和關(guān)懷建議？價值提升模型能做什么模型分析報告會給出當(dāng)前客戶當(dāng)前價值、客戶潛在價值，客戶價值象限分布；提供高潛在價值客戶名單，并給出價值提升建議；提供高價值客戶名單，并給出延長高價值建議；模型必備條件價值業(yè)務(wù)理解，給出當(dāng)前價值、潛在價值業(yè)務(wù)定義；客戶價值相關(guān)數(shù)據(jù)：基本資料、業(yè)務(wù)使用、客戶出賬、行為活躍趨勢；35成功案例介紹－針對性營銷及維系挽留系統(tǒng)－價值提升模型模型關(guān)鍵變量基礎(chǔ)變量（輸入）在網(wǎng)時長城鄉(xiāng)標(biāo)識服務(wù)分群會員級別服務(wù)等級行業(yè)分類套餐檔次是否融合套餐余額積分衍生變量（輸入）消費(fèi)水平語音ARPU均值、趨勢增值A(chǔ)RPU均值、趨勢上網(wǎng)時長均值、趨勢電信產(chǎn)品種類電信產(chǎn)品個數(shù)新業(yè)務(wù)接受度客服咨詢次數(shù)異網(wǎng)ARPU均值、趨勢短信發(fā)送次數(shù)、趨勢彩信發(fā)送次數(shù)、趨勢特征變量（輸出）價值象限價值敏感度特征描述提升建議＋＝常用算法

Kohonen、Kmeans、時間序列36成功案例介紹－針對性營銷及維系挽留系統(tǒng)－價值提升模型惠州政企客戶價值提升模型根據(jù)“物以類聚，人以群分”的思想對惠州政企客戶進(jìn)行聚類；對客戶價值象限進(jìn)行分區(qū)，結(jié)合每象限客戶使用業(yè)務(wù)的排名進(jìn)行業(yè)務(wù)推送；政企客戶經(jīng)理根據(jù)目標(biāo)客戶名單和推薦列表展開提升工作；產(chǎn)品名稱推薦群數(shù)推薦客戶數(shù)互聯(lián)星空371643企業(yè)信息上網(wǎng)服務(wù)321581查詢轉(zhuǎn)接301414CENTREX群組411400企業(yè)郵箱＋網(wǎng)絡(luò)硬盤套餐261307企業(yè)總機(jī)311247工商電子黃頁會員221224寬樂通信16779商務(wù)領(lǐng)航產(chǎn)品系列7531模型應(yīng)用應(yīng)用效果客戶維系后，成功推薦產(chǎn)品的比例達(dá)到45％，大大提升營銷效果客戶價值平均ARPU上升了28％，效果明顯；37成功案例介紹－東莞電信云CRM－總體介紹關(guān)鍵創(chuàng)新點(diǎn)1.云端服務(wù)提供模式，用戶無需服務(wù)器，實(shí)現(xiàn)SaaS(軟件即服務(wù))，用戶只需簡單操作即可開戶使用2.云計算可租賃服務(wù)模式，虛擬化資源，實(shí)現(xiàn)按需使用，資源合理分配3.可容納百萬級以上用戶數(shù)據(jù)，具備高可擴(kuò)展性、可用性及容災(zāi)性4.瘦客戶端，用戶可以通過普通廉價PC接入使用，同時提供手機(jī)終端應(yīng)用，實(shí)現(xiàn)移動辦公。38成功案例介紹－東莞電信云CRM－邏輯架構(gòu)

為中小商企提供更好的服務(wù)提高用戶粘性體現(xiàn)并發(fā)揮固定電話、寬帶、手機(jī)移動終端三者結(jié)合的優(yōu)勢，提高競爭力合理營運(yùn)模式下可直接增加營收通過增值服務(wù)增值為完善物聯(lián)網(wǎng)提供補(bǔ)充，并從中獲得更大價值39成功案例介紹－東莞電信云CRM－關(guān)鍵技術(shù)分布式文件系統(tǒng)TOMCAT集群數(shù)據(jù)庫集群40成功案例介紹－東莞電信云CRM－示例目錄建設(shè)目標(biāo)與重點(diǎn)1平臺可移植性2總體方案介紹3關(guān)鍵技術(shù)介紹4成功案