云平臺(tái)下的運(yùn)維體系建設(shè)工作內(nèi)容

-.z云平臺(tái)下的運(yùn)維體系建立工作容系統(tǒng)運(yùn)維系統(tǒng)運(yùn)維負(fù)責(zé)IDC、網(wǎng)絡(luò)、CDN和根底效勞的建立〔LVS、NTP、DNS〕；負(fù)責(zé)資產(chǎn)管理，效勞器選型、交付和維修。詳細(xì)的工作職責(zé)如下：IDC數(shù)據(jù)中心建立收集業(yè)務(wù)需求，預(yù)估未來(lái)數(shù)據(jù)中心的開展規(guī)模，從骨干網(wǎng)的分布，數(shù)據(jù)中心建筑，以及Internet接入、網(wǎng)絡(luò)攻擊防御能力、擴(kuò)容能力、空間預(yù)留、外接專線能力、現(xiàn)場(chǎng)效勞支撐能力等方面評(píng)估選型數(shù)據(jù)中心。負(fù)責(zé)數(shù)據(jù)中心的建立、現(xiàn)場(chǎng)維護(hù)工作。網(wǎng)絡(luò)建立設(shè)計(jì)及規(guī)劃生產(chǎn)網(wǎng)絡(luò)架構(gòu)，這里面包括：數(shù)據(jù)中心網(wǎng)絡(luò)架構(gòu)、傳輸網(wǎng)架構(gòu)、CDN網(wǎng)絡(luò)架構(gòu)等，以及網(wǎng)絡(luò)調(diào)優(yōu)等日常運(yùn)維工作。LVS負(fù)載均衡和SNAT建立LVS是整個(gè)站點(diǎn)架構(gòu)中的流量入口，根據(jù)網(wǎng)絡(luò)規(guī)模和業(yè)務(wù)需求，構(gòu)建負(fù)載均衡集群；完成網(wǎng)絡(luò)與業(yè)務(wù)效勞器的銜接，提供高性能、高可用的負(fù)載調(diào)度能力，以及統(tǒng)一的網(wǎng)絡(luò)層防攻擊能力；SNAT集中提供數(shù)據(jù)中心的公網(wǎng)訪問(wèn)效勞，通過(guò)集群化部署，保證出網(wǎng)效勞的高性能與高可用。CDN規(guī)劃和建立CDN工作劃分為第三方和自建兩局部。建立第三方CDN的選型和調(diào)度控制；根據(jù)業(yè)務(wù)開展趨勢(shì)，規(guī)劃CDN新節(jié)點(diǎn)建立布局；完善CDN業(yè)務(wù)及監(jiān)控，保障CDN系統(tǒng)穩(wěn)定、高效運(yùn)行；分析業(yè)務(wù)加速頻道的文件特性和數(shù)量，制定最優(yōu)的加速策略和資源匹配；負(fù)責(zé)用戶劫持等CDN日常故障排查工作。效勞器選型、交付和維護(hù)負(fù)責(zé)效勞器的測(cè)試選型，包含效勞器整機(jī)、部件的根底性測(cè)試和業(yè)務(wù)測(cè)試，降低整機(jī)功率，提升機(jī)架部署密度等。結(jié)合對(duì)公司業(yè)務(wù)的了解，推廣新硬件、新方案減少業(yè)務(wù)的效勞器投入規(guī)模。負(fù)責(zé)效勞器硬件故障的診斷定位，效勞器硬件監(jiān)控、安康檢查工具的開發(fā)和維護(hù)。OS、核選型和OS相關(guān)維護(hù)工作責(zé)整體平臺(tái)的OS選型、定制和核優(yōu)化，以及Patch的更新和部版本發(fā)布；建立根底的YUM包管理和分發(fā)中心，提供常用包版本庫(kù)；跟進(jìn)日常各類OS相關(guān)故障；針對(duì)不同的業(yè)務(wù)類型，提供定向的優(yōu)化支持。資產(chǎn)管理記錄和管理運(yùn)維相關(guān)的根底物理信息，包括數(shù)據(jù)中心、網(wǎng)絡(luò)、機(jī)柜、效勞器、ACL、IP等各種資源信息，制定有效的流程，確保信息的準(zhǔn)確性；開放API接口，為自動(dòng)化運(yùn)維提供數(shù)據(jù)支持。根底效勞建立業(yè)務(wù)對(duì)DNS、NTP、SYSLOG等根底效勞的依賴非常高，需要設(shè)計(jì)高可用架構(gòu)防止單點(diǎn)，提供穩(wěn)定的根底效勞。應(yīng)用運(yùn)維應(yīng)用運(yùn)維負(fù)責(zé)線上效勞的變更、效勞狀態(tài)監(jiān)控、效勞容災(zāi)和數(shù)據(jù)備份等工作，對(duì)效勞進(jìn)展例行排查、故障應(yīng)急處理等工作。詳細(xì)的工作職責(zé)如下所述。設(shè)計(jì)評(píng)審在產(chǎn)品研發(fā)階段，參與產(chǎn)品設(shè)計(jì)評(píng)審，從運(yùn)維的角度提出評(píng)審意見，使效勞滿足運(yùn)維準(zhǔn)入的高可用要求。效勞管理負(fù)責(zé)制定線上業(yè)務(wù)升級(jí)變更及回滾方案，并進(jìn)展變更實(shí)施。掌握所負(fù)責(zé)的效勞及效勞間關(guān)聯(lián)關(guān)系、效勞依賴的各種資源。能夠發(fā)現(xiàn)效勞上的缺陷，及時(shí)通報(bào)并推進(jìn)解決。制定效勞穩(wěn)定性指標(biāo)及準(zhǔn)入標(biāo)準(zhǔn)，同時(shí)不斷完善和優(yōu)化程序和系統(tǒng)的功能、效率，提高運(yùn)行質(zhì)量。完善監(jiān)控容，提高報(bào)警準(zhǔn)確度。在線上效勞出現(xiàn)故障時(shí)，第一時(shí)間響應(yīng)，對(duì)線上故障能按流程進(jìn)展通報(bào)并按預(yù)案執(zhí)行，未知故障組織相關(guān)人員聯(lián)合排障。資源管理對(duì)各效勞的效勞器資產(chǎn)進(jìn)展管理，梳理效勞器資源狀況、數(shù)據(jù)中心分布情況、網(wǎng)絡(luò)專線及帶寬情況，能夠合理使用效勞器資源，根據(jù)不同效勞的需求，分配不同配置的效勞器，確保效勞器資源的充分利用。例行檢查制定效勞例行排查點(diǎn)，并不斷完善。根據(jù)制定的效勞排查點(diǎn)，對(duì)效勞進(jìn)展定期檢查。對(duì)排查過(guò)程中發(fā)現(xiàn)的問(wèn)題，及時(shí)進(jìn)展追查，排除可能存在的隱患。預(yù)案管理確定效勞所需的各項(xiàng)監(jiān)控、系統(tǒng)指標(biāo)的閾值或臨界點(diǎn)，以及出現(xiàn)該情況后的處理預(yù)案。建立和更新效勞預(yù)案文檔，并根據(jù)日常故障情況不斷補(bǔ)充完善，提高預(yù)案完備性。能夠制定和評(píng)審各類預(yù)案，周期性進(jìn)展預(yù)案演練，確保預(yù)案的可執(zhí)行性。數(shù)據(jù)備份制定數(shù)據(jù)備份策略，按規(guī)進(jìn)展數(shù)據(jù)備份工作。保證數(shù)據(jù)備份的可用性和完整性，定期開展數(shù)據(jù)恢復(fù)性測(cè)試。數(shù)據(jù)庫(kù)運(yùn)維數(shù)據(jù)庫(kù)運(yùn)維負(fù)責(zé)數(shù)據(jù)存儲(chǔ)方案設(shè)計(jì)、數(shù)據(jù)庫(kù)表設(shè)計(jì)、索引設(shè)計(jì)和SQL優(yōu)化，對(duì)數(shù)據(jù)庫(kù)進(jìn)展變更、監(jiān)控、備份、高可用設(shè)計(jì)等工作。詳細(xì)的工作職責(zé)如下所述。設(shè)計(jì)評(píng)審在產(chǎn)品研發(fā)初始階段，參與設(shè)計(jì)方案評(píng)審，從DBA的角度提出數(shù)據(jù)存儲(chǔ)方案、庫(kù)表設(shè)計(jì)方案、SQL開發(fā)標(biāo)準(zhǔn)、索引設(shè)計(jì)方案等，使效勞滿足數(shù)據(jù)庫(kù)使用的高可用、高性能要求。容量規(guī)劃掌握所負(fù)責(zé)效勞的數(shù)據(jù)庫(kù)的容量上限，清楚地了解當(dāng)前瓶頸點(diǎn)，當(dāng)效勞還未到達(dá)容量上限時(shí)，及時(shí)進(jìn)展優(yōu)化、分拆或者擴(kuò)容。數(shù)據(jù)備份與災(zāi)備制定數(shù)據(jù)備份與災(zāi)備策略，定期完成數(shù)據(jù)恢復(fù)性測(cè)試，保證數(shù)據(jù)備份的可用性和完整性。數(shù)據(jù)庫(kù)監(jiān)控完善數(shù)據(jù)庫(kù)存活和性能監(jiān)控，及時(shí)了解數(shù)據(jù)庫(kù)運(yùn)行狀態(tài)及故障。數(shù)據(jù)庫(kù)平安建立數(shù)據(jù)庫(kù)賬號(hào)體系，嚴(yán)格控制賬號(hào)權(quán)限與開放圍，降低誤操作和數(shù)據(jù)泄露的風(fēng)險(xiǎn)；加強(qiáng)離線備份數(shù)據(jù)的管理，降低數(shù)據(jù)泄露的風(fēng)險(xiǎn)。數(shù)據(jù)庫(kù)高可用和性能優(yōu)化對(duì)數(shù)據(jù)庫(kù)單點(diǎn)風(fēng)險(xiǎn)和故障設(shè)計(jì)相應(yīng)的切換方案，降低故障對(duì)數(shù)據(jù)庫(kù)效勞的影響；不斷對(duì)數(shù)據(jù)庫(kù)整體性能進(jìn)展優(yōu)化，包括新存儲(chǔ)方案引進(jìn)、硬件優(yōu)化、文件系統(tǒng)優(yōu)化、數(shù)據(jù)庫(kù)優(yōu)化、SQL優(yōu)化等，在保障本錢不增加或者少量增加的情況下，數(shù)據(jù)庫(kù)可以支撐更多的業(yè)務(wù)請(qǐng)求。自動(dòng)化系統(tǒng)建立設(shè)計(jì)開發(fā)數(shù)據(jù)庫(kù)自動(dòng)化運(yùn)維系統(tǒng)，包括數(shù)據(jù)庫(kù)部署、自動(dòng)擴(kuò)容、分庫(kù)分表、權(quán)限管理、備份恢復(fù)、SQL審核和上線、故障切換等功能。運(yùn)維研發(fā)運(yùn)維研發(fā)負(fù)責(zé)通用的運(yùn)維平臺(tái)設(shè)計(jì)和研發(fā)工作，如：資產(chǎn)管理、監(jiān)控系統(tǒng)、運(yùn)維平臺(tái)、數(shù)據(jù)權(quán)限管理系統(tǒng)等。提供各種API供運(yùn)維或研發(fā)人員使用，封裝更高層的自動(dòng)化運(yùn)維系統(tǒng)。詳細(xì)的工作職責(zé)如下所述。運(yùn)維平臺(tái)記錄和管理效勞及其關(guān)聯(lián)關(guān)系，協(xié)助運(yùn)維人員自動(dòng)化、流程化地完成日常運(yùn)維操作，包括機(jī)器管理、重啟、改名、初始化、域名管理、流量切換和故障預(yù)案實(shí)施等。監(jiān)控系統(tǒng)負(fù)責(zé)監(jiān)控系統(tǒng)的設(shè)計(jì)、開發(fā)工作，完成公司效勞器和各種網(wǎng)絡(luò)設(shè)備的資源指標(biāo)、線上業(yè)務(wù)運(yùn)行指標(biāo)的收集、告警、存儲(chǔ)、分析、展示和數(shù)據(jù)挖掘等工作，持續(xù)提高告警的及時(shí)性、準(zhǔn)確性和智能性，促進(jìn)公司效勞器資源的合理化調(diào)配。自動(dòng)化部署系統(tǒng)參與部署自動(dòng)化系統(tǒng)的開發(fā)，負(fù)責(zé)自動(dòng)化部署系統(tǒng)所需要的根底數(shù)據(jù)和信息，負(fù)責(zé)權(quán)限管理、API開發(fā)、Web端開發(fā)。結(jié)合云計(jì)算，研發(fā)和提供PaaS相關(guān)高可用平臺(tái)，進(jìn)一步提高效勞的部署速度和用戶體驗(yàn)，提升資源利用率。運(yùn)維平安運(yùn)維平安負(fù)責(zé)網(wǎng)絡(luò)、系統(tǒng)和業(yè)務(wù)等方面的平安加固工作，進(jìn)展常規(guī)的平安掃描、滲透測(cè)試，進(jìn)展平安工具和系統(tǒng)研發(fā)以及平安事件應(yīng)急處理。詳細(xì)的工作職責(zé)如下所述。平安制度建立根據(jù)公司部的具體流程，制定切實(shí)可行，且行之有效的平安制度。平安培訓(xùn)定期向員工提供具有針對(duì)性的平安培訓(xùn)和考核，在全公司建立平安負(fù)責(zé)人制度。風(fēng)險(xiǎn)評(píng)估通過(guò)黑白盒測(cè)試和檢查機(jī)制，定期產(chǎn)生對(duì)物理網(wǎng)絡(luò)、效勞器、業(yè)務(wù)應(yīng)用、用戶數(shù)據(jù)等方面的總體風(fēng)險(xiǎn)評(píng)估結(jié)果。平安建立根據(jù)風(fēng)險(xiǎn)評(píng)估結(jié)果，加固最薄弱的環(huán)節(jié)，包括設(shè)計(jì)平安防線、部署平安設(shè)備、及時(shí)更新補(bǔ)丁、防御病毒、源代碼自動(dòng)掃描和業(yè)務(wù)產(chǎn)品平安咨詢等。為了降低可能泄露數(shù)據(jù)的價(jià)