向大數據要質效———吉林電力搭建全業(yè)務統(tǒng)一數據中心推進數據共享與業(yè)務融合

2018-04-09 10:45:08 中國電力新聞網　點擊量：評論 (0)

4月2日，國網吉林省電力有限公司信通公司員工張凱打開輸配電標準作業(yè)成本分析場景，吉林電力各地市公司作業(yè)成本、成本區(qū)間以及偏差率清晰可

4月2日，國網吉林省電力有限公司信通公司員工張凱打開輸配電標準作業(yè)成本分析場景，吉林電力各地市公司作業(yè)成本、成本區(qū)間以及偏差率清晰可見，通過GIS地圖可直觀看到對應單位的設備缺陷、故障和檢修數量，發(fā)現各單位之間成本差異原因和具體設備類別，為優(yōu)化作業(yè)成本提供依據。

吉林電力是國家電網公司第二批全業(yè)務統(tǒng)一數據中心推廣單位，2017年7月啟動建設工作。目前，該公司已完成19套二級部署系統(tǒng)全量數據接入工作，歷史數據全部從生產環(huán)境接入，其中主要系統(tǒng)涵蓋5年以上歷史數據，大數據平臺量測類數據涵蓋3年以上歷史數據。

通過開展全業(yè)務統(tǒng)一數據中心建設，吉林電力進一步推進數據共享與業(yè)務融合，海量數據為該公司各類分析應用提供統(tǒng)一的運行環(huán)境、完備的數據資源、高效的分析計算能力，企業(yè)管理模式創(chuàng)新和精益化水平持續(xù)提升。

數倉模型匹配數據與業(yè)務對應無誤

全業(yè)務統(tǒng)一數據中心建設，需要吉林電力將19套核心業(yè)務系統(tǒng)全量數據統(tǒng)一納管，統(tǒng)一設計數倉模型，省公司端與之進行匹配，支撐業(yè)務場景建設和運營管理。

項目前期，吉林電力采用傳統(tǒng)方式建立數據倉庫，依據業(yè)務需求采用人工方式匹配對應的系統(tǒng)數據庫表和屬性字段。由于各業(yè)務系統(tǒng)是在不同時期建設的，經歷過多年的版本更新和數據治理，系統(tǒng)表多、屬性字段量大，造成系統(tǒng)間缺少統(tǒng)一的數據屬性字段標準，系統(tǒng)間屬性一致性較差。此外，各系統(tǒng)間的業(yè)務規(guī)則存在差異，同一屬性數據在不同系統(tǒng)中對應的屬性字段名稱不同，難以給出全局統(tǒng)一的數據屬性字段集合。采用人工核對方式工作量大，效率低下，無法保證匹配準確性，匹配工作面臨巨大挑戰(zhàn)。

為解決這一難題，吉林電力組織技術人員深入剖析業(yè)務本質，總結數倉匹配核心要點，即數據是業(yè)務體現，從業(yè)務系統(tǒng)的數據內容出發(fā)進行匹配，只要數據內容和業(yè)務一致，不管表和屬性字段是否與數倉模型一致，都認為是一致的。確定解決思路后，針對時間效率問題，工作人員利用大數據平臺并行內存計算技術開發(fā)數倉模型匹配工具，基于結構化業(yè)務數據進行數倉模型匹配，確保數據與業(yè)務對應無誤。

清洗轉換模型提高數據清洗質效

由于接入的各業(yè)務系統(tǒng)數據規(guī)范不統(tǒng)一，部分數據不符合場景分析要求，出現重復數據、空字段、格式不規(guī)范、數據缺項等現象，需要有針對性開展數據清洗轉換工作。

吉林電力于2017年10月開展全業(yè)務統(tǒng)一數據中心19套核心業(yè)務系統(tǒng)全量數據清洗轉換，在清洗轉換工作中，工作人員根據收集、梳理業(yè)務數據質量規(guī)則，對于不符合規(guī)則的數據，開展數據清洗。

同時，根據該公司統(tǒng)一數據模型，分析源業(yè)務數據與目標數據模型的映射關系，梳理業(yè)務數據編碼轉換、字段拆分、字段合并、字段運算、行列轉換的轉換需求，開展業(yè)務數據轉換。

為保證全系統(tǒng)數據清洗轉換的進度，與國家電網公司企業(yè)數據模型SG—CIM保持一致，該公司決定創(chuàng)新研究數據清洗轉換模型。該公司獨立開發(fā)數倉模型匹配工具，并創(chuàng)新研究數據清洗轉換模型，甄別有效數據與垃圾數據，并將有效數據進行類型轉換，大幅提高了數據清洗轉換的效率和質量。

張凱介紹說，在數據清洗轉換過程中，工作人員使用文本挖掘算法進行業(yè)務識別和標簽化，自動確定10個一級主題域業(yè)務主數據所在的表和屬性字段。通過在數據庫中屬性字段拆分、合并、運算和行列轉換，完善數據之間計算關系，工作人員同時還原數據流程，便于與實際業(yè)務進行比對。輔助相關人員則按業(yè)務、按主數據逐條開展進行數據清洗轉換，大幅提高了數據清洗轉換的質量和效率。

清洗轉換成果有效提升工作質效

大數據是基礎，場景模擬是過程，提升電網安全運行質量是目的。為挖掘電網運行規(guī)律，進一步解決準確定位問題，吉林電力基于全業(yè)務統(tǒng)一數據中心明細數據，將數據清洗轉換成果應用于實際工作，成功開展了公配臺區(qū)電壓分析和輸配電標準作業(yè)成本分析場景建設及應用，有效地提升了工作質效。

為精準定位電壓臺區(qū)異常原因，提升治理工作質效，吉林電力基于全業(yè)務統(tǒng)一數據中心明細數據，開展配電臺區(qū)電壓大數據挖掘工作。主要從公配臺區(qū)電壓異常監(jiān)測和治理入手，關聯(lián)負載、三相不平衡和功率因數等內容，通過進行數據分析，分析出各主要因素對異常電壓的影響強度及關聯(lián)關系，準確判定臺區(qū)電壓異常原因，并將結果直接呈現在GIS地圖上，幫助業(yè)務人員直觀定位電壓異常臺區(qū)和主要影響因素，有效解決臺區(qū)異動數據量大、分類甄別時間緊的難題，減輕巡查人員現場工作量，節(jié)約臺區(qū)運行維護的人力、物力和資金投入。據統(tǒng)計，該公司利用全業(yè)務數據中心，2017年監(jiān)測發(fā)現651個電壓異常臺區(qū)，應用大數據分析技術得出異動形成原因，經抽查核實300個臺區(qū)電壓異常原因，其原因與計算分析得出的原因相符率達到89.77%。

合理的輸配電成本是電網企業(yè)正常生產經營的重要保證，也是監(jiān)管部門未來核定公司輸配電價的重要基礎。為進一步優(yōu)化完善成本定額及輸配電成本結構，更好地適應未來改革發(fā)展需要，吉林電力開展了基于全業(yè)務數據中心的輸配電標準作業(yè)成本分析場景構建。該公司主要開發(fā)了變電、架空線路、電纜線路三類設備8個方面檢修成本定額分析功能，實時反映作業(yè)成本，促進企業(yè)精益化管理，優(yōu)化資源配置，最終通過輸配電標準作業(yè)電壓運行情況為戰(zhàn)略管理及決策提供支撐。

全業(yè)務統(tǒng)一數據中心的建立，使吉林電力與國家電網公司各項數據實現了有效對接，實現了“用數據管理企業(yè)、用信息驅動業(yè)務”的目標，實現了由“搬數據”向“搬計算”的轉變，推動業(yè)務創(chuàng)新，推進該公司信息化建設邁上新臺階，為全面建設具有卓越競爭力的世界一流能源互聯(lián)網企業(yè)提供有力的數據支撐。

原標題:向大數據要質效———吉林電力搭建全業(yè)務統(tǒng)一數據中心推進數據共享與業(yè)務融合