本發(fā)明涉及電力系統(tǒng)數(shù)據(jù)分析領域,特別是涉及電力自動化系統(tǒng)中的電網調度自動化的數(shù)據(jù)挖掘及分析技術。
背景技術:
隨著智能電網的高速發(fā)展,電網大數(shù)據(jù)時代已經來臨。電力大數(shù)據(jù)(也即電網大數(shù)據(jù))由結構化數(shù)據(jù)和非結構化構成,隨著智能電網建設和物聯(lián)網的應用,非結構化數(shù)據(jù)呈現(xiàn)出快速增長的勢頭,其數(shù)量將大大超過結構化數(shù)據(jù)。電力大數(shù)據(jù)的特性滿足大數(shù)據(jù)的五個特性,一是數(shù)據(jù)量大(Volume)、二是處理速度快(Velocity)、三是數(shù)據(jù)類型多(Variety)、四是價值大(Value)、五是精確性高(Veracity)。
電網大數(shù)據(jù)帶來數(shù)據(jù)挖掘及分析技術的困難。當前電網調度數(shù)據(jù)一般通過很多種不同的系統(tǒng)或方法來對數(shù)據(jù)進行挖掘及分析,由于每個系統(tǒng)的協(xié)議或標準不同,一般都需要事先根據(jù)每個系統(tǒng)的定義標準來定義數(shù)據(jù)結構,然后通過結構化數(shù)據(jù)進行挖掘及分析。結構化數(shù)據(jù),即行數(shù)據(jù),存儲在數(shù)據(jù)庫里,可以用二維表結構來邏輯表達實現(xiàn)的數(shù)據(jù)。
但是上述這種方式存在很多弊端,在后期也增加了系統(tǒng)和結構困難,增加了分析過程的復雜程度,適用性差,同時在挖掘及分析的過程中容易出錯,結構多難以實現(xiàn)全面維護,因此這種方式難以滿足日益發(fā)展的電網需求。
因此如何進一步提高電網系統(tǒng)的挖掘和分析速度及準確性一直為本領域技術人員所致力研究的方向。
技術實現(xiàn)要素:
本發(fā)明的目的在于提出電力自動化系統(tǒng)使用非結構化數(shù)據(jù)挖掘及分析方 法,可以提高數(shù)據(jù)挖掘及分析的靈活性,提高數(shù)據(jù)挖掘及分析效率,提高數(shù)據(jù)挖掘及分析的可靠性,減少數(shù)據(jù)挖掘及分析的成本。
為了實現(xiàn)以上技術效果,本發(fā)明提供了一種電力系統(tǒng)數(shù)據(jù)分析方法,主要包括如下步驟:
采集數(shù)據(jù)信息;
根據(jù)采集的數(shù)據(jù)信息,建立分析數(shù)據(jù)源;
通過非結構化的挖掘及分析方法來對所述分析數(shù)據(jù)源進行處理,得到挖掘及分析結果;
輸出挖掘及分析結果。
上述的電力系統(tǒng)數(shù)據(jù)分析方法,其中,所述數(shù)據(jù)信息為電力系統(tǒng)的數(shù)據(jù)信息。
上述的電力系統(tǒng)數(shù)據(jù)分析方法,其中,所述通過非結構化的挖掘及分析方法來對所述分析數(shù)據(jù)源進行處理包括:
對所述分析數(shù)據(jù)源進行挖掘;
篩選出符合需求的數(shù)據(jù)內容;
對篩選出的數(shù)據(jù)內容進行分析;
得出分析結果。
上述的電力系統(tǒng)數(shù)據(jù)分析方法,其中,對所述分析數(shù)據(jù)源進行挖掘具體為:通過預設的篩選規(guī)則來對所述分析數(shù)據(jù)源進行挖掘。
上述的電力系統(tǒng)數(shù)據(jù)分析方法,其中,所述輸出挖掘及分析結果具體為:輸出挖掘及分析結果至一個或多個用戶端。
上述的電力系統(tǒng)數(shù)據(jù)分析方法,其中,所述采集數(shù)據(jù)信息具體為:通過監(jiān)視控制系統(tǒng)和數(shù)據(jù)收集系統(tǒng)、能量管理系統(tǒng)、配電管理系統(tǒng)、電能量計量系統(tǒng)的任意一種或多種來采集數(shù)據(jù)信息。
同時本發(fā)明還提供了一種電力系統(tǒng)數(shù)據(jù)分析系統(tǒng),其中,包括:
采集模塊,用于采集數(shù)據(jù)信息;
存儲模塊,用于根據(jù)采集的數(shù)據(jù)信息,建立分析數(shù)據(jù)源;
處理模塊,用于通過非結構化的挖掘及分析方法來對所述分析數(shù)據(jù)源進行處理,得出挖掘及分析結果;
輸出模塊,用于輸出挖掘及分析結果。
上述的電力系統(tǒng)數(shù)據(jù)分析系統(tǒng),其中,所述通過非結構化的挖掘及分析方法來對所述分析數(shù)據(jù)源進行處理包括:
對所述分析數(shù)據(jù)源進行挖掘;
篩選出符合需求的數(shù)據(jù)內容;
對篩選出的數(shù)據(jù)內容進行分析;
得出分析結果。
上述的的電力系統(tǒng)數(shù)據(jù)分析系統(tǒng),其中,對所述分析數(shù)據(jù)源進行挖掘具體為:通過預設的篩選規(guī)則來對所述分析數(shù)據(jù)源進行挖掘。
上述的電力系統(tǒng)數(shù)據(jù)分析系統(tǒng),其中,所述采集數(shù)據(jù)信息具體為:通過監(jiān)視控制系統(tǒng)和數(shù)據(jù)收集系統(tǒng)、能量管理系統(tǒng)、配電管理系統(tǒng)、電能量計量系統(tǒng)的任意一種或多種來采集數(shù)據(jù)信息。本發(fā)明采用非結構化的處理方式來進行數(shù)據(jù)信息的挖掘及分析,能夠以統(tǒng)一的方式對不同子系統(tǒng)的數(shù)據(jù)進行分析,不需要過多的人工干預,可以提高數(shù)據(jù)挖掘及分析的靈活性,提高數(shù)據(jù)挖掘及分析效率,提高數(shù)據(jù)挖掘及分析的可靠性,減少數(shù)據(jù)挖掘及分析的成本。
附圖說明
通過閱讀參照以下附圖對非限制性實施例所作的詳細描述,本發(fā)明及其特征、外形和優(yōu)點將會變得更明顯。在全部附圖中相同的標記指示相同的部分。并未刻意按照比例繪制附圖,重點在于示出本發(fā)明的主旨。
圖1為本發(fā)明提供的一種電力系統(tǒng)數(shù)據(jù)分析方法的流程圖;
圖2為本發(fā)明提供的一種電力系統(tǒng)數(shù)據(jù)分析系統(tǒng)的組成圖。
具體實施方式
在下文的描述中,給出了大量具體的細節(jié)以便提供對本發(fā)明更為徹底的理解。然而,對于本領域技術人員而言顯而易見的是,本發(fā)明可以無需一個或多個這些細節(jié)而得以實施。在其他的例子中,為了避免與本發(fā)明發(fā)生混淆,對于本領域公知的一些技術特征未進行描述。
為了徹底理解本發(fā)明,將在下列的描述中提出詳細的步驟以及詳細的結構,以便闡釋本發(fā)明的技術方案。本發(fā)明的較佳實施例詳細描述如下,然而除了這些詳細描述外,本發(fā)明還可以具有其他實施例。
實施例一
本發(fā)明提供了一種電力系統(tǒng)數(shù)據(jù)分析方法,結合圖1所示,該方法主要包括如下步驟:
步驟S1、采集數(shù)據(jù)信息。
在一可選的實施方式中,采集的數(shù)據(jù)信息為電力系統(tǒng)的數(shù)據(jù)信息。例如可以通過基于監(jiān)視控制和數(shù)據(jù)收集系統(tǒng)(SCA-DA)、能量管理系統(tǒng)(EMS)、配電管理系統(tǒng)(DMS)、電能量計量系統(tǒng)(Metering System)的任意一種或多種來采集電力系統(tǒng)的數(shù)據(jù)信息。
步驟S2、根據(jù)采集的數(shù)據(jù)信息,建立分析數(shù)據(jù)源。
通過將采集的各種數(shù)據(jù)信息進行歸納、整合,進而形成用于分析的數(shù)據(jù)源。其中,所謂數(shù)據(jù)源(Data Source)是提供某種所需要數(shù)據(jù)的器件或原始媒體。
步驟S3、通過非結構化的挖掘及分析方法來對分析數(shù)據(jù)源進行處理,得到挖掘及分析結果。
其中,步驟S3具體可包括以下步驟:
對分析數(shù)據(jù)源進行挖掘;
篩選出符合需求的數(shù)據(jù)內容;
對篩選出的數(shù)據(jù)內容進行分析;
本發(fā)明首先對分析數(shù)據(jù)源進行篩選,選取出部分滿足用戶需求的數(shù)據(jù)信息來進行后續(xù)的分析,可有效地減小后續(xù)數(shù)據(jù)分析的壓力,并可以節(jié)省分析 時間并提高了分析的精確性。在一可選但非限制的實施方式中,上述對分析數(shù)據(jù)源進行挖掘具體可為:通過預設一篩選規(guī)則來對分析數(shù)據(jù)源進行挖掘,進而篩選出符合需求的數(shù)據(jù)內容。例如可以通過Splunk工具來篩選出符合需求的數(shù)據(jù)內容。其中,Splunk是機器數(shù)據(jù)的引擎,使用Splunk可收集、索引和利用所有應用程序、服務器和設備(物理、虛擬和云中)生成的快速移動型數(shù)據(jù),可以實現(xiàn)從一個位置搜索并分析所有實時和歷史數(shù)據(jù)。
區(qū)別于傳統(tǒng)技術,本實施例是通過非結構化的挖掘及分析方法來對分析數(shù)據(jù)源和數(shù)據(jù)內容進行處理,這能夠實現(xiàn)以統(tǒng)一的方式對不同子系統(tǒng)的數(shù)據(jù)進行分析,不需要過多的人工干預,可以提高數(shù)據(jù)挖掘及分析的靈活性,提高數(shù)據(jù)挖掘及分析效率,提高數(shù)據(jù)挖掘及分析的可靠性,減少數(shù)據(jù)挖掘及分析的成本。其中,所謂非結構化數(shù)據(jù)庫是指其字段長度可變,并且每個字段的記錄又可以由可重復或不可重復的子字段構成的數(shù)據(jù)庫。
步驟S4、輸出挖掘及分析結果。
采用非結構化的處理方式挖掘及分析之后,將篩選后的數(shù)據(jù)內容及相應的分析結果輸出至一個或者多個用戶端。
通過上述方法,把非結構化數(shù)據(jù)挖掘及分析方法應用到電力自動化系統(tǒng),本實施例按照用戶的需求根據(jù)Splunk(數(shù)據(jù)分析引擎)掃描系統(tǒng)源數(shù)據(jù),挖掘需要的數(shù)據(jù)并分析后輸出。本實施例可以適應不同的目標系統(tǒng)數(shù)據(jù),不需要知道目標系統(tǒng)數(shù)據(jù)結構,采用非結構化的處理方式挖掘及分析,能夠以統(tǒng)一的方式對不同子系統(tǒng)的數(shù)據(jù)進行分析,不需要過多的人工干預,可以提高數(shù)據(jù)挖掘及分析的靈活性,提高數(shù)據(jù)挖掘及分析效率,提高數(shù)據(jù)挖掘及分析的可靠性,減少數(shù)據(jù)挖掘及分析的成本。
實施例二
同時本發(fā)明還提供了一種電力系統(tǒng)數(shù)據(jù)分析系統(tǒng),參照圖2所示,該系統(tǒng)主要包括有:1、采集模塊1,用于采集數(shù)據(jù)信息;2、存儲模塊2,與采集模塊1連接,用于根據(jù)采集的數(shù)據(jù)信息,建立分析數(shù)據(jù)源;3、處理模塊3, 連接存儲模塊2,用于通過非結構化的挖掘及分析方法來對分析數(shù)據(jù)源進行處理,得出挖掘及分析結果;其中,通過非結構化的挖掘及分析方法來對分析數(shù)據(jù)源進行處理包括:對分析數(shù)據(jù)源進行挖掘;篩選出符合需求的數(shù)據(jù)內容;對篩選出的數(shù)據(jù)內容進行分析;得出分析結果;4、輸出模塊4,連接處理模塊3,用于輸出挖掘及對應的分析結果,其中,輸出的挖掘結果及對應的分析結果可輸出至一個或多個用戶端。
在本發(fā)明一可選但非限制的實施方式中,上述的采集模塊1采集的數(shù)據(jù)信息為電力系統(tǒng)的數(shù)據(jù)信息。
在本發(fā)明一可選但非限制的實施方式中,上述的采集模塊1基于監(jiān)視控制和數(shù)據(jù)收集系統(tǒng)、能量管理系統(tǒng)、配電管理系統(tǒng)、電能量計量系統(tǒng)的任意一種或多種來采集數(shù)據(jù)信息。
在本發(fā)明一可選但非限制的實施方式中,上述的處理模塊3包括有一錄入單元(圖中未示出),通過該錄入單元來將一預設的篩選規(guī)則錄入至處理模塊3,并藉由該篩選規(guī)則來對分析數(shù)據(jù)源進行挖掘,進而在眾多數(shù)據(jù)信息中篩選出符合需求的數(shù)據(jù)內容。
在本發(fā)明一可選但非限制的實施方式中,上述的處理模塊為Splunk工具。
綜上所述,由于本發(fā)明采用了如上技術方案,把非結構化數(shù)據(jù)挖掘及分析方法應用到電力自動化系統(tǒng),本發(fā)明系統(tǒng)按照用戶的需求根據(jù)Splunk(掃描系統(tǒng)源數(shù)據(jù),挖掘分析出需要的數(shù)據(jù)輸出。本發(fā)明系統(tǒng)可以適應不同的目標系統(tǒng)數(shù)據(jù),不需要知道目標系統(tǒng)數(shù)據(jù)結構,采用非結構化的處理方式挖掘及分析,能夠以統(tǒng)一的方式對不同子系統(tǒng)的數(shù)據(jù)進行分析,不需要過多的人工干預,可以提高數(shù)據(jù)挖掘及分析的靈活性,提高數(shù)據(jù)挖掘及分析效率,提高數(shù)據(jù)挖掘及分析的可靠性,減少數(shù)據(jù)挖掘及分析的成本。
以上對本發(fā)明的較佳實施例進行了描述。需要理解的是,本發(fā)明并不局限于上述特定實施方式,其中未盡詳細描述的設備和結構應該理解為用本領域中的普通方式予以實施;任何熟悉本領域的技術人員,在不脫離本發(fā)明技術方案范圍情況下,都可利用上述揭示的方法和技術內容對本發(fā)明技術方案 做出許多可能的變動和修飾,或修改為等同變化的等效實施例,這并不影響本發(fā)明的實質內容。因此,凡是未脫離本發(fā)明技術方案的內容,依據(jù)本發(fā)明的技術實質對以上實施例所做的任何簡單修改、等同變化及修飾,均仍屬于本發(fā)明技術方案保護的范圍內。