一種實(shí)時(shí)數(shù)據(jù)計(jì)算方法及系統(tǒng)的制作方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及數(shù)據(jù)處理技術(shù)領(lǐng)域，尤其涉及一種實(shí)時(shí)數(shù)據(jù)計(jì)算方法及系統(tǒng)。
【背景技術(shù)】
[0002]現(xiàn)有技術(shù)中，對于實(shí)時(shí)數(shù)據(jù)的計(jì)算通常采用比較分散的計(jì)算模型執(zhí)行。隨著互聯(lián)網(wǎng)的發(fā)展，尤其是電子商務(wù)的興起，網(wǎng)絡(luò)信息量例如在線的網(wǎng)絡(luò)支付交易量呈現(xiàn)了爆炸式的增長，采用傳統(tǒng)的實(shí)時(shí)數(shù)據(jù)計(jì)算模型不僅降低了實(shí)時(shí)數(shù)據(jù)的計(jì)算效率，延長計(jì)算時(shí)間，而且無法實(shí)現(xiàn)業(yè)務(wù)風(fēng)險(xiǎn)的統(tǒng)一識(shí)別、預(yù)防和補(bǔ)救，即在風(fēng)險(xiǎn)控制方面也存在較大缺陷，無法滿足互聯(lián)網(wǎng)風(fēng)險(xiǎn)控制領(lǐng)域的業(yè)務(wù)增長需求。

【發(fā)明內(nèi)容】

[0003]根據(jù)現(xiàn)有技術(shù)中存在的問題，現(xiàn)提供一種實(shí)時(shí)數(shù)據(jù)計(jì)算方法及系統(tǒng)的技術(shù)方案，旨在解決現(xiàn)有技術(shù)中存在的實(shí)時(shí)計(jì)算的處理效率較低，風(fēng)險(xiǎn)控制較差，無法滿足各種實(shí)時(shí)業(yè)務(wù)的需求的問題；
[0004]上述技術(shù)方案具體包括:
[0005]一種實(shí)時(shí)數(shù)據(jù)計(jì)算方法，其中，包括多個(gè)子控制單元；
[0006]所述實(shí)時(shí)數(shù)據(jù)計(jì)算方法具體包括:
[0007]步驟SI，獲取數(shù)據(jù)流，并將所述數(shù)據(jù)流拆分成多個(gè)子數(shù)據(jù)流，以分別送入相應(yīng)的所述子控制單元中保存；
[0008]步驟S2，根據(jù)保存于每個(gè)所述子控制單元中的所述子數(shù)據(jù)流，選擇預(yù)設(shè)的多個(gè)計(jì)算表達(dá)式中的一個(gè)或多個(gè)，以發(fā)送至相應(yīng)的所述子控制單元中，供所述子控制單元對所述子數(shù)據(jù)流進(jìn)行計(jì)算處理；
[0009]步驟S3，合并每個(gè)所述子控制單元經(jīng)過計(jì)算得到的子計(jì)算結(jié)果以得到最終的計(jì)算結(jié)果并輸出；
[0010]所述子控制單元之間實(shí)現(xiàn)并行計(jì)算。
[0011]優(yōu)選的，該實(shí)時(shí)數(shù)據(jù)計(jì)算方法，其中，預(yù)設(shè)的所述計(jì)算表達(dá)式中包括:第一類表達(dá)式，和/或第二類表達(dá)式，和/或第三類表達(dá)式。
[0012]優(yōu)選的，該實(shí)時(shí)數(shù)據(jù)計(jì)算方法，其中，一個(gè)所述第二類計(jì)算表達(dá)式由多個(gè)所述第一類計(jì)算表達(dá)式和/或多個(gè)所述第二類計(jì)算表達(dá)式組成；
[0013]所述第三類計(jì)算表達(dá)式用于對根據(jù)所述第一類計(jì)算表達(dá)式和/或所述第二類計(jì)算表達(dá)式處理得到的計(jì)算結(jié)果進(jìn)行匯總計(jì)算。
[0014]優(yōu)選的，該實(shí)時(shí)數(shù)據(jù)計(jì)算方法，其中，所述步驟SI中，將所述數(shù)據(jù)流拆分成多個(gè)所述子數(shù)據(jù)流并分別送入相應(yīng)的所述子控制單元中保存，同時(shí)獲取對應(yīng)每個(gè)所述子數(shù)據(jù)流的存儲(chǔ)地址，根據(jù)所述存儲(chǔ)地址定位所述步驟S2中分發(fā)的所述計(jì)算表達(dá)式對應(yīng)的所述子控制單元。
[0015]優(yōu)選的，該實(shí)時(shí)數(shù)據(jù)計(jì)算方法，其中，所述步驟SI中，根據(jù)預(yù)設(shè)的多個(gè)所述計(jì)算表達(dá)式對獲取的所有所述存儲(chǔ)地址進(jìn)行過濾，以濾除不參與計(jì)算的數(shù)據(jù)對應(yīng)的所述存儲(chǔ)地址，輸出經(jīng)過過濾的所有所述存儲(chǔ)地址。
[0016]優(yōu)選的，該實(shí)時(shí)數(shù)據(jù)計(jì)算方法，其中，所述步驟S2中，監(jiān)控每個(gè)所述子控制單元的計(jì)算過程并獲得相應(yīng)的監(jiān)控結(jié)果；
[0017]根據(jù)所述監(jiān)控結(jié)果判斷相應(yīng)的所述子控制單元中的一次計(jì)算是否超時(shí)，并在超時(shí)時(shí)中斷相應(yīng)的所述子控制單元的計(jì)算過程，并記錄相應(yīng)的超時(shí)狀態(tài)信息。
[0018]優(yōu)選的，該實(shí)時(shí)數(shù)據(jù)計(jì)算方法，其中，所述監(jiān)控結(jié)果包括:
[0019]所述子控制單元執(zhí)行計(jì)算過程中的執(zhí)行狀態(tài)信息；和/或
[0020]所述子控制單元執(zhí)行計(jì)算過程中產(chǎn)生的異常狀態(tài)信息；和/或
[0021]所述子控制單元執(zhí)行計(jì)算過程中產(chǎn)生的中間結(jié)果信息。
[0022]優(yōu)選的，該實(shí)時(shí)數(shù)據(jù)計(jì)算方法，其中，每個(gè)所述子控制單元將計(jì)算結(jié)果暫存于內(nèi)存中。
[0023]一種實(shí)時(shí)數(shù)據(jù)計(jì)算系統(tǒng)，其中，包括:
[0024]數(shù)據(jù)控制單元，采用分布式連接方式分別連接多個(gè)子控制單元；
[0025]所述數(shù)據(jù)控制單元按照預(yù)設(shè)的分組條件，將接收得到的數(shù)據(jù)流劃分成多組相應(yīng)的子數(shù)據(jù)流，并將每組所述子數(shù)據(jù)流發(fā)送至對應(yīng)的一個(gè)所述子控制單元中保存；
[0026]計(jì)算控制單元，分別連接每個(gè)所述子控制單元，以及所述數(shù)據(jù)控制單元；
[0027]所述計(jì)算控制單元分別根據(jù)每個(gè)所述子控制單元中保存的所述子數(shù)據(jù)流，選擇預(yù)設(shè)的多個(gè)計(jì)算表達(dá)式中的一個(gè)或多個(gè)，以分別發(fā)送至對應(yīng)的所述子控制單元中；
[0028]每個(gè)所述子控制單元根據(jù)接收得到的所述子數(shù)據(jù)流，以及所述計(jì)算表達(dá)式，計(jì)算得到相應(yīng)的子計(jì)算結(jié)果，所述子控制單元之間實(shí)現(xiàn)并行計(jì)算；
[0029]所述計(jì)算控制單元接收并合并所有所述子計(jì)算結(jié)果，以形成最終的計(jì)算結(jié)果，并返回至所述數(shù)據(jù)控制單元；
[0030]所述數(shù)據(jù)控制單元輸出所述計(jì)算結(jié)果，以完成對所述數(shù)據(jù)流的一次計(jì)算。
[0031]優(yōu)選的，該實(shí)時(shí)數(shù)據(jù)計(jì)算系統(tǒng)，其中，預(yù)設(shè)的所述計(jì)算表達(dá)式中包括:第一類表達(dá)式，和/或第二類表達(dá)式，和/或第三類表達(dá)式；
[0032]每個(gè)所述子控制單元中包括多個(gè)分別對應(yīng)執(zhí)行每類所述計(jì)算表達(dá)式的子計(jì)算模塊；
[0033]每個(gè)所述子控制單元中還包括:
[0034]控制模塊，分別連接每個(gè)所述子計(jì)算模塊；
[0035]所述控制模塊用于根據(jù)所述計(jì)算控制單元發(fā)送的不同類別的所述計(jì)算表達(dá)式，啟動(dòng)相應(yīng)的所述子計(jì)算模塊；
[0036]被啟動(dòng)的所述子計(jì)算模塊采用相應(yīng)類別的所述計(jì)算表達(dá)式，對相應(yīng)保存的所述子數(shù)據(jù)流進(jìn)行計(jì)算處理。
[0037]優(yōu)選的，該實(shí)時(shí)數(shù)據(jù)計(jì)算系統(tǒng)，其中，
[0038]一個(gè)所述第二類計(jì)算表達(dá)式由多個(gè)所述第一類計(jì)算表達(dá)式和/或多個(gè)所述第二類計(jì)算表達(dá)式組成；
[0039]所述第三類計(jì)算表達(dá)式用于對根據(jù)所述第一類計(jì)算表達(dá)式和/或所述第二類計(jì)算表達(dá)式處理得到的計(jì)算結(jié)果進(jìn)行匯總計(jì)算。
[0040]優(yōu)選的，該實(shí)時(shí)數(shù)據(jù)計(jì)算系統(tǒng)，其中，所述數(shù)據(jù)控制單元中包括:
[0041]數(shù)據(jù)分發(fā)模塊，用于向不同的所述子控制單元分發(fā)相應(yīng)的所述子數(shù)據(jù)流；
[0042]地址獲取模塊，用于獲取每個(gè)被分發(fā)的所述子數(shù)據(jù)流的存儲(chǔ)地址；
[0043]所述數(shù)據(jù)控制單元將所有所述存儲(chǔ)地址發(fā)送至所述計(jì)算控制單元；
[0044]所述計(jì)算控制單元根據(jù)所述存儲(chǔ)地址確定相應(yīng)的所述子控制單元，并分發(fā)相應(yīng)的所述計(jì)算表達(dá)式。
[0045]優(yōu)選的，該實(shí)時(shí)數(shù)據(jù)計(jì)算系統(tǒng)，其中，所述數(shù)據(jù)控制單元中包括:
[0046]過濾模塊，連接所述地址獲取模塊，用于根據(jù)所述計(jì)算控制單元中預(yù)設(shè)的多個(gè)所述計(jì)算表達(dá)式濾除不參加計(jì)算的數(shù)據(jù)對應(yīng)的存儲(chǔ)地址；
[0047]所述數(shù)據(jù)控制單元將經(jīng)過過濾的所有所述存儲(chǔ)地址發(fā)送至所述計(jì)算控制單元。
[0048]優(yōu)選的，該實(shí)時(shí)數(shù)據(jù)計(jì)算系統(tǒng)，其中，所述計(jì)算控制單元中包括:
[0049]監(jiān)控模塊，用于監(jiān)控每個(gè)所述子控制單元的計(jì)算過程，并獲取相應(yīng)的監(jiān)控結(jié)果；
[0050]超時(shí)計(jì)算模塊，連接所述監(jiān)控模塊，用于根據(jù)所述監(jiān)控結(jié)果判斷相應(yīng)的所述子控制單元中的一次計(jì)算是否超時(shí)，并在超時(shí)時(shí)中斷相應(yīng)的所述子控制單元的計(jì)算過程，并記錄相應(yīng)的超時(shí)狀態(tài)信息。
[0051]優(yōu)選的，該實(shí)時(shí)數(shù)據(jù)計(jì)算系統(tǒng)，其中，還包括一內(nèi)存存儲(chǔ)單元，分別連接每個(gè)所述子