專利名稱：一種彩鈴數(shù)據(jù)自動分析處理方法和裝置的制作方法
技術(shù)領域：
本發(fā)明涉及彩鈴數(shù)據(jù)自動分析處理技術(shù)，具體涉及一種彩鈴系統(tǒng)內(nèi)部采用腳本定
時自動完成大數(shù)據(jù)量分析處理的技術(shù)。
背景技術(shù)：
彩鈴業(yè)務目前作為一個熱門的增值業(yè)務，隨著各種紛繁復雜的彩鈴業(yè)務的開展， 各地區(qū)彩鈴用戶的迅速膨脹，各地通訊運營商為了能及時準確的掌握本地區(qū)系統(tǒng)的運營狀 況，提出了各種數(shù)據(jù)統(tǒng)計的需求，例如對本系統(tǒng)用戶總量、當天用戶開通注銷數(shù)量、鈴音購 買數(shù)量、本系統(tǒng)所有鈴音統(tǒng)計，其中對一些重要的數(shù)據(jù)還提出每天需要以報表文件的形式 來提供給運營商。 如何能準確及時地完成這些統(tǒng)計并且自動生成文件報表，滿足運營商提出的各種 需求，而且隨著用戶數(shù)據(jù)量的急劇增長，智能網(wǎng)業(yè)務的核心模塊SCP(業(yè)務控制點)已經(jīng)承 載著巨大的負荷，如何能夠在保證SCP性能的情況下，又能及時完成各種彩鈴數(shù)據(jù)的自動 統(tǒng)計分析就成為一個待解決的關鍵技術(shù)?，F(xiàn)有技術(shù)和專利文獻中還缺少這方面的解決方案。

發(fā)明內(nèi)容
本發(fā)明要解決的主要技術(shù)問題是，提供一種彩鈴數(shù)據(jù)自動分析處理方法和裝置， 實現(xiàn)了彩鈴數(shù)據(jù)的自動導出和大數(shù)據(jù)量的分析和處理。 為解決上述技術(shù)問題，本發(fā)明提供一種彩鈴數(shù)據(jù)自動分析處理方法，包括以下處 理過程 在各業(yè)務控制點上配置需要導出的彩鈴數(shù)據(jù)參數(shù)； 業(yè)務控制點根據(jù)所述配置參數(shù)將對應的彩鈴數(shù)據(jù)導出，并打包成數(shù)據(jù)文件；
業(yè)務控制點將所述的打包數(shù)據(jù)文件上傳到統(tǒng)計服務器； 統(tǒng)計服務器導入所述的打包數(shù)據(jù)文件，并對所述的打包數(shù)據(jù)文件進行分析處理。
優(yōu)選的，對于運行在Li皿x或者imix操作系統(tǒng)環(huán)境的情況，所述業(yè)務控制點導出 彩鈴數(shù)據(jù)具體為通過系統(tǒng)的控制命令定時調(diào)用腳本的方式，將與所述配置參數(shù)對應的彩 鈴數(shù)據(jù)導出。 進一步的，所述的配置的彩鈴數(shù)據(jù)參數(shù)還包括導出的彩鈴數(shù)據(jù)的統(tǒng)計需求分類 參數(shù)；所述業(yè)務控制點將導出的彩鈴數(shù)據(jù)按照統(tǒng)計需求分類的不同打包多個數(shù)據(jù)文件。其 中所述的統(tǒng)計需求分類參數(shù)包括全表導出、增量導出、定期導出。 進一步的，所述統(tǒng)計服務器對打包的數(shù)據(jù)文件進行的分析處理包括在統(tǒng)計服務
器上根據(jù)統(tǒng)計需求的分類不同設置多個統(tǒng)計表，將各業(yè)務控制點上傳的數(shù)據(jù)文件按照對應
的統(tǒng)計需求分類導入所述統(tǒng)計表中，對所述各統(tǒng)計表中的信息進行統(tǒng)計分析。 本發(fā)明還提供了一種彩鈴數(shù)據(jù)自動分析處理裝置，包括智能網(wǎng)業(yè)務控制點，用于
配置需要導出的彩鈴數(shù)據(jù)參數(shù)，以及根據(jù)配置參數(shù)將對應的彩鈴數(shù)據(jù)導出，并打包成數(shù)據(jù)文件，并將其上傳到統(tǒng)計服務器；統(tǒng)計服務器，用于導入所述的打包數(shù)據(jù)文件，并對所述的 打包數(shù)據(jù)文件進行分析處理。 進一步的，所述業(yè)務控制點配置的彩鈴數(shù)據(jù)參數(shù)包括導出的彩鈴數(shù)據(jù)的統(tǒng)計需
求分類參數(shù)；所述業(yè)務控制點用于根據(jù)統(tǒng)計需求分類的不同將彩鈴數(shù)據(jù)打包多個數(shù)據(jù)文
件。其中所述的統(tǒng)計需求分類參數(shù)包括全表導出、增量導出、定期導出。 進一步的，所述的統(tǒng)計服務器還用于備份統(tǒng)計數(shù)據(jù)和向統(tǒng)計結(jié)果接收服務器發(fā)送
統(tǒng)計結(jié)果。 采用本發(fā)明，由于可以在各SCP上靈活配置參數(shù)，可以將需要彩鈴數(shù)據(jù)自動導出， 并上傳到統(tǒng)計服務器，由統(tǒng)計服務器對數(shù)據(jù)進行分析處理，這種方式實現(xiàn)了彩鈴數(shù)據(jù)的自 動統(tǒng)計分析，降低了 SCP的負荷，能夠很好的完成多SCP海量彩鈴數(shù)據(jù)的分析處理。此外， 本發(fā)明還通過設置彩鈴數(shù)據(jù)的統(tǒng)計需求分類參數(shù)，提高了彩鈴數(shù)據(jù)的導出和分析處理的效 率。對于Linux和unix操作系統(tǒng)的運行環(huán)境，本發(fā)明還通過控制命令定時調(diào)用腳本的方式 實現(xiàn)了不需要額外增加系統(tǒng)的成本就實現(xiàn)了彩鈴數(shù)據(jù)的自動定時導出機制。


圖1為本發(fā)明彩鈴數(shù)據(jù)自動分析處理裝置一種實施例的系統(tǒng)原理框圖；
圖2為本發(fā)明彩鈴數(shù)據(jù)自動分析處理方法一種實施例的數(shù)據(jù)導出處理流程圖；
圖3為本發(fā)明彩鈴數(shù)據(jù)自動分析處理方法一種實施例的統(tǒng)計服務器分析處理流 程圖。
具體實施例方式
下面通過具體實施方式
結(jié)合附圖對本發(fā)明作進一步詳細說明。
實施例一 請參考圖1的系統(tǒng)原理框圖，本實施例的裝置主要包括智能網(wǎng)業(yè)務控制點和統(tǒng) 計服務器。圖示中Web服務器查詢模塊向統(tǒng)計服務器發(fā)送統(tǒng)計查詢請求，統(tǒng)計服務器將查 詢結(jié)果發(fā)送到第三方ftp服務器中。系統(tǒng)中有多個智能網(wǎng)業(yè)務控制點，業(yè)務控制點內(nèi)設置 有業(yè)務數(shù)據(jù)庫、SCP數(shù)據(jù)導出腳本模塊和數(shù)據(jù)導出視圖文件腳本模塊。統(tǒng)計服務器中設置 有統(tǒng)計服務器數(shù)據(jù)庫、統(tǒng)計服務器腳本模塊和統(tǒng)計服務器視圖腳本模塊。智能網(wǎng)業(yè)務控制 點導出的彩鈴數(shù)據(jù)文件可以通過ftp的方式上傳到統(tǒng)計服務器中。 圖示中智能網(wǎng)業(yè)務控制點，用于配置需要導出的彩鈴數(shù)據(jù)參數(shù)，以及根據(jù)配置參 數(shù)將對應的彩鈴數(shù)據(jù)導出，并打包成數(shù)據(jù)文件，并將其上傳到統(tǒng)計服務器；統(tǒng)計服務器，用 于導入所述的打包數(shù)據(jù)文件，并對所述的打包數(shù)據(jù)文件進行分析處理。統(tǒng)計服務器還用于 備份統(tǒng)計數(shù)據(jù)和向統(tǒng)計結(jié)果接收服務器發(fā)送統(tǒng)計結(jié)果。
實施例二 參考圖2、3的處理流程，本實施例采用圖1的裝置完成彩鈴數(shù)據(jù)的自動分析處理。 其實施步驟如下 步驟21 :將數(shù)據(jù)庫視圖腳本和scp腳本以asc方式上傳到固定目錄下，并賦予執(zhí) 行權(quán)限，利用li皿x或unix的定時和任務功能，設置scp腳本運行的時間，腳本首先利用數(shù) 據(jù)庫命令調(diào)用執(zhí)行數(shù)據(jù)庫建立視圖腳本(例如利用crontab命令定時調(diào)用shell腳本)，將
4需要導出的數(shù)據(jù)表字段建立相應的視圖。 步驟22 :完成步驟21后，根據(jù)配置文件中配置導出需要完成統(tǒng)計的數(shù)據(jù)表。對于 導出的數(shù)據(jù)設置統(tǒng)計需求分類參數(shù)，本實施例中該參數(shù)設置為全表導出、增量導出、定期 導出，其中定期為每月月初。業(yè)務控制點將導出的彩鈴數(shù)據(jù)按照統(tǒng)計需求分類的不同打包 多個數(shù)據(jù)文件。即導出的文件名對全量數(shù)據(jù)用類型a-表名-scp模塊號.txt表示，對增量 數(shù)據(jù)導出文件名用類型b-表名-scp模塊號.txt表示，對只有月初導出的文件用類型c-表 名-scp模塊號.txt，這樣便于統(tǒng)計服務器導入數(shù)據(jù)時候根據(jù)文件名來區(qū)分進行不同的處 理。 步驟23 :導出腳本將臨時目錄下導出的文件打包并壓縮成一個文件，根據(jù)配置的 統(tǒng)計服務器的ftp信息將文件ftp至統(tǒng)計服務器，這樣scp上的導出腳本模塊的功能就完 成了。 步驟24 :統(tǒng)計服務器在系統(tǒng)配置的定時任務中定時運行，首先判斷在數(shù)據(jù)文件目 錄下是否存在當天需要導入統(tǒng)計的數(shù)據(jù)文件，如果不存在則結(jié)束腳本運行，如果存在則將 數(shù)據(jù)文件解壓縮到臨時目錄下，等待下一步文件的導入。 步驟25 :在將文件導入數(shù)據(jù)庫前，首先需要刪除需要導入表的索引，統(tǒng)計服務器 的數(shù)據(jù)結(jié)合了各個scp的數(shù)據(jù)，數(shù)據(jù)量大，如果不清理索引將嚴重影響導入數(shù)據(jù)的性能，并 對數(shù)據(jù)庫日志空間的占用也有極大的影響，因此提供了專門的清理索引腳本文件，統(tǒng)計腳 本利用數(shù)據(jù)庫工具執(zhí)行清理索引腳本文件，完成索引的清理。 步驟26 :完成上一步驟后，導入腳本將根據(jù)配置文件配置的導入數(shù)據(jù)表名，匹配 解壓縮后的文件名，將不同scp上的統(tǒng)一表的數(shù)據(jù)一并導入到統(tǒng)計服務器的相應的表，腳 本同樣根據(jù)配置的a類型全量數(shù)據(jù)處理時將先清空表，再將各scp的同一表導入統(tǒng)計服務 器的一個表中，b類型是增量數(shù)據(jù)所以導入前不需要清理原來表中數(shù)據(jù)，c類型表只有月初 導出，將會導入月表中。這樣完成各類型數(shù)據(jù)的導入。 步驟27 :完成數(shù)據(jù)導入后，一個重要的工作就是對統(tǒng)計服務器上的表建立索引，
同樣腳本利用數(shù)據(jù)庫工具執(zhí)行建立索引腳本文件，完成各個表的建立索引工作。 步驟28、29 :建立索引后，需求中的各種統(tǒng)計是通過存儲過程來完成的，需要執(zhí)行
的存儲過程也是由配置文件來決定，利用配置文件的好處是可擴展性及可控制性，可以任
意配置存儲過程的執(zhí)行先后順序，同樣存儲過程文件因為涉及到一些固定的變量在運行前
需要腳本替換的，所以存儲過程文件首先被腳本替換變量后，統(tǒng)計腳本再運行替換后的存
儲過程腳本進行編譯，再執(zhí)行相應的存儲過程完成最終的統(tǒng)計工作。 步驟30 :完成各需求的數(shù)據(jù)統(tǒng)計后，web頁面就可以訪問數(shù)據(jù)庫展現(xiàn)統(tǒng)計結(jié)果了 ， 對有些需求中需要導出報表的，腳本就可以直接根據(jù)統(tǒng)計的結(jié)果導出生成報表文件并ftp 到對方，這樣一個系統(tǒng)的統(tǒng)計過程就完成了。此外，還可以在統(tǒng)計服務器中通過統(tǒng)計腳本對 重要的統(tǒng)計數(shù)據(jù)進行備份，每天將統(tǒng)計出的重要數(shù)據(jù)導出文件壓縮打包保存，定時刪除過 期文件功能，詳細的執(zhí)行過程日志記錄功能，數(shù)據(jù)庫日志記錄功能等，便于運行時出現(xiàn)異常 情況定位和及時解決。 以上內(nèi)容是結(jié)合具體的實施方式對本發(fā)明所作的進一步詳細說明，不能認定本發(fā)
明的具體實施只局限于這些說明。對于本發(fā)明所屬技術(shù)領域的普通技術(shù)人員來說，在不脫 離本發(fā)明構(gòu)思的前提下，還可以做出若干簡單推演或替換，都應當視為屬于本發(fā)明的保護范圍。
權(quán)利要求
一種彩鈴數(shù)據(jù)自動分析處理方法，其特征在于，所述方法包括以下處理過程在各業(yè)務控制點上配置需要導出的彩鈴數(shù)據(jù)參數(shù)；業(yè)務控制點根據(jù)所述配置參數(shù)將對應的彩鈴數(shù)據(jù)導出，并打包成數(shù)據(jù)文件；業(yè)務控制點將所述的打包數(shù)據(jù)文件上傳到統(tǒng)計服務器；統(tǒng)計服務器導入所述的打包數(shù)據(jù)文件，并對所述的打包數(shù)據(jù)文件進行分析處理。
2. 根據(jù)權(quán)利要求1所述的方法，其特征在于，對于運行在Li皿x或者皿ix操作系統(tǒng)環(huán) 境的情況，所述業(yè)務控制點導出彩鈴數(shù)據(jù)具體為通過系統(tǒng)的控制命令定時調(diào)用腳本的方 式，將與所述配置參數(shù)對應的彩鈴數(shù)據(jù)導出。
3. 根據(jù)權(quán)利要求1或2所述的方法，其特征在于，所述的配置的彩鈴數(shù)據(jù)參數(shù)還包括 導出的彩鈴數(shù)據(jù)的統(tǒng)計需求分類參數(shù)；所述業(yè)務控制點將導出的彩鈴數(shù)據(jù)按照統(tǒng)計需求分 類的不同打包多個數(shù)據(jù)文件。
4. 根據(jù)權(quán)利要求3所述的方法，其特征在于，所述的統(tǒng)計需求分類參數(shù)包括全表導 出、增量導出、定期導出。
5. 根據(jù)權(quán)利要求4所述的方法，其特征在于，所述統(tǒng)計服務器對打包的數(shù)據(jù)文件進行 的分析處理包括在統(tǒng)計服務器上根據(jù)統(tǒng)計需求的分類不同設置多個統(tǒng)計表，將各業(yè)務控制點上傳的數(shù)據(jù)文件按照對應的統(tǒng)計需求分類導入所述統(tǒng)計表中，對所述各統(tǒng)計表中的信 息進行統(tǒng)計分析。
6. 根據(jù)權(quán)利要求5所述的方法，其特征在于，所述統(tǒng)計服務器完成分析處理后還包括 向統(tǒng)計結(jié)果接收服務器發(fā)送統(tǒng)計結(jié)果和在統(tǒng)計服務器中備份統(tǒng)計數(shù)據(jù)。
7. —種彩鈴數(shù)據(jù)自動分析處理裝置，其特征在于，包括智能網(wǎng)業(yè)務控制點，用于配置需要導出的彩鈴數(shù)據(jù)參數(shù)，以及根據(jù)配置參數(shù)將對應的 彩鈴數(shù)據(jù)導出，并打包成數(shù)據(jù)文件，并將其上傳到統(tǒng)計服務器；統(tǒng)計服務器，用于導入所述的打包數(shù)據(jù)文件，并對所述的打包數(shù)據(jù)文件進行分析處理。
8. 根據(jù)權(quán)利要求7所述的裝置，其特征在于，所述業(yè)務控制點配置的彩鈴數(shù)據(jù)參數(shù)包 括導出的彩鈴數(shù)據(jù)的統(tǒng)計需求分類參數(shù)；所述業(yè)務控制點用于根據(jù)統(tǒng)計需求分類的不同 將彩鈴數(shù)據(jù)打包多個數(shù)據(jù)文件。
9. 根據(jù)權(quán)利要求8所述的裝置，其特征在于，所述的統(tǒng)計需求分類參數(shù)包括全表導 出、增量導出、定期導出。
10. 根據(jù)權(quán)利要求7所述的裝置，其特征在于，所述的統(tǒng)計服務器還用于備份統(tǒng)計數(shù)據(jù) 和向統(tǒng)計結(jié)果接收服務器發(fā)送統(tǒng)計結(jié)果。
全文摘要
本發(fā)明公開了一種彩鈴數(shù)據(jù)自動分析處理方法和裝置，通過設置彩鈴數(shù)據(jù)統(tǒng)計服務器，并由各業(yè)務控制點根據(jù)設置的參數(shù)導出彩鈴數(shù)據(jù)，發(fā)送到統(tǒng)計服務器中完成彩鈴數(shù)據(jù)的自動分析處理。采用本發(fā)明，實現(xiàn)了彩鈴數(shù)據(jù)靈活的自動統(tǒng)計分析，降低了SCP的負荷，能夠很好的完成多SCP海量彩鈴數(shù)據(jù)的分析處理。此外，本發(fā)明還通過設置彩鈴數(shù)據(jù)的統(tǒng)計需求分類參數(shù)，提高了彩鈴數(shù)據(jù)的導出和分析處理的效率。對于linux和unix操作系統(tǒng)的運行環(huán)境，本發(fā)明還通過控制命令定時調(diào)用腳本的方式實現(xiàn)了不需要額外增加系統(tǒng)的成本就實現(xiàn)了彩鈴數(shù)據(jù)的自動定時導出機制。
文檔編號H04L29/08GK101697600SQ20091019059
公開日2010年4月21日 申請日期2009年9月27日 優(yōu)先權(quán)日2009年9月27日
發(fā)明者徐雙桑 申請人:中興通訊股份有限公司;