專利名稱：一種基于云服務(wù)的數(shù)據(jù)處理方案的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及數(shù)據(jù)處理領(lǐng)域，特別是涉及一種基于云服務(wù)的數(shù)據(jù)處理方案。
背景技術(shù)：
云服務(wù)的核心思想是將大量用網(wǎng)絡(luò)連接的計(jì)算資源統(tǒng)一管理和調(diào)度，構(gòu)成一個(gè)資源池向用戶按需服務(wù)。狹義的云服務(wù)被定義為“提供資源的網(wǎng)絡(luò)”，云中的資源在使用者看來是可以無限擴(kuò)展的，并且可以隨時(shí)獲取。廣義的云服務(wù)是一些可以自我維護(hù)和管理的虛擬資源，云服務(wù)將所有的資源集中起來，并由軟件實(shí)現(xiàn)自動(dòng)管理，無需人為參與。云服務(wù)的一個(gè)核心理念就是通過不斷提高“云”的處理能力，進(jìn)而減少用戶終端的處理負(fù)擔(dān)，最終使用戶終端簡化成一個(gè)單純的輸入輸出設(shè)備，并能按需享受“云”的強(qiáng)大計(jì)算處理能力！數(shù)據(jù)處理領(lǐng)域(Data Processing Domain, DPD)是計(jì)算機(jī)應(yīng)用的一個(gè)重要領(lǐng)域，一種基于云服務(wù)的數(shù)據(jù)處理系統(tǒng)，其主要特點(diǎn)和要求包括高精確性、實(shí)時(shí)性、可信性。隨著被處理數(shù)據(jù)的復(fù)雜程度越來越高，需要準(zhǔn)確度更高、可信度更好的數(shù)據(jù)處理系統(tǒng)。

發(fā)明內(nèi)容
本發(fā)明所要解決的技術(shù)問題是提供一種基于云服務(wù)的數(shù)據(jù)處理方案，用以對數(shù)據(jù)進(jìn)行抽取、轉(zhuǎn)換、分析和展示處理，對數(shù)據(jù)的處理過程由構(gòu)件中的可視化的模板指引用戶操作，同時(shí)將數(shù)據(jù)永久地保存在云服務(wù)器。為了解決上述問題，本發(fā)明公開了一種基于云服務(wù)的數(shù)據(jù)處理方案，所述方法包括用戶在云服務(wù)器端注冊成為云服務(wù)器客戶；云服務(wù)器為各用戶分配處理空間；用戶選擇具有可視化模板的抽取構(gòu)件；用戶將本地?cái)?shù)據(jù)上傳到云服務(wù)器；云端對數(shù)據(jù)進(jìn)行處理，包括對數(shù)據(jù)進(jìn)行抽取、轉(zhuǎn)換、分析和展示操作；數(shù)據(jù)處理結(jié)果保存在云服務(wù)器。優(yōu)選的，所述對數(shù)據(jù)的處理過程由構(gòu)件中的可視化模板指引用戶完成，該可視化模板的類型與用戶上傳的數(shù)據(jù)類型相匹配。優(yōu)選的，所述云服務(wù)器為各用戶分配的處理空間剩余不足時(shí)，云端自動(dòng)為該用戶分配處理空間。優(yōu)選的，所述對數(shù)據(jù)的抽取由用戶新建相同數(shù)據(jù)，移除導(dǎo)入數(shù)據(jù)中不需要的數(shù)據(jù)。優(yōu)選的，所述對數(shù)據(jù)的轉(zhuǎn)換由云服務(wù)器自動(dòng)對數(shù)據(jù)進(jìn)行清洗、加載選項(xiàng)，并建立索引。優(yōu)選的，所述上傳到云服務(wù)器中的數(shù)據(jù)會(huì)安全永久地存儲(chǔ)在用戶的個(gè)人空間內(nèi)。優(yōu)選的，用戶能直接查看并導(dǎo)出儲(chǔ)存在云端的數(shù)據(jù)信息。所述裝置包括
注冊模塊，用于完成用戶在云服務(wù)器端的注冊和空間分配；選擇模塊，用于選擇具有可視化模板的抽取構(gòu)件；上傳模塊，用于完成用戶將數(shù)據(jù)上傳到云服務(wù)器；數(shù)據(jù)處理模塊，用于完成對數(shù)據(jù)的處理，包括對數(shù)據(jù)的抽取、轉(zhuǎn)換、分析和展示；儲(chǔ)存模塊，用于完成數(shù)據(jù)在云端的儲(chǔ)存；導(dǎo)出模塊，用于完成將數(shù)據(jù)導(dǎo)出到用戶本地。優(yōu)選的，所述數(shù)據(jù)處理模塊，完成數(shù)據(jù)抽取之后，將不同數(shù)據(jù)源的數(shù)據(jù)統(tǒng)一化之后集成放入數(shù)據(jù)倉庫。優(yōu)選的，所述數(shù)據(jù)處理模塊中對數(shù)據(jù)的處理過程由構(gòu)件中的可視化模板指引用戶完成，該可視化模板的類型與用戶上傳的數(shù)據(jù)類型相匹配。與現(xiàn)有技術(shù)相比，本發(fā)明具有以下優(yōu)點(diǎn)本發(fā)明中，用戶導(dǎo)入云服務(wù)器中的數(shù)據(jù)會(huì)在云服務(wù)器上安全永久地保存；云端系統(tǒng)能對用戶數(shù)據(jù)進(jìn)行抽取、轉(zhuǎn)換、分析和展示處理，處理過程由構(gòu)件中的可視化的模板指引用戶完成，該可視化模板類型與用戶上傳數(shù)據(jù)類型相匹配；用戶能隨時(shí)查看保存在云端的數(shù)據(jù)并下載到本地。


圖1是本發(fā)明實(shí)施例一所述的一種基于云服務(wù)的數(shù)據(jù)處理流程圖；圖2是本發(fā)明實(shí)施例一所述的一種儲(chǔ)存空間自動(dòng)擴(kuò)展的示意圖；圖3是本發(fā)明實(shí)施例一所述的數(shù)據(jù)處理領(lǐng)域的模型圖；圖4是本發(fā)明實(shí)施例二所述的一種基于云服務(wù)的數(shù)據(jù)處理裝置的結(jié)構(gòu)圖。
具體實(shí)施例方式為使本發(fā)明的上述目的、特征和優(yōu)點(diǎn)能夠更加明顯易懂，下面結(jié)合附圖和具體實(shí)施方式
對本發(fā)明作進(jìn)一步詳細(xì)的說明。參照圖1，示出了本發(fā)明的一種基于云服務(wù)的數(shù)據(jù)處理方案的流程圖，所述方法具體包括步驟S101，用戶在云服務(wù)器端注冊成為用戶；優(yōu)選的，所述方法還包括用戶注冊時(shí)，系統(tǒng)會(huì)為用戶自動(dòng)創(chuàng)建一個(gè)系統(tǒng)郵箱，用于系統(tǒng)向用戶發(fā)送消息。在實(shí)際應(yīng)用中，用戶首先會(huì)在云服務(wù)器端進(jìn)行注冊，同時(shí)獲得一個(gè)自己的站內(nèi)郵箱，用來接收云服務(wù)器發(fā)送的信息。步驟S102，云端為用戶分配處理空間；在用戶注冊為云服務(wù)器的客戶后，云服務(wù)器端會(huì)自動(dòng)為每個(gè)用戶分配一個(gè)數(shù)據(jù)處理空間。優(yōu)選的，用戶空間的所有數(shù)據(jù)信息在云服務(wù)器上安全永久的保存。更為優(yōu)選的，所述云服務(wù)器上客戶的空間為自動(dòng)擴(kuò)展型。云端服務(wù)器會(huì)將用戶的所有數(shù)據(jù)資料安全永久地保存在云端服務(wù)器，用戶在云端的空間容量是可自動(dòng)擴(kuò)展的，當(dāng)用戶的數(shù)據(jù)量接近當(dāng)前容量上限時(shí)，系統(tǒng)會(huì)自動(dòng)為該用戶擴(kuò)展容量，這樣就使儲(chǔ)存資源不會(huì)因大量空閑而浪費(fèi)，用戶也不用擔(dān)心因空間容量不足，數(shù)據(jù)無法上傳或者保存。參照圖2，示出了一種空間容量自動(dòng)擴(kuò)展的示意圖，用戶的所有數(shù)據(jù)資料保存在云端服務(wù)器，用戶注冊后，云端會(huì)自動(dòng)為用戶分配一定大小的儲(chǔ)存空間(假設(shè)為300M)，當(dāng)用戶上傳數(shù)據(jù)時(shí)，如果剩余可用空間不足(假設(shè)不足10M)，云端服務(wù)器會(huì)自動(dòng)再為該用戶分配儲(chǔ)存空間(假設(shè)再分配300M)，然后用戶再重新上傳數(shù)據(jù)；如果用戶的可用空間充足，云端服務(wù)器就會(huì)將用戶上傳的數(shù)據(jù)進(jìn)行處理，并儲(chǔ)存在云端。這樣就既不會(huì)因?yàn)榇罅靠臻g閑置而浪費(fèi)儲(chǔ)存資源，用戶空間又不會(huì)因?yàn)槌^儲(chǔ)存容量而無法上傳或者保存處理數(shù)據(jù)。步驟S103，用戶選擇具有可視化模板的抽取構(gòu)件；用戶選擇的抽取構(gòu)件中含有與要上傳數(shù)據(jù)類型相匹配的可視化模板，該可視化模板用來指引用戶完成對數(shù)據(jù)處理的操作。步驟S104，用戶將本地?cái)?shù)據(jù)上傳到云端服務(wù)器；優(yōu)選的，導(dǎo)入云服務(wù)器中的數(shù)據(jù)資料會(huì)存儲(chǔ)在用戶個(gè)人的空間內(nèi)。用戶將本地?cái)?shù)據(jù)上傳到云服務(wù)器后，云端會(huì)自動(dòng)將數(shù)據(jù)保存到用戶個(gè)人的空間內(nèi)，云端對數(shù)據(jù)的抽取、轉(zhuǎn)換、分析和展示操作，都不會(huì)改變用戶的原始數(shù)據(jù)資料，所有對數(shù)據(jù)的處理，都基于儲(chǔ)存在云端空間中的數(shù)據(jù)。步驟S105，云服務(wù)器對數(shù)據(jù)進(jìn)行處理；參照圖3，示出了一種數(shù)據(jù)處理領(lǐng)域的模型圖，當(dāng)數(shù)據(jù)上傳到用戶云端空間后，云服務(wù)器便可以根據(jù)用戶的需求對數(shù)據(jù)進(jìn)行抽取、轉(zhuǎn)換、分析和展示處理。數(shù)據(jù)抽取的目的是在異構(gòu)數(shù)據(jù)源之間進(jìn)行有價(jià)值的數(shù)據(jù)的導(dǎo)入和導(dǎo)出。對于一個(gè)數(shù)據(jù)處理的軟件系統(tǒng)來說，數(shù)據(jù)源可以是來自外部或者內(nèi)部的結(jié)構(gòu)化的數(shù)據(jù)，也有可能是電子文檔、網(wǎng)頁之類的非結(jié)構(gòu)化的數(shù)據(jù)，甚至可能是云計(jì)算環(huán)境下的分布式數(shù)據(jù)。抽取到這些數(shù)據(jù)之后，必須將不同數(shù)據(jù)源的數(shù)據(jù)統(tǒng)一化之后集成進(jìn)入數(shù)據(jù)倉庫， 這個(gè)過程就叫做數(shù)據(jù)轉(zhuǎn)換。數(shù)據(jù)轉(zhuǎn)換的關(guān)鍵在于將在不同的數(shù)據(jù)源中識(shí)別數(shù)據(jù)的意義，并將各種數(shù)據(jù)統(tǒng)一化。數(shù)據(jù)轉(zhuǎn)換的過程包括清洗、轉(zhuǎn)換、加載和索引。抽取到的數(shù)據(jù)經(jīng)過數(shù)據(jù)轉(zhuǎn)換后，就可以保存到數(shù)據(jù)倉庫中。數(shù)據(jù)倉庫中保存了采集好的數(shù)據(jù)，就可以進(jìn)行數(shù)據(jù)分析，數(shù)據(jù)分析過程就是通過數(shù)學(xué)計(jì)算、統(tǒng)計(jì)、數(shù)據(jù)挖掘各種分析算法，從數(shù)據(jù)倉庫中獲得業(yè)務(wù)需要的信息。數(shù)據(jù)分析是整個(gè)數(shù)據(jù)處理的核心，也是最復(fù)雜的部分，在不同的應(yīng)用領(lǐng)域中，都有專門的數(shù)據(jù)分析方法和指標(biāo)，在本方案中，更關(guān)注準(zhǔn)確性較強(qiáng)的數(shù)據(jù)分析方法。數(shù)據(jù)處理的最后一個(gè)階段是數(shù)據(jù)展示，這個(gè)過程將數(shù)據(jù)分析得到的信息，通過報(bào)表、圖片、數(shù)據(jù)文件等方式展現(xiàn)給決策人員。優(yōu)選的，這種對數(shù)據(jù)的處理過程會(huì)由所選構(gòu)件中的可視化的模板指引用戶完成操作，該構(gòu)件中的可視化的模板類型與用戶上傳數(shù)據(jù)的類型相匹配。步驟S106，數(shù)據(jù)的安全永久儲(chǔ)存。經(jīng)過處理后的數(shù)據(jù)以及空間內(nèi)的其他數(shù)據(jù)，都會(huì)被永久保存在安全性很高的云端服務(wù)器。優(yōu)選的，用戶可以隨時(shí)查看數(shù)據(jù)信息。優(yōu)選的，用戶可以下載云端數(shù)據(jù)到本地。
在云端服務(wù)器儲(chǔ)存數(shù)據(jù)，有數(shù)據(jù)安全可靠、數(shù)據(jù)遠(yuǎn)程存儲(chǔ)的特點(diǎn)，保證了數(shù)據(jù)的長久安全存儲(chǔ)，提高了數(shù)據(jù)的安全性，數(shù)據(jù)及其統(tǒng)計(jì)分析的結(jié)果都將長期保存。參照圖4，示出了本發(fā)明的一種基于云服務(wù)的數(shù)據(jù)處理裝置的結(jié)構(gòu)圖，所述裝置包括注冊模塊，用于完成用戶在云服務(wù)器端的注冊和空間分配；選擇模塊，用于選擇具有可視化模板的抽取構(gòu)件；上傳模塊，用于完成用戶將數(shù)據(jù)上傳到云服務(wù)器；數(shù)據(jù)處理模塊，用于完成數(shù)據(jù)的處理，其中包括對數(shù)據(jù)的抽取、轉(zhuǎn)換、分析和展示；存儲(chǔ)模塊，用于完成數(shù)據(jù)在云端的儲(chǔ)存；導(dǎo)出模塊，用于完成將數(shù)據(jù)導(dǎo)出到用戶本地。優(yōu)選的，所述裝置還包括數(shù)據(jù)處理模塊中完成數(shù)據(jù)抽取之后，將不同數(shù)據(jù)源的數(shù)據(jù)統(tǒng)一化之后集成放入數(shù)據(jù)倉庫。優(yōu)選的，對數(shù)據(jù)的處理過程，由所選構(gòu)件中的可視化的模板指引用戶完成，該構(gòu)件中的可視化模板類型與用戶上傳數(shù)據(jù)的類型相匹配。導(dǎo)入數(shù)據(jù)時(shí)，用戶選擇導(dǎo)入類型，即選擇相應(yīng)的抽取構(gòu)件，連接至相應(yīng)的可視化模板，提示上傳本地源數(shù)據(jù)。用戶選擇需要上傳的數(shù)據(jù)，提交后，進(jìn)入可視化模板的數(shù)據(jù)抽取過程，現(xiàn)有導(dǎo)入數(shù)據(jù)中出現(xiàn)上傳數(shù)據(jù)后說明本地?cái)?shù)據(jù)已經(jīng)導(dǎo)入并讀取出來，然后新建一個(gè)與上傳數(shù)據(jù)類型相同的數(shù)據(jù)，在名稱處輸入新建數(shù)據(jù)的名稱，選擇要操作的工作薄，即用戶上傳到云服務(wù)器的數(shù)據(jù)，選中希望移除的內(nèi)容，點(diǎn)擊移除按鈕，提交后即可完成數(shù)據(jù)的抽取過程。導(dǎo)出新建數(shù)據(jù)，云服務(wù)器自動(dòng)完成對數(shù)據(jù)的轉(zhuǎn)換處理，加載創(chuàng)建時(shí)間、最后修改時(shí)間、記錄所有者、最后修改者以及對數(shù)據(jù)進(jìn)行的查看、刪除、修改等項(xiàng)目，并建立索引。數(shù)據(jù)轉(zhuǎn)換后，對數(shù)據(jù)進(jìn)行分析，選擇新建分析，進(jìn)入后新建一個(gè)視圖，在名稱中輸入視圖名稱，在所有字段中選擇要進(jìn)行分析的字段，選擇字段規(guī)則，完成對數(shù)據(jù)的分析。數(shù)據(jù)分析后對分析結(jié)果進(jìn)行展示，點(diǎn)擊新建展示，選擇展示類型，設(shè)置展示名稱、 統(tǒng)計(jì)方式、圖表類型等參數(shù)，對分析結(jié)果進(jìn)行直觀地展示。本說明書中的各個(gè)實(shí)施例均采用遞進(jìn)的方式描述，每個(gè)實(shí)施例重點(diǎn)說明的都是與其他實(shí)施例的不同之處，各個(gè)實(shí)施例之間相同相似的部分互相參見即可。對于裝置實(shí)施例而言，由于其與方法實(shí)施例基本相似，所以描述的比較簡單，相關(guān)之處參見方法實(shí)施例的部分說明即可。以上對本發(fā)明所提供的一種基于云服務(wù)的數(shù)據(jù)處理方案和裝置進(jìn)行了詳細(xì)介紹， 本文中應(yīng)用了具體個(gè)例對本發(fā)明的原理及實(shí)施方式進(jìn)行了闡述，以上實(shí)施例的說明只是用于幫助理解本發(fā)明的方法及其核心思想；同時(shí)，對于本領(lǐng)域的一般技術(shù)人員，依據(jù)本發(fā)明的思想，在具體實(shí)施方式
及應(yīng)用范圍上均會(huì)有改變之處，綜上所述，本說明書內(nèi)容不應(yīng)理解為對本發(fā)明的限制。
權(quán)利要求
1.一種基于云服務(wù)的數(shù)據(jù)處理方案，其特征在于，所述方法包括 用戶在云服務(wù)器端注冊成為云服務(wù)器客戶；云服務(wù)器為各用戶分配處理空間； 用戶選擇具有可視化模板的抽取構(gòu)件； 用戶將本地?cái)?shù)據(jù)上傳到云服務(wù)器；云端對數(shù)據(jù)進(jìn)行處理，包括對數(shù)據(jù)進(jìn)行抽取、轉(zhuǎn)換、分析和展示操作； 數(shù)據(jù)處理結(jié)果保存在云服務(wù)器。
2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對數(shù)據(jù)的處理過程由構(gòu)件中的可視化模板指引用戶完成，該可視化模板的類型與用戶上傳的數(shù)據(jù)類型相匹配。
3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述云服務(wù)器為各用戶分配的處理空間剩余不足時(shí)，云端自動(dòng)為該用戶分配處理空間。
4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對數(shù)據(jù)的抽取由用戶新建相同數(shù)據(jù)， 移除導(dǎo)入數(shù)據(jù)中不需要的數(shù)據(jù)。
5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對數(shù)據(jù)的轉(zhuǎn)換由云服務(wù)器自動(dòng)對數(shù)據(jù)進(jìn)行清洗、加載選項(xiàng)，并建立索引。
6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述上傳到云服務(wù)器中的數(shù)據(jù)會(huì)安全永久地存儲(chǔ)在用戶的個(gè)人空間內(nèi)。
7.根據(jù)權(quán)利要求1所述的方法，其特征在于，用戶能直接查看并導(dǎo)出儲(chǔ)存在云端的數(shù)據(jù)信息。
8.一種基于云服務(wù)的數(shù)據(jù)處理方案，其特征在于，所述裝置包括 注冊模塊，用于完成用戶在云服務(wù)器端的注冊和空間分配； 選擇模塊，用于選擇具有可視化模板的抽取構(gòu)件；上傳模塊，用于完成用戶將數(shù)據(jù)上傳到云服務(wù)器；數(shù)據(jù)處理模塊，用于完成對數(shù)據(jù)的處理，包括對數(shù)據(jù)的抽取、轉(zhuǎn)換、分析和展示； 儲(chǔ)存模塊，用于完成數(shù)據(jù)在云端的儲(chǔ)存； 導(dǎo)出模塊，用于完成將數(shù)據(jù)導(dǎo)出到用戶本地。
9.根據(jù)權(quán)利要求8所述的裝置，其特征在于，所述數(shù)據(jù)處理模塊，完成數(shù)據(jù)抽取之后， 將不同數(shù)據(jù)源的數(shù)據(jù)統(tǒng)一化之后集成放入數(shù)據(jù)倉庫。
10.根據(jù)權(quán)利要求8所述的裝置，其特征在于，所述數(shù)據(jù)處理模塊中對數(shù)據(jù)的處理過程由構(gòu)件中的可視化模板指引用戶完成，該可視化模板的類型與用戶上傳的數(shù)據(jù)類型相匹配。
全文摘要
本發(fā)明提供了一種基于云服務(wù)的數(shù)據(jù)處理方案，方法包括用戶在云服務(wù)器端注冊成為云服務(wù)器客戶；云服務(wù)器為各用戶分配處理空間；用戶選擇具有可視化模板的抽取構(gòu)件；用戶將本地?cái)?shù)據(jù)上傳到云服務(wù)器；云端對數(shù)據(jù)進(jìn)行處理，包括對數(shù)據(jù)進(jìn)行抽取、轉(zhuǎn)換、分析和展示操作；數(shù)據(jù)處理結(jié)果保存在云服務(wù)器。裝置包括注冊模塊，用于完成用戶在云服務(wù)器端的注冊和空間分配；選擇模塊，用于選擇具有可視化模板的抽取構(gòu)件；上傳模塊，用于完成用戶將數(shù)據(jù)上傳到云服務(wù)器；數(shù)據(jù)處理模塊，用于完成對數(shù)據(jù)的處理，包括對數(shù)據(jù)的抽取、轉(zhuǎn)換、分析和展示；儲(chǔ)存模塊，用于完成數(shù)據(jù)在云端的儲(chǔ)存；導(dǎo)出模塊，用于完成將數(shù)據(jù)導(dǎo)出到用戶本地。
文檔編號(hào)H04L29/08GK102333114SQ201110224440
公開日2012年1月25日 申請日期2011年8月5日 優(yōu)先權(quán)日2011年8月5日
發(fā)明者張新鈺, 王茜, 許斌, 賈寧, 鄭莉 申請人:清華大學(xué)