一種大數據系統的制作方法
【技術領域】
:
[0001]本發明涉及數據處理技術領域，具體地說是一種結構合理、處理效率高的大數據系統。
【背景技術】
:
[0002]隨著社會發展和經濟進步，移動通信終端以及一些智能家居被廣泛的使用，移動通信終端承載了個體之間的通信溝通職能，在此過程中移動終端采集、上傳并存儲大量用戶使用信息。
[0003]大數據技術或稱巨量資料，指的是所涉及的資料量規模巨大到無法通過目前主流軟件工具，在合理的時間內達到汲取、管理、處理并整理成為幫助企業經營決策更積極目的資訊。大數據計數的戰略意義不在于掌握龐大的數據信息，而在于對這些含有意義的數據進行專業化的處理，換言之，如果把大數據比作一種產業，那么這種產業實現盈利的關鍵在于提高對數據的“加工能力”，通過加工數據實現增值。
[0004]如何從大量的、不完全的、有噪聲的、模糊的、隨機的數據中提取隱含在其中的、事先不知道的、但有時潛在有用的信息的過程被稱為數據挖掘，顯而易見，數據挖掘時大數據技術的關鍵。
【發明內容】
:
[0005]本發明針對現有技術存在的缺點和不足，提出了一種結構合理、處理效率高的大數據系統。
[0006]本發明通過以下措施達到:
[0007]一種大數據系統，設有管控平臺以及至少一個移動終端，其中移動終端經無線通信網絡與管控平臺實現數據溝通，其特征在于管控平臺中設有用于抽取關鍵數據的數據采集單元、用于對采集到的數據進行降噪處理的數據預處理單元、用于對預處理后的數據進行挖掘分析的數據挖掘單元。
[0008]本發明所述數據采集單元設有地理位置信息提取模塊，能夠采集用戶的地理位置信息，并將其上傳至數據預處理單元，與此同時數據采集單元還將當前用戶的使用習慣等用戶數據上傳至數據預處理單元。
[0009]本發明所述數據預處理單元中還設有離散化處理單元，將降噪處理后的數據信息進行離散化處理，方便存儲和進一步分析。
[0010]本發明所述數據挖掘單元設有多路并行的數據挖掘模塊，用于從不同角度對輸入的信息進行多方面挖掘，還設有挖掘結果融合模塊以及融合信息分析模塊，其中挖掘結果融合模塊用于對多路并行的數據挖掘模塊輸出的挖掘結果進行匯總，融合信息分析模塊對匯總后的數據進行最終處理。
[0011]本發明在使用時，利用現有移動終端記錄使用者的地理位置信息以及當前用戶數據，并將兩部分信息打包上傳至管控平臺的數據采集單元，數據采集單元對接收的信息進行抽取后，將其送入數據預處理單元，數據預處理單元首先對數據進行降噪處理，然后將其離散化，使其更便于存儲和分析，預處理后的數據被送入數據挖掘單元中的多路并行的數據挖掘模塊，從不同屬性不同角度對數據進行多方位挖掘，從而獲得當前某一區域內人流量、當前某一用戶的生活習慣需求、當前某一地區的道路擁堵狀況等數據分析結果。
[0012]本發明與現有技術相比，結合了現有的移動網絡，能夠獲取較完整的原始數據，同時通過多屬性挖掘，有效提高數據利用率。
【附圖說明】
:
[0013]附圖1是本發明的結構示意圖。
[0014]附圖標記:管控平臺1、移動終端2、數據采集單元3、數據預處理單元4、數據挖掘單元5ο
【具體實施方式】
:
[0015]下面結合附圖對本發明作進一步的說明。
[0016]如附圖1所示，本發明提出了一種大數據系統，設有管控平臺I以及至少一個移動終端2，其中移動終端2經無線通信網絡與管控平臺實現數據溝通，其特征在于管控平臺2中設有用于抽取關鍵數據的數據采集單元3、用于對采集到的數據進行降噪處理的數據預處理單元4、用于對預處理后的數據進行挖掘分析的數據挖掘單元5。
[0017]本發明所述數據采集單元3設有地理位置信息提取模塊，能夠采集用戶的地理位置信息，并將其上傳至數據預處理單元，與此同時數據采集單元還將當前用戶的使用習慣等用戶數據上傳至數據預處理單元。
[0018]本發明所述數據預處理單元4中還設有離散化處理單元，將降噪處理后的數據信息進行離散化處理，方便存儲和進一步分析。
[0019]本發明所述數據挖掘單元5設有多路并行的數據挖掘模塊，用于從不同角度對輸入的信息進行多方面挖掘，還設有挖掘結果融合模塊以及融合信息分析模塊，其中挖掘結果融合模塊用于對多路并行的數據挖掘模塊輸出的挖掘結果進行匯總，融合信息分析模塊對匯總后的數據進行最終處理。
[0020]本發明在使用時，利用現有移動終端記錄使用者的地理位置信息以及當前用戶數據，并將兩部分信息打包上傳至管控平臺的數據采集單元，數據采集單元對接收的信息進行抽取后，將其送入數據預處理單元，數據預處理單元首先對數據進行降噪處理，然后將其離散化，使其更便于存儲和分析，預處理后的數據被送入數據挖掘單元中的多路并行的數據挖掘模塊，從不同屬性不同角度對數據進行多方位挖掘，從而獲得當前某一區域內人流量、當前某一用戶的生活習慣需求、當前某一地區的道路擁堵狀況等數據分析結果。
[0021]本發明與現有技術相比，結合了現有的移動網絡，能夠獲取較完整的原始數據，同時通過多屬性挖掘，有效提高數據利用率。
【主權項】
1.一種大數據系統，設有管控平臺以及至少一個移動終端，其中移動終端經無線通信網絡與管控平臺實現數據溝通，其特征在于管控平臺中設有用于抽取關鍵數據的數據采集單元、用于對采集到的數據進行降噪處理的數據預處理單元、用于對預處理后的數據進行挖掘分析的數據挖掘單元。
2.根據權利要求1所述的一種大數據系統，其特征在于所述數據采集單元設有地理位置信息提取模塊，能夠采集用戶的地理位置信息，并將其上傳至數據預處理單元，與此同時數據采集單元還將當前用戶的使用習慣等用戶數據上傳至數據預處理單元。
3.根據權利要求1所述的一種大數據系統，其特征在于所述數據預處理單元中還設有離散化處理單元，將降噪處理后的數據信息進行離散化處理，方便存儲和進一步分析。
4.根據權利要求1所述的一種大數據系統，其特征在于所述數據挖掘單元設有多路并行的數據挖掘模塊，用于從不同角度對輸入的信息進行多方面挖掘，還設有挖掘結果融合模塊以及融合信息分析模塊，其中挖掘結果融合模塊用于對多路并行的數據挖掘模塊輸出的挖掘結果進行匯總，融合信息分析模塊對匯總后的數據進行最終處理。
【專利摘要】本發明涉及數據處理技術領域，具體地說是一種結構合理、處理效率高的大數據系統，設有管控平臺以及至少一個移動終端，其中移動終端經無線通信網絡與管控平臺實現數據溝通，其特征在于管控平臺中設有用于抽取關鍵數據的數據采集單元、用于對采集到的數據進行降噪處理的數據預處理單元、用于對預處理后的數據進行挖掘分析的數據挖掘單元，本發明與現有技術相比，結合了現有的移動網絡，能夠獲取較完整的原始數據，同時通過多屬性挖掘，有效提高數據利用率。
【IPC分類】G06F17-30
【公開號】CN104731852
【申請號】CN201410783126
【發明人】章偉, 趙迪
【申請人】蕪湖樂銳思信息咨詢有限公司
【公開日】2015年6月24日
【申請日】2014年12月16日