云計算技術在計算機大數據分析中的應用

黃述杰 顧金霞

（1.武威職業學院 甘肅省武威市 733000 2.武威第八中學 甘肅省武威市 733000）

新時代發展下，人們的日常生活與工作方式隨著互聯網和信息技術的快速發展以及廣泛應用發生了巨大的改變，在生活和工作事物處理期間逐漸增加使用相關專業的信息終端設備與軟件的使用頻率?；诖?，云計算技術、計算機大數據分析都有了顯著的突破和應用，使得各個行業的企業在對內部數據進行精細化分析、科學化處理時采用云計算技術與計算機大數據分析技術等，將這些數據分析結果作為企業發展參照依據，使得企業可以實現長遠的發展。簡易性、時效性、安全性等特征成為云計算數據處理技術的明顯特征，在現代化數據處理技術出現的一刻開始，其應用范圍和領域非常廣泛，并呈現出現較好的未來運作趨勢。因此，對計算機大數據分析中云計算技術的全面探究，推動社會長遠發展。

1 相關理論闡述

1.1 云計算技術的定義

現階段，云計算技術作為一種應用較為廣泛的網絡技術，是分布式計算方法的一種。在處理和計算云中數據時主要借助網絡實施，在此過程中數據會劃分為幾個小程序，在將小程序得出的結果通過服務器傳輸到用戶。

目前，人們的生活、學習以及工作中正在廣泛應用云計算技術，推動云計算技術不斷發展。云計算技術在對資源信息進行整合與計算時，可以借助計算機和其他設施進行處理，使得數據處理效率、計算機應用價值得以提高，這對推動計算機行業的今后發展以及日常生活工具具有巨大的影響價值。計算機應用網絡安全在全球信息時代環境的作用下已然成為經濟社會可持續發展期間的核心安全問題。特別是移動計算機在阿特拉斯系統中數據應用中的網絡安全防護，既是完善網絡安全防護過程中的一個新課題，也是新時代探索和實施計算機安全的一個現實課題和重要手段?？偟膩碚f，一些計算機在“云計算”網絡環境中沒有網絡安全問題，可以確保用戶在使用計算機交換數據和信息時的安全，有效地減少甚至防止數據和信息的丟失。當然，無可否認，在“云計算”的新紀元下，雖然計算機網絡的軟硬件數據資料安全得到更有效地保障，但互聯網本身開放性和云計算的開發性逐漸增強，故而計算機網絡的安全性、可靠性也面臨著極大的挑戰。為此，在新的發展背景下，積極探索、探索、建立和完善計算機技術在應用環境云計算中的應用安全戰略，有效調控和防范各種云應用帶來的網絡安全風險尤為重要。積極引進網絡技術創新發展是當今的一項重要技術任務。

1.2 云計算技術的特點

云計算技術在長期改革與發展過程中逐漸形成了一定的特點，主要包括速度快、成本低、可擴展性強、過濾數據、完整性等，從而推動云計算技術廣泛應用與發展。具體而言：

（1）數據處理速度快。借助計算機或者其他設施設備云計算技術能夠為用戶提供數據處理服務，并不受時間、空間、地點等方面的限制。當前，為用戶提供云計算技術的供應商發展規模龐大，并且服務器設備群比較龐大，熟練設備數量可達百萬臺，使得用戶進行計算機數據處理的速度非?？?。

（2）云計算服務成本低?？蛻舻男枨笾苯記Q定了云計算技術的收費，所示，客戶在購買云計算服務時應結合自身需求與實際情況，這樣可以減少不必要的服務費用，使得用戶使用云計算技術的成本能夠得到一定的控制。同時，云計算技術的不斷發展與創新，使得云計算技術在計算機大數據處理中得到廣泛應用，用戶規模逐漸擴大，這也使得云計算服務的價格漸漸降低。

（3）云計算技術擴展性極強。云計算技術屬于通用數據處理方法中使用較為普遍的技術，云計算技術在沒有任何應用限制的基礎上可以依照自身需求進行擴展，從而能夠滿足不同客戶的使用需求。

（4）可以有效過濾數據?，F如今，互聯網技術得到較好的發展，使得互聯網數據庫的信息資源不斷增加，而且信息資源的種類不斷豐富。云計算技術具備精準的計算和篩選功能，可以極快地在龐大的數據資源庫中選擇出客戶所需要的各種信息數據，提供客戶數據處理的效果和質量。

（5）可以完整地將數據保存。信息數據在借助計算進行云存儲期間，假如計算機出現故障也不會影響信息數據安全性，各類信息不會丟失，使得信息得以保證的保存，從而提升信息的儲存率和穩定性，降低了用戶使用過程中因數據丟失帶來的突發風險。

1.3 云計算技術與計算機大數據的關系

就技術角度而言，云計算和大數據之間有著密切的關系，二者之間的關系近似于硬幣的兩個面。單獨一臺計算機無法對大數據是進行有效處理，而需要通過分布式構架的模式處理大數據?；诖诉^程，想要達成云計算對數據的應用，需要云計算進行分布處理。換言之，大數據的計算方式與方法在云計算技術后發生了巨大的變化，同時可以借助互聯網為各類客戶提供動態的、虛擬機化的數據資源?？蛻羰褂迷朴嬎慵夹g提供的信息資源時，需要創建按時收費的模式，云計算資源利用客戶則根據自身需求獲得有效的信息資源，從而實現對互聯網資源的有效訪問，通過這種方式可以大大提高使用互聯網資源的效率，并反映數據的價值。

2 計算機大數據處理中云計算的關鍵技術以及應用流程

2.1 計算機大數據處理中云計算的關鍵技術

2.1.1 挖信息數據掘技術

從海量網絡數據資源中能夠迅速找到并整合出客戶需求的相關信息數據的技術為數據挖掘技術，是深度處理和開發網絡現有數據資源所必需的技術。目前，一般對局域網中環繞著海量化、相關性低、復雜性強的計算機數據資源進行處理時，其處理數據的執行流程包括采集數據、預處理數據、整理數據、轉換數據以及挖掘數據處理資源等，然后通過挖掘技術的計算能力、挑選能力以及整理能力，最終可以在眾多數據中獲得有價值、關聯性高的數據內容，然后再把這部分的有效數據處理資源安裝在適當的數據庫系統中實現更高效的儲存管理。在此過程中，主要使用均值法、平滑法、預測法等技術手段對預處理技術進行數據挖掘，并使用真空值、噪聲等技術主動濾波以處理網絡中的錯誤率、冗余度、重疊率高等的數據處理信息。譬如，一般會利用均值操作數據預處理工作，具體操作主要依據Ci=(i-1) ￡ (i-k)Cj/K 的計算公式，主要是處理已經知道的數據屬性的平均值，再根據相關規律布置數據，從而獲得的數據處理成果與實際狀況基本相同。

2.1.2 分布式計算技術

通常將較為繁雜的信息處理問題劃分為并行的多個信息處理服務，然后利用計算技術虛擬硬件完成信息計算工作，這種方式為分布式計算技術。在聯合數據處理過程中，這個虛擬操作系統中一般有幾個節點。不同的節點承擔著不同的任務分配和管理活動。它可能把一個任務的數據委托給幾個虛擬機。數據包管理也十分有效，一般用來管理多級信息。

2.1.3 HDFS 存儲技術

HDFS 的云計算數據存儲系統以分布式格式存放數據.在該體系中包含了多個數據處理節點和存儲庫。利用Namenode 管理系統在客戶終端數據文件訪問過程中實現對信息訪問的控制。另外，在HDFS 數據存儲系統的最底部將自動分配已創建的目錄文件，并建立數據文件塊來存放、管理和存取各種數據資料。

2.2 計算機數據處理中云計算技術應用流程

2.2.1 采集信息數據

通常數據采集、數據評比、數據讀取、數據分析以及數據互通等部分共同組成云計算技術的海量數據處理系統。局域網內大量的計算機數據信息、文檔信息的采集就是通過數據信息采集部分完成的。企業使用云計算技術主要收集有關財務方面、經營業務方面。產品生產和銷售方面等的信息數據資源，另外，對于龐大的文檔信息、日志信息以及臨時的文件信息等也需要實行有效的收集，這樣可以不斷強化信息數據來源的準確性。

2.2.2 信息數據的處理

對于一周之內網絡計算機采集完成的數據信息資源進行處理時，可以用Q 代表時間系數、W 用來代表負荷系數、E體現的為緩存系數等。以企業財務數據信息采集與管理為例，在云服務平臺傳輸大量的數據資料時，虛擬化數據池中對這些數據的時間可以分成三個時間階段，分別和Q 時鐘系數的A1、A2、A3 預設值相對應。與在不同運行時段內虛擬化硬件設備的Bl、B2、B3 的三個負載系數相對應。另外，云計算平臺的數據資源可以分為低級、中級、高級三個等級緩存量，并分別對應緩存系數E 中的Cl、C2 和C 三個預設值。在數據處理時結合了各個層次的設備相對應的處理過程，虛擬化資源池按照使用程度的權重，分配預設值q、w 和e，并且q 值小于w 值，而w 值小于e 值。在云計算數據處理中運用的計算公式為R=Q-q+W·w+E·e，之后將數據處理結果輸送到數據攀比模塊。將數據處理系數R 與預設值r 之間比較情況進行判定。只要出現R ≥r 時，產生云計算任務處理使用過渡信號，反之發出云計算使用正常信號，在將最終信號輸送到數據分析模塊。

2.2.3 任務調度虛擬化資源

在任意調度整個云計算的流程中，要將m 個任務職責調度到N 個資源中進行任務執行。在NP-hard 目標函數下具有動態構性的云計算數據處理的虛擬化資源可以任意調度。最終在約束條件內獲得最優解。設置TET 為任務執行時間，那么i 個任務在第K 個資源中的執行時間為ETC(i,k)=tarttime(j) +TET(i, j)，在虛擬集合中全部的數據處理任務完成的總時間為T=Min{Cl, C2,C3... Ci}。

2.2.4 數據分析

相關信息在通過數據分析模塊傳輸后由控制器接收，這時指示燈同傳感器產生銜接，導致控制器上面的指示燈閃爍。將儲存模塊中一個星期之內收集處理的全部信息，同時還要將其在儲存設施、數據庫、云服務器中的占比，使用Ti、Yi、Ui 來表示。之后在將虛擬化資源中預設值t、y、u 與不同硬件平均占用率變化值進行對比?？梢垣@得云計算平臺數據處理結果較為準確。

3 云計算技術在計算機大數據分析中的應用探討

3.1 借助云計算技術創建大數據處理系統

把各種應用端的數據信息傳遞至云端的運作模型為云計算技術，云計算技術應用中的數據處理系統，具有節點相對分散、動態特征數據處理、數據源復雜等特征。大數據系統中將云計算劃分為子服務器節點、塊服務器節點、服務器端三部分，其中云計算的服務器端由為子節點群和主節點組成，塊服務器端則由個人電腦、手機端應用、筆記本等組成，通過調用應用程序的接口客戶端即可登錄云計算管理系統，采用互聯網途徑計算機賬戶可以借助不同終端對計算機系統進行訪問的應用服務。該系統僅限于管理子節點和賬戶的部分為主服務器節點，但其沒有保存數據的功能。主節點在接收到客戶端的各類申請后，會根據申請要求查找相關文件，并將文件的具體位置反饋到客戶端，然后再依據返送回來的信息連接客戶端和子節點，同時還要向子節點要求信息資源的儲存要求，這樣就可以實行分布式信息存儲。如若在大數據處理系統的管理系統運行過程中需要用到運算功能，就要將文件存儲的不同節點啟動，進行并行計算。最后在完成所有的計算后，將運算的結果輸送到客戶終端，這一系列操作為計算向存儲轉移的過程。

當前，政務大數據分析系統模型建立是云計算技術應用最為成功的方面。在阿里云科技的應用基礎上構建我國政務大數據分析系統可以有效處理政務工作中具有較強復雜性、綜合屬性的數據和信息。另外，在我國建設智慧城市系統時合理運用云計算的強大計算能力，實現各個城市、高校智能系統的建設。政務系統構建期間由于政府內部各個部分的工作屬性不相同，所以需要利用云計算技術對各個部分相關數據進行分析，充分體現云計算技術的優勢。此外，各個高校也要合理利用云計算技術實現數據的傳遞和共享，這樣也能夠保障信息數據的安全性。

3.2 利用云計算技術建設計算機互聯網分析平臺

云計算技術發展的必然趨勢為云計算技術與互聯網技術的有效融合。通過分析現實發展中融合成效了解到，計算機互聯網分析技術在云計算技術與人工智能技術有機結合下獲得良好的發展?；诂F代互聯網發展背景下，用戶可以采用多樣化的數據處理方法，之后將分析結果整理為專業報告提供給用戶參考，使得計算機大戶數據分析技術應用價值充分發揮，完成用戶和技術的直接對接，將云計算技術服務的效果和水平加以優化。隨著互聯網技術廣泛應用于人們生活、工作，網絡信息渠道成為人們獲取信息的主要方式，同時也會在網絡平臺中發布各種信息，這也使得人們信息獲取對互聯網技術的依賴性增加，在進行工作、娛樂以及交流時都會在互聯網中實現。隨著互聯網活躍用戶的不斷增加，網絡中各種信息量也大增加，這時使用云計算技術分析這些信息數據需要創建計算機互聯網分析平臺，針對用戶的需求供應專業的檢索建議，充分發揮計算機網絡分析平臺的運行價值和優勢。

3.3 云計算技術的應用提高大數據分析的安全性

3.3.1 實現安全加密

客戶端將數據借用互聯網向服務器傳輸過程中必定存在傳輸風險，如網絡黑客篡改數據、盜取數據等，想要降低數據傳輸風險，保證輸出過程中數據不在出現被篡改和盜取的問題，應加強數據傳遞的安全性，這時可以利用加密技術降低信息傳遞期間信息數據被篡改或盜取的現象發生。因此，在信息傳遞中可以利用對稱加密和不對稱加密等方法。在數據傳輸中應用對稱加密可以實現高效且快速的加密工作，這種方法安全性不足，而使用不對稱加密方法能夠增加安全程度，但由于其加密過程比較復雜，這也使得加密工作效率低，但其對數據存儲的安全性較高。故此，為了在數據傳輸安全性得到保障的基礎上，提高工作效率，就需要將兩者加密方法進行結合使用，在對關鍵數據傳輸時采用非對稱加密方法，大量的普通數據傳輸采用對稱加密方法，從而可以在提高數據傳輸效率的同時，提高傳遞的效率。

3.3.2 不同層級網絡安全防護

想要在不同云計算環境中實現相對應業務層安全保護要求，需要計算技大數據應用云計算進行處理時，安全管理中心應具備安全管控、審計和系統管理等功能，可以通過不同級別的安全防范機構保護不同層級客戶端的安全，為每個賬戶帶去極為安全的資源訪問服務。一般使用Web 服務、移動通信網絡以及API 接口等方法用戶也可以實現對云端服務器的訪問，但是在網絡安全級防御框架系統內并不包括運用在終端操作系統上的安全防護。目前，資源級、業務層安全已成為防護架構體系內對防范云計算執行環境安全作為核心研究，在資源層中包含虛擬和物理資源安全等，可以通過創建符合安全設計要求的資源層安全保護構架提高其安全性。

網絡安全防護等級目標時需要結合不同等級云計算平臺進行設計，其安全防護步驟主要分以下三個步驟.具體而言：

（1）一般會按照云計算實際的業務系統以及平臺賬戶規模對計算機安全保護標準予以確定，然后提出極具針對性的保護方法，這樣會極大地降低云計算平臺安全問題的出現。

（2）詳細劃分和制度安全技術要求，然后在根據安全云計算環境、安全管理中心等制定行之有效的安全保護方法，提高云計算平臺的安全性。

（3）安全技術機制需要依據云計算功能構架中不同層級保護要求和功能進行建立，從而符合云計算功能構架的安全保護要求。在設計和完成云計算環境等級安全防護工作之后，還要將身份鑒定技術和訪問權限控制等安全防護方法運用到接口安全和虛擬化安全等工作環節，這樣可以有效地與云計算平臺的各個功能層面進行連接，為客戶收集、傳輸以及應用大量數據信息提供良好的安全保護。

3.4 使用云計算技術構建滿足時代發展需求的存儲體

計算機技術伴隨互聯網技術的發展得到廣泛應用，從而改變了人們的閱讀習慣，導致傳統文字信息不再符合人們的閱讀習慣，同時也改變了人們的交流方式，形成語音、視頻以及圖片等交流方式，數據以此交流形式為主，需要極大的存儲空間，這就需要計算機具有充足的存儲空間，并有效處理和整理非文字數據?；诖?，建立一個更大的數據存儲平臺是不可避免的，保證大量的圖像、視頻和語音信息得以存儲，充分體現云計算技術的優勢，識別劃分和篩選整合各種圖片、視頻以及各種語音信息，將講完文字存儲模式改變。社會經濟的迅猛發展，使得各個行業對圖片和視頻等形式的信息需求不斷擴大，同時企業查閱各類信息數據的難度增加，這時企業就需要利用云計算系統和云計算技術集中查閱和處理 各種圖片、視頻，大量基于云計算的信息存儲與分析平臺和計算機大數據分析，將計算機存儲功能不斷改進，存儲信息得以優化，有效整合大量信息和數據資源，完成視頻、圖片儲存資源數據庫的建設，使得搜索引擎與存儲區域歸檔實現良好合作。

3.5 運用云計算技術開大相應程序

由于信息科技的進步以及對人們工作的要求，網絡安全應用程序系統也在逐步完善中，這就必須進行研究和處理病毒程序，提高計算機搜尋病毒蹤跡的敏銳度，使得計算機病毒防御能力提高。一般來說，通過針對電腦內網絡隱蔽處理，能夠有效使電腦內代理服務速度快速提高，避免出現由于風險網站造成的失靈狀況，為計算機系統提供保護屏障，使得計算機內部系統安全性能加強。計算機內部網絡數據應用時，通過備份與還原能夠緩解因為網絡安全威脅所產生的數據損失問題。同時這種恢復功能還有助于維護內部數據的一致性與完整性。一般有邏輯備份、動態備份、靜態備份等情況。但由于電腦黑客數量的增多，對互聯網環境的有效精華工作難度逐漸增多，但是通過某些防范方式仍然能夠發揮保存數據庫信息的功能。運用云計算技術建立防火墻為計算機網提供了安全保障，能夠有效防范黑客入侵。企業必須加快與云計算系統相關的硬件建設。比如在服務器上，企業要做好迭代維護升級工作，保證光纖寬帶網絡正常運行，獲得更好的云計算服務。在滿足硬件需求的基礎上，企業還將加強軟件資源的整合，不僅加大云計算相關安全系統的研發，同時也將云計算的生產和管理整合到計算機數據處理中。

4 結論

計算機大數據中云計算技術的應用與我國信息化進程加快推進發展趨勢相吻合，云計算技術的利用可以對數據信息進行高效的儲存和處理，使得大數據分析效率提高。在對云計算技術應用全面分析，找到有效應用方法，從而提高計算機大數據分析的安全性和準確性，防止各類數據資源的被竊取或是向外流出。為此，需要積極尋找適當的入手點，將傳統計算技術大數據分析的缺點和不足之處進行改進，最終達成計算機大數據分析能力強化的目的。