當前位置:文思屋>學習教育>畢業論文>

通訊及網際網路技術在資料管理中的應用研究的論文

文思屋 人氣:2W

摘要:大資料背景下,越來越重視資料的管理。通訊技術特別是移動通訊技術的應用,成為資料管理的重要工具,彌補了傳統的通訊技術不足,在資料的收集、上傳中發揮重要作用,使資料管理物件範圍明顯擴大到了個人,實現個人資料的收集、傳輸、定製、查詢。網際網路技術高效能運算、分散式儲存技術為資料分析、儲存提供了途徑,網際網路中的多執行緒併發、資料預讀傳輸等技術方便了資料的傳輸,網際網路還可開展以雲安全、虛擬防火牆、入侵檢測、流量過濾、虛擬機器自動擴充套件等為代表針對資料管理綜合服務。文章概述了通訊及網際網路技術在資料管理中應用領域現狀和發展方向。

通訊及網際網路技術在資料管理中的應用研究的論文

關鍵詞:網際網路技術;通訊;資料管理

進入21世紀以來,人類社會資訊科技飛速發展,以網際網路為代表的各種資訊科技不斷湧現,並深入到人類社會的生產、生活、工作、學習之中,成為人類不可或缺的助手。各類資訊充分交融、彙集,使資料滲透至每一個行業和職能領域,成為重要的職能要素,人類正進入大資料時代。大資料背景下,越來越重視資料的管理,資料管理是大資料時代的核心工作,包括資料的收集、處理、分析、價值挖掘等。資料管理水平的提高,反過來又深深影響通訊、網際網路技術,本研究就通訊及網際網路技術在資料管理中應用領域現狀、發展方向進行概述。

1 大資料背景下的資料管理

大資料時代下,資料正呈現爆炸式增長,這些資料具有量大、型別繁多、價值密度低、速度快時效高等特徵。大資料時代對資料管理提出了更高的要求,主要體現在以下幾個方面:(1)資訊收集、處理速度加快,對資訊收集、處理能力提出了更高的要求,大量應用專業的技術,如資料收集工具,資訊專業與計算機行業高度融合。(2)資訊共享更加方便,這要求資訊系統、管理專業人員更重視團隊合作,重視節點之間的通訊,開發、利用更先進的與共享有關的能力,如即時通訊、雲端資料儲存與共享。(3)大資料下,更為重視資料的挖掘,重視網際網路中海量資訊的挖掘,資訊管理涉及的行業更加廣泛,資訊管理在醫療衛生、行業發展、企業戰略分析等領域作用越來越突出。總而言之,大資料背景推動了資料管理領域的發展,資料管理的發展離不開通訊、網際網路技術的應用,對後兩者提出了更高的要求,三者的融合程度進一步提高。

2 通訊技術在資料管理中的應用

前文提到為實現大資料背景下的資料管理,便需要更為高效、先進的通訊技術,重視節點之間的通訊,開發、利用更先進的與共享有關的能力。目前,與資料管理有關的通訊技術,以微信、網路電話等為代表。在中國手機網民的數量己超過7億人,行動網路與網際網路的融合明顯增強,移動網際網路通訊極大地推動了資料管理髮展,併成為資料管理的重要工具,彌補了傳統的通訊技術不足。需注意的是,移動通訊技術也產生了海量的資料,如個人的網路瀏覽資料、健康資訊等,這推動了更多的資料服務業務發展。以健康資料管理服務為例,移動通訊技術實現了資料的收集、上傳,使資料管理物件範圍明顯擴大到了個人,節約了資料收集的成本。移動通訊技術也使資料管理的形式發生了明顯改變,行動通訊使用者開始成為資料管理服務的使用者,行動通訊工作者能夠通過移動通訊技術發出指令,實現資料的收集、傳輸、定製、查詢等工作。

3 網際網路技術在資料管理中的應用

近年來,IP資料網、網際網路、電信網、電視網等資訊網路的融合步伐明顯加快,產生了許多新的資料管理需求,推動資料管理髮展。產生了許多新的網路內容,但這些網路內容包裝、傳送、操作、終端存在一定的差異,各有優劣,如電信、電視網路資訊傳輸速度快,網際網路儘管應用十分廣泛,但可分配地址少、資訊傳輸速度慢,不同網路的融合推動了通訊技術的發展,實現了優勢互補。目前已有利用網際網路實現遠距離控制電視網路的技術,多網融合,能夠保障高話務場景下的通訊,克服網路載波擴容、增加應急通訊車等傳統手段負荷不足的'缺陷。當前,多網融合的技術儲備基本成熟,有關的數學、物理學、材料科學、行為科學、計算機程式設計等方面都發展迅速,以分碼多重進接(Code Division MultipleAccess,CDMA)技術、WiFi技術、LTE技術為代表的融合技術,豐富了多網融合的形式。以WiFi為例,具有較高的頻帶使用率,接入承載能力較好,成本低,安裝便捷,非常適合大量使用者移動終端接入,在無線感測控制、遠端環境監測、遠端視訊監控等領域具有極高的應用價值,固線、無線技術的融合,有效實現了移動裝置的資料管理,可實現多點、遠端資料傳輸、遠端干預。

大資料時代下對資料管理的需求明顯提高,資料的計算量明顯增大,網際網路是實現高效能運算的途徑之一。基於網際網路的高效能運算,可以連線世界範圍內的不同地區的計算機,分配計算任務,實現高效能運算,理論上可以實現成千上萬臺計算機共同計算。這種體系下,每個計算機都分配出處理器容量,如SETl@hom,Folding@home計劃,網際網路高效能運算主要用於宇宙物理學、大資料統計、遙感資料處理等領域。當前,雲端計算技術飛速發展,成了基於網際網路的網路資料分析的典範。網路下高效能運算技術,根據節點能力,自適應分配不同大小的資料,進行“異構”計算,能極大地提高計算效率,甚至可利用移動計算設定。

網際網路也為資料管理提供了豐富的應用途徑,以雲端儲存為典型的代表,這是一種分段式的資料儲存技術,海量的資料以分段的形式儲存在單獨的檔案中,資料庫則負責管理這些檔案的索引,採用系統可快速定位讀取資料檔案,對於海量的資料而言,非常方便,使用者可根據資料的容量,不斷增加網路中的計算機單元、儲存節點進行擴容。分散式的資料儲存將業務資料、元資料分開管理,將業務資料儲存在廉價的工作節點上、將資料儲存容量擴充套件,適合儲存海量資料的網際網路企業、電信業務等企業。分散式資料儲存技術以雲端儲存為核心,商業化的雲端儲存技術己得到應用,如Amazon公司的簡單服務、Google公司推出的“Google storage”等專案,國內百度雲盤、QQ雲盤等。以Amazon公司的簡單服務為例,這是一個強大的、可伸縮的、可靠的、按需使用的分散式儲存系統,使用者可以將程式呼叫所需要的相片、影像等文件資料資料直接儲存到S3上,相當於第三方硬碟驅動,實際上分散式儲存系統散佈在各個地理位置許多機器上的儲存空間中,後者提供虛擬化儲存服務。目前為止,其內部原理尚未被公開。

網際網路中的資料傳輸,可採用多執行緒併發、資料預讀傳輸技術,進行並行檢索,傳輸,利用網路頻寬、伺服器處理能力,預讀與快取資料,能夠極大地提高資料傳輸效率。對於資料的組織,網際網路可採用金字塔技術結合索引,在伺服器I/O、網路頻寬使用與客戶端處理方面,可有效地提高效率。需注意的是,對於部分資料的處理,需要進行分類、變化、融合等處理,若採用叢集處理,需要優化空間才能實現資料排程。

基於網際網路的資料管理服務還包括雲安全、虛擬防火牆、入侵檢測、流量過濾、虛擬機器自動擴充套件等,這些服務都為資料管理提供了便利。可以為第三方應用提供大吞吐的API儲存介面,可用於網際網路資料使用者提供資料介面,極大地拓展了資料管理服務內容。

4結語

通訊及網際網路技術的發展推動了資料管理的發展,通訊、網際網路技術與各行各業的融合程度上升,產生了大量的資料管理服務,通訊及網際網路技術為資料的收集、傳輸、儲存提供瞭解決方案。