国产精品尤物福利片在线观看_少妇免费毛片久久久久久久久_久久久久成人精品免费播放动漫_日韩av综合在线观看

歡迎來到010在線作文網!

大數據時代數據管理技術研究綜述論文

實用文 時間:2021-08-31 手機版

  隨著計算機技術和網絡的快速發展,半結構化和非結構化等類型數據成幾何倍增長,學習和使用大數據管理技術順應時代發展潮流。本文從數據管理技術的發展進程出發,介紹了人工管理方式、文件系統管理方式、數據庫管理方式三種階段的管理方式。然后詳細介紹了關系數據庫和NoSQL非關系數據庫,并且將兩者從三種角度進行了對比。最后對未來大數據時代信息管理方式作出了展望。

大數據時代數據管理技術研究綜述論文

引言

  隨著計算機和網絡技術的快速發展,移動互聯、社交網絡、電子商務、云計算等各種新興服務的興起,極大拓展了互聯網的疆界和應用領域,隨之產生的是海量的數據,這些數據不僅來源的渠道多樣,并且數據規模和數據種類也是快速的增長,大數據時代已經來臨。大數據時代,無法將海量數據存儲和管理在一臺或者有限數目的服務器內,更無法借助有限的計算機去處理和管理大數據。因此,如何利用現有的資源應對當前數據量的快速增長,實現對大數據的有效、便捷、安全的管理,是當前國內外關于數據管理和數據分析亟需解決的問題。

1 數據管理技術的發展

  數據管理是指對各種類型的數據進行采集、存儲、分類、計算、加工、檢索和傳輸的過程。隨著計算機和網絡技術的不斷發展和改進,數據庫管理技術也在不斷的更新換代。到目前階段為止,數據管理技術主要發展歷程經歷了以下階段:人工數據管理方式、文件系統管理方式和數據庫系統管理方式。

  1.1 人工數據管理方式

  20世紀50年代中期,計算機初期被應用于科學計算方面,因此,早期的數據處理都是手工完成的。數據存儲只有磁帶、卡片和紙帶等低速存儲設備。既沒有操作系統,也沒有管理數據的專門軟件,此階段管理的數據,不能進行共享,且沒有獨立性,數據純粹面向應用,服務于應用。

  1.2 文件系統管理方式

  20世紀60年代中期,隨著計算機進一步的發展,不僅用于科學計算,而且更多地用于信息處理。對于數據存儲,有了磁盤、磁鼓等存儲設備。操作系統和高級語言的出現為文件系統管理提供了可能。此階段的文件系統,是按照相應的規則將數據組織成一個獨立的命名文件。這一時期的數據特點是:數據可以長期存儲在磁盤上、有專門的軟件進行管理維護、數據不再獨立存在,數據不止服務于應用,在一定程度上,數據的共享性得到了提高。

  1.3 數據庫系統管理方式

  20世紀60年代后期,數據庫系統管理方式逐漸形成并具有一定的規模。由于磁盤技術的不斷進步和發展,低成本、高速的硬盤占領了市場,為新的數據管理技術提供了產生的必要條件。對應的軟件技術也有一定的發展。數據庫系統是由計算機的軟硬件資源共同組成,實現了數據的動態、有規則、獨立存儲。如圖1所示。

2 大數據管理技術

  大數據是指無法在可承受的時間范圍內用常規軟件工具進行捕捉、管理和處理的數據集合。歸結為四個特點就是四“V”,即大量(Volume)、高速(Velocity)和多樣性(Variety)和價值(Value)。大數據首先體現在數據量上:全球著名咨詢機構IDC(國際文獻資料中心)在2006年估計全世界產生的數據量是0.18ZB(1ZB=100萬PB),而截至2011年這個數字已經提升了一個數量級,達到1.8ZB。這種數據產生的速度仍在增長,預計2015年將達到8ZB。隨著數據量的增長,得到龐大的數據源和樣本數據后,人們并不能容忍對于這些龐大的數據處理響應時間。因此,大數據需要在數據量提高的前提下,數據的處理和響應能力進行提高,從而確保數據延遲可以在人們的接受范圍之內。因此數據處理要得到有效的保證,那如何存儲和組織管理這些海量數據,值得我們去探索和研究。

  2.1 關系型數據庫(RDBMS)

  2.1.1 關系數據庫的提出

  20世紀70年代初,IBM工程師Codd發表了一篇論文“A Relational Model of Large Shared DataBanks”,隨之關系數據庫時代宣告到來。關系數據庫管理系統(Relational Database ManagementSystem,簡稱RDBMS)就是基于上述的論文而被設計出來的。在關系數據庫之前的系統主要有基于層次模型的層次數據庫、基于網狀模型的網狀數據庫等。以上幾種數據庫的主要不足是數據模型是很難被用戶所理解,并且編寫的軟件與數據模式依賴性比較高。Codd提出的關系數據模型是基于表格、行、列、屬性等基本概念,將現實世界中的各類實體及其關系映射到表格上,并且還為關系模型建立了關系代數運算。

  2.1.2 關系數據庫的應用

  關系數據庫系統最初主要是應用于事務處理領域。隨著數據的不斷積累增長,人們需要對數據進行分析操作,提取出有用的信息以支持決策等等。這些分析操作主要包括簡單匯總、聯機分析處理(online analytical processing,簡稱OLAP,主要是多維分析)、統計分析、數據挖掘等。有些分析處理需要對數據集進行多次的掃描,分析查詢執行的時間以分鐘或者小時計。與普通行存儲模式不同,一些學者提出了列存儲模式(columnar storage model)。列存儲模型有行存儲沒有的優勢特征,當查詢只涉及關系的某些數據列時,不會造成無關數據的提取,減少I/O操作,提高了查詢的效率。圍繞RDBMS,形成了一個完整的生態體系(廠家、技術、產品、服務等),提供了包括數據采集、數據管理、數據查詢與分析、數據展現(即可視化)等技術和產品,創造了巨大的數據庫產業,為社會發展做出了巨大貢獻。

  2.1.3 關系數據庫的不足

  大數據時代的到來,關系型數據庫并未做好全面的準備,出現了諸多問題,主要問題有以下幾個方面:

  (1)關系模型不容易組織和管理所有類型多樣的數據,例如在關系數據庫里,管理大規模的高維時空數據、大規模的圖像數據等都顯得力不從心。

  (2)如何才能通過大量節點的并行操作實現大規模數據的高速處理,仍然值得我們去探索。在關系數據庫上進行大規模的事物處理,不但需要解決查詢的性能問題,更需要解決修改操作的性能問題,大量的事物處理,需要高效完成,才能保證數據的持久性和可靠性。


本文來源http://www.nvnqwx.com/shiyongwen/1934935.htm
以上內容來自互聯網,請自行判斷內容的正確性。若本站收錄的信息無意侵犯了貴司版權,請給我們來信(zaixianzuowenhezi@gmail.com),我們會及時處理和回復,謝謝.
国产精品尤物福利片在线观看_少妇免费毛片久久久久久久久_久久久久成人精品免费播放动漫_日韩av综合在线观看
欧美亚洲视频一区| 欧美精品七区| 欧美精品亚洲| 久久久久久一区| 日韩最新中文字幕| 91精品久久久久久久久久入口| 不卡av电影在线观看| 欧美二区三区| 国产精品久久久久久久久电影网| 欧美精品欧美精品| 日韩在线欧美在线国产在线| 日韩免费观看高清| 色妞久久福利网| 人妻无码久久一区二区三区免费| 国产福利片一区二区| 中文字幕中文字幕在线中一区高清 | 欧洲日本亚洲国产区| 久久国产乱子伦免费精品| 日韩av第一页| 久久久久久久久久久久久久一区| 日本不卡在线观看视频| 久久国产精品视频在线观看| 日本一区二区在线| 久操手机在线视频| 欧洲熟妇精品视频| 久久久精品在线| 免费国产成人av| 欧美精品久久久久久久久久| 国产在线播放不卡| 伊人久久大香线蕉综合75| 成人久久18免费网站漫画| 中文字幕精品在线播放| 91久久在线视频| 视频一区三区| 久久久久久久久久久av| 黄色片视频在线免费观看| 国产精品久久久久久久7电影| 国产一二三区在线播放| 一卡二卡三卡视频| 久久一区二区精品| 日韩精品无码一区二区三区免费| 国产成人女人毛片视频在线| 国产做受69高潮| 精品国产乱码久久久久久108| 超碰97网站| 日本婷婷久久久久久久久一区二区 | 一区二区视频在线播放| 7777精品久久久大香线蕉小说| 日韩av免费网站| 国产精品视频免费在线| 国产欧美久久一区二区| 午夜精品一区二区三区在线观看 | 麻豆成人在线播放| 亚洲第一页在线视频| 久久久7777| 国语精品免费视频| 亚洲日本欧美在线| 日韩中文字幕网| 国产精品亚洲视频在线观看| 日韩在线综合网| 国产精品裸体一区二区三区| 91精品在线看| 欧美精品欧美精品系列c| 在线亚洲美日韩| 日韩在线视频国产| 国产男人精品视频| 日本a在线天堂| 一区二区三区观看| 日韩亚洲综合在线| 国产青春久久久国产毛片| 无码人妻精品一区二区蜜桃网站| 国产精品美女www爽爽爽视频| 97国产精品视频| 韩日午夜在线资源一区二区| 亚洲一区二区精品在线观看| 国产精品日韩欧美| 久久婷婷国产综合尤物精品| 国产一区二区免费电影| 日韩亚洲在线视频| 亚洲午夜精品久久久久久人妖| 精品国产一区二区三区在线观看 | 欧美日韩一区二区三| 午夜探花在线观看| 久99久在线视频| 久久精品国产99国产精品澳门| 99久久国产宗和精品1上映 | 国产美女网站在线观看| 青青草成人免费在线视频| 亚洲一区三区在线观看| 久久香蕉国产线看观看网| 久久久久久九九九九| 99爱精品视频| 国产免费一区视频观看免费| 欧美亚洲免费高清在线观看| 亚洲第一综合网站| 久久99国产精品自在自在app| 久久精品人人爽| 少妇久久久久久| 国产成人一区二区三区| 97久久久免费福利网址| 国产日韩精品视频| 精品免费视频123区| 日韩欧美一区三区| 日韩在线综合网| 亚洲国产精品毛片| 欧美极品在线播放| 国产精品国产三级国产专区51 | 免费看污久久久| 极品粉嫩国产18尤物| 欧美中文字幕视频| 青春草国产视频| 欧美做暖暖视频| 热久久99这里有精品| 日韩.欧美.亚洲| 春色成人在线视频| 亚洲bt天天射| 午夜精品一区二区三区在线视频| 亚洲精品国产suv一区88| 精品免费国产| 国产精品成熟老女人| 久久天堂电影网| 国产精品美女主播| 国产精品福利网| 精品久久久久久无码中文野结衣| 国产精品久久久久久久久久直播| 国产精品日韩在线播放| 国产精品久久久久久久久久久久冷| 国产精品欧美激情在线观看| 国产精品无码专区av在线播放| 国产成人生活片| 国产精品久久久久久亚洲调教| 国产精品第2页| 久久久久久12| 亚洲午夜精品国产| 动漫3d精品一区二区三区| 色一情一乱一乱一区91| 青青草久久网络| 免费看国产一级片| 国产精品中文字幕久久久| 99精品视频播放| 久草在在线视频| 国产精品秘入口18禁麻豆免会员| 久久亚洲精品成人| 中文字幕中文字幕一区三区 | 欧美日韩一区二区在线免费观看| 麻豆av一区| 不卡一区二区三区视频| 久久久久九九九| 久久久精品视频成人| 欧美精品在线视频观看| 亚洲制服中文| 日韩精品不卡| 国产色综合一区二区三区| 91麻豆蜜桃| 日韩三级成人av网| 欧美巨猛xxxx猛交黑人97人| 亚洲v日韩v欧美v综合| 欧美最大成人综合网| 精品一区日韩成人| 91高潮精品免费porn| 日韩视频免费在线观看| 久久99久国产精品黄毛片入口| 午夜精品一区二区三区在线播放| 欧洲日韩成人av| 国产剧情日韩欧美| 久久99影院| 中文字幕日韩一区二区三区不卡 | 91精品国产高清| 国产精品偷伦免费视频观看的| 九九热精品视频国产| 日本久久久久久久| 国产在线欧美日韩| 91免费福利视频| 国产精品成人一区| 日本一级淫片演员| 国产精品亚洲自拍| 日韩视频精品在线| 亚洲精品一区二区三区四区五区| 欧美日韩精品中文字幕一区二区| 成人av在线亚洲| 精品国产依人香蕉在线精品| 亚洲综合成人婷婷小说| 欧美人与性禽动交精品| 成人久久一区二区三区| 久久久国产精品一区| 亚洲最新免费视频| 狠狠色噜噜狠狠狠狠色吗综合| 97国产在线视频| 国产精品第2页| 热99精品只有里视频精品| 高清亚洲成在人网站天堂| 久久久精品欧美| 日本一区免费| 成人免费视频97| 国产精品极品在线| 青青青在线视频播放| 99精品国产一区二区| 国产精品果冻传媒潘| 青青在线免费观看视频| 国产高清精品一区二区三区|