
個人主頁:在線OJ的阿川
大佬的支持和鼓勵,將是我成長路上最大的動力
阿川水平有限,如有錯誤,歡迎大佬指正
大數據基礎知識前 必看
【大數據導論】—大數據序言
【大數據導論】—大數據、人工智能、云計算、物聯網、區塊鏈序言
目錄
- 大數據素養
- 大數據基本知識
大數據素養
技術性內容
- 采集
- 處理
- 儲存
- 分析
- 技術
- 工具
非技術性內容
- 大數據安全
- 大數據倫理
- 大數據思維
大數據基本知識
-
其中大數據交易
買賣數據的活動,是以貨幣為媒介 獲取數據商品的過程
數據商品三大特征- 處理后的數據才能交易
- 數據交易主體涉及眾多
- 交易過程涉及多個產業鏈
大數據交易形式- 大數據交易公司
- 提供個人數據場所的公司
- 數據交易所
- API模式
向用戶提供接口,允許用戶對平臺數據進行訪問
大數據交易技術支撐
大數據交易發展現狀
大數據數據來源- 政府公開數據
- 企業內部數據
- 數據供應方數據
- 網頁爬蟲數據
大數據數據產品類型- API
- 數據包
- 云服務
- 解決方案
- 數據產品
- 數據定制服務
大數據交易平臺類型- 綜合數據服務平臺
為用戶提供定制化的服務,涉及數據的處理和加工 - 第三方數據交易平臺
對交易過程進行監管,并提供數據出售、數據購買、數據供應方查詢、數據需求發布等一系列服務
從運行角度劃分:- 政府主導的大數據交易平臺
- 企業以市場需求為導向建立的大數據交易平臺
- 產業聯盟性質的大數據交易平臺
大數據交易平臺的運營模式
數據中介和數據處理加工功能的交易平臺
只具備中介功能的交易平臺
- 綜合數據服務平臺
- 大數據交易公司
- 處理后的數據才能交易
-
其中大數據思維
大數據思維主要指- 全樣而非抽樣
因為有了分布式儲存和處理技術,從而可以對全部的數據進行分析,而不是只能對小樣本處理 - 效率而非精確
處理數據時往往要"秒級"響應,所以效率往往是被關注的重點,分析的精確度達到一定的程度即可。 - 相關而非因果
解釋事物背后發展的機理
預測未來可能發生的事件 - 以數據為中心
以海量的數據進行計算,從而推測結果 - 我為人人,人人為我
其中涉及- 數據采集
- 數據處理
- 信息發布
- 全樣而非抽樣
-
其中大數據安全
重點關注數據的- 保密性
- 完整性
- 可用性
大數據安全的隱患-
大數據成為網絡攻擊的顯著目標
-
大數據加大隱私泄露風險
-
大數據技術被應用到攻擊手段中
-
大數據成為高級可持續攻擊的一個載體
大數據安全的變化- 從靜態安全到動態安全
大數據安全范圍- 隱私和個人信息安全
其中包含個人的
- 隱私和個人信息安全
- 從靜態安全到動態安全
-
-
其中大數據倫理
- 個人信息被無形濫用
- 生活隱私被窺探利用
- 數據安全漏洞
- 數據壟斷
- 個人信息被無形濫用
-
其中數據共享
不數據共享會導致:- 數據孤島
政府和企業里各個部門各自儲存數據,部門之間的數據無法共通,導致數據像各個孤島一樣缺乏關聯性
數據共享意義- 對于政府\企業的意義
- 對于政府\企業的意義
- 數據孤島
-
其中數據開放
數據開放三大理論
好的,到此為止啦,祝您變得更強
想說的話
學習來源廈門大學林子雨老師的 《大數據導論》(反反復復學習了5遍哈并且做了相應的練習 然后才進行的這篇博客的書寫)
實不相瞞,寫的這篇博客要寫五個小時以上(加上自己學習和紙質筆記,共七小時吧),很累,希望大佬支持一下
道阻且長 行則將至 |
---|
個人主頁:在線OJ的阿川![]() ![]() |