大數據基礎知識【大數據導論】

各位大佬好 ,這里是阿川的博客,祝您變得更強

在這里插入圖片描述 個人主頁:在線OJ的阿川

大佬的支持和鼓勵,將是我成長路上最大的動力在這里插入圖片描述

阿川水平有限,如有錯誤,歡迎大佬指正在這里插入圖片描述

在這里插入圖片描述

在這里插入圖片描述

大數據基礎知識前 必看
【大數據導論】—大數據序言
【大數據導論】—大數據、人工智能、云計算、物聯網、區塊鏈序言

目錄

  • 大數據素養
  • 大數據基本知識

大數據素養

技術性內容

  • 采集
  • 處理
  • 儲存
  • 分析
  • 技術
  • 工具
    在這里插入圖片描述

非技術性內容

  • 大數據安全
  • 大數據倫理
  • 大數據思維
    在這里插入圖片描述

大數據基本知識

在這里插入圖片描述

  • 其中大數據交易
    買賣數據的活動,是以貨幣為媒介 獲取數據商品的過程
    在這里插入圖片描述
    數據商品三大特征

    • 處理后的數據才能交易
      在這里插入圖片描述
    • 數據交易主體涉及眾多
      在這里插入圖片描述
    • 交易過程涉及多個產業鏈
      在這里插入圖片描述
      大數據交易形式
      • 大數據交易公司
        在這里插入圖片描述
      • 提供個人數據場所公司
        在這里插入圖片描述
      • 數據交易所
        在這里插入圖片描述
      • API模式
        用戶提供接口允許用戶對平臺數據進行訪問
        在這里插入圖片描述
        大數據交易技術支撐
        在這里插入圖片描述
        大數據交易發展現狀
        在這里插入圖片描述
        大數據數據來源
        • 政府公開數據
        • 企業內部數據
        • 數據供應方數據
        • 網頁爬蟲數據
          在這里插入圖片描述
          大數據數據產品類型
          • API
          • 數據包
          • 云服務
          • 解決方案
          • 數據產品
          • 數據定制服務
            在這里插入圖片描述
            大數據交易平臺類型
            • 綜合數據服務平臺
              為用戶提供定制化的服務,涉及數據的處理和加工
            • 第三方數據交易平臺
              對交易過程進行監管,并提供數據出售、數據購買、數據供應方查詢、數據需求發布等一系列服務
              在這里插入圖片描述
              從運行角度劃分
              • 政府主導的大數據交易平臺
              • 企業以市場需求為導向建立的大數據交易平臺
              • 產業聯盟性質的大數據交易平臺
                在這里插入圖片描述
                大數據交易平臺的運營模式
                數據中介數據處理加工功能的交易平臺
                在這里插入圖片描述
                只具備中介功能的交易平臺
                在這里插入圖片描述
  • 其中大數據思維
    在這里插入圖片描述
    大數據思維主要指

    • 全樣而非抽樣
      在這里插入圖片描述
      因為有了分布式儲存和處理技術,從而可以對全部的數據進行分析而不是只能對小樣本處理
    • 效率而非精確
      在這里插入圖片描述
      處理數據時往往要"秒級"響應,所以效率往往是被關注的重點,分析的精確度達到一定的程度即可。
    • 相關而非因果
      在這里插入圖片描述
      解釋事物背后發展的機理
      預測未來可能發生事件
    • 以數據為中心
      在這里插入圖片描述
      海量的數據進行計算,從而推測結果
    • 我為人人,人人為我
      在這里插入圖片描述
      其中涉及
      • 數據采集
      • 數據處理
      • 信息發布
        在這里插入圖片描述
  • 其中大數據安全
    重點關注數據

    • 保密性
    • 完整性
    • 可用性
      在這里插入圖片描述
      大數據安全的隱患
      • 大數據成為網絡攻擊的顯著目標
        在這里插入圖片描述

      • 大數據加大隱私泄露風險
        在這里插入圖片描述

      • 大數據技術被應用到攻擊手段中
        在這里插入圖片描述

      • 大數據成為高級可持續攻擊的一個載體
        在這里插入圖片描述
        大數據安全的變化

        • 靜態安全到動態安全
          在這里插入圖片描述
          大數據安全范圍
          • 隱私和個人信息安全
            在這里插入圖片描述
            其中包含個人的
            在這里插入圖片描述
  • 其中大數據倫理

    • 個人信息被無形濫用
      在這里插入圖片描述
    • 生活隱私被窺探利用
      在這里插入圖片描述
    • 數據安全漏洞
      在這里插入圖片描述
    • 數據壟斷
      在這里插入圖片描述
  • 其中數據共享
    不數據共享會導致

    • 數據孤島
      政府和企業里各個部門各自儲存數據,部門之間的數據無法共通,導致數據像各個孤島一樣缺乏關聯性
      在這里插入圖片描述
      數據共享意義
      • 對于政府\企業意義
        在這里插入圖片描述
  • 其中數據開放
    數據開放三大理論
    在這里插入圖片描述

好的,到此為止啦,祝您變得更強

在這里插入圖片描述
想說的話

學習來源廈門大學林子雨老師的 《大數據導論》(反反復復學習了5遍哈并且做了相應的練習 然后才進行的這篇博客的書寫)
實不相瞞,寫的這篇博客要寫五個小時以上(加上自己學習和紙質筆記,共七小時吧),很累希望大佬支持一下

在這里插入圖片描述

道阻且長 行則將至
個人主頁:在線OJ的阿川大佬的支持和鼓勵,將是我成長路上最大的動力 在這里插入圖片描述

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/diannao/39805.shtml
繁體地址,請注明出處:http://hk.pswp.cn/diannao/39805.shtml
英文地址,請注明出處:http://en.pswp.cn/diannao/39805.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

Golang | Leetcode Golang題解之第206題反轉鏈表

題目: 題解: func reverseList(head *ListNode) *ListNode {if head nil || head.Next nil {return head}newHead : reverseList(head.Next)head.Next.Next headhead.Next nilreturn newHead }

vue3基于uni-app 封裝小程序request請求

const BASE_URL https://47.122.26.142; // 替換為你的 API 基礎 URL const token uni.getStorageSync(token);const request (url: string, method: any, data {}, headers {}) > {return new Promise((resolve, reject) > {uni.request({url: ${BASE_URL}${url},m…

【1.1】動態規劃求解不同的子序列

一、題目 給定一個字符串s和一個字符串t,計算在s的子序列中t出現的個數。 字符串的一個子序列是指,通過刪除一些(也可以不刪除)字符且不干擾剩余字符相對位置 所組成的新字符串。(例如,"ACE"是…

6.2、函數的定義

代碼 #include <iostream> using namespace std; #include <string>//函數定義//語法&#xff1a;//返回值類型 函數名(參數列表) {函數體語句 return表達式}//加法函數 int add(int num1, int num2) {int sum num1 num2;return sum; } int main() {cout <&l…

SpringBoot異步接口實現 提升吞吐量

前言 Servlet 3.0之前&#xff1a;HTTP請求由單一線程處理。Servlet 3.0之后&#xff1a;支持異步處理&#xff0c;提高系統吞吐量。 SpringBoot 異步接口實現方式 AsyncContext&#xff1a;Servlet層級&#xff0c;不常用。Callable&#xff1a;使用java.util.concurrent.C…

聊聊Redis持久化策略RDB

寫在文章開頭 為避免服務器宕機著情況導致redis內存數據庫數據丟失&#xff0c;redis默認出通過rdb保證可靠性&#xff0c;本文將從源碼的角度帶讀者了解rdb讀寫時機和寫入流程。 Hi&#xff0c;我是 sharkChili &#xff0c;是個不斷在硬核技術上作死的 java coder &#xff…

刷代碼隨想錄有感(124):動態規劃——最長公共子序列

題干&#xff1a; 代碼&#xff1a; class Solution { public:int findLength(vector<int>& nums1, vector<int>& nums2) {vector<vector<int>>dp(nums1.size() 1, vector<int>(nums2.size() 1, 0));int res 0;for(int i 1; i <…

數據集采樣策略對模型性能的影響問題

數據集采樣策略對模型性能的影響問題&#xff0c;需要具體代碼示例 隨著機器學習和深度學習的快速發展&#xff0c;數據集的質量和規模對于模型性能的影響變得越來越重要。在實際應用中&#xff0c;我們往往面臨著數據集規模過大、樣本類別不平衡、樣本噪聲等問題。這時&#…

uni.showShareMenu({}) 和 uni.showShareImageMenu({}) 的區別

ChatGPT uni.showShareMenu({}) 和 uni.showShareImageMenu({}) 是 Uni-app 中兩個不同的 API&#xff0c;它們的作用和用法有所不同&#xff1a; uni.showShareMenu({}) 作用&#xff1a;用于顯示當前頁面的分享菜單&#xff0c;通常顯示在頁面的右上角&#xff08;類似于微…

lnternet 發展史

一&#xff0c;lnternet 發展史 ARPA net &#xff08;上世紀50年代二戰結束&#xff09; 無線 戰場指揮通信協議落后 TCP/IP 包交換 WEB (70年代 ) 80年代 90年代 二&#xff0c;互聯網的典型應用&#xff1a; 96年到2008年 第一代技術…

AJAX的概述 ,同步和異步的區別 ,AJAX 的交互模型和傳統交互模型的區別

一. AJAX的概述 1.1 什么是ajax 同步&#xff1a; 異步&#xff1a; 1.AJAX Asynchronous JavaScript and XML&#xff08;異步的 JavaScript 和 XML&#xff09;。 ? 說明&#xff1a;異步&#xff1a;就是不同步。例如我們向后臺發送請求&#xff0c;同步的方式是后臺必…

日語筆記——jy

敬語尊敬自兼丁寧するされるいたすします先生が詳細に説明されるご説明いたします説明しますいうおっしゃる申す言うお名まえはなんとおっしゃいますかほかのことは申すまでもない親の言う事をよく聞く行くいらっしゃる參る行きます先生もいらっしゃるのですかご一緒に參りまし…

Node.js學習路線

Node.js是一個基于Chrome V8引擎的JavaScript運行環境&#xff0c;它允許JavaScript在服務器端運行。Node.js的核心內容和高階內容涵蓋了多個方面&#xff0c;以下是對Node.js的詳細解析、核心內容以及高階內容的歸納&#xff1a; 一、Node.js簡介 運行環境&#xff1a;Node.…

svn忽略上傳文件node_modules文件

文章目錄 1.點擊svn項目右鍵-》選中svn的屬性2. 點擊 新建3. 點擊其他4. 選擇屬性 svn:global-ignores5. 輸入忽略文件 1.點擊svn項目右鍵-》選中svn的屬性 2. 點擊 新建 3. 點擊其他 4. 選擇屬性 svn:global-ignores 5. 輸入忽略文件

四、【源碼】Bean屬性注入

源碼地址&#xff1a;https://github.com/spring-projects/spring-framework 倉庫地址&#xff1a;https://gitcode.net/qq_42665745/spring/-/tree/04-porperty-inject Bean屬性注入 屬性注入相關的類 1.PropertyValue&#xff1a;屬性對象&#xff0c;name:value 2.Prope…

【Asterinas】Asterinas 進程啟動與切換

Asterinas 進程啟動與切換 進程啟動 進程創建&#xff1a; Rust pub fn spawn_user_process( executable_path: &str, argv: Vec, envp: Vec, ) -> Result<Arc> { // spawn user process should give an absolute path debug_assert!(executable_path.starts_with…

數據結構 —— 二叉樹

1.樹的概念及結構 1.1樹的概念 樹是一種非線性的數據結構&#xff0c;它有著多分支&#xff0c;層次性的特點。 由于其形態類似于自然界中倒過來的數&#xff0c;所以我們將這種數據結構稱為“樹形結構” 注意&#xff1a; 樹形結構中&#xff0c;子樹之間不能有交集&#x…

降重工具大揭秘:AI如何幫你輕松搞定論文重寫?

已經天臨五年了&#xff0c;大學生們還在為論文降重煩惱……手動降重確實是個難題&#xff0c;必須要先付點小經費去靠譜的網站查重&#xff0c;再對著紅字標注去改&#xff0c;后面每一次的論文呢查重結果都像賭//博&#xff0c;誰也不知道明明是同一篇文章&#xff0c;第二次…

2024鯤鵬昇騰創新大賽集訓營Ascend C算子學習筆記

異構計算架構&#xff08;CANN&#xff09; 對標英偉達的CUDA CuDNN的核心軟件層&#xff0c;向上支持多種AI框架&#xff0c;向下服務AI處理器&#xff0c;發揮承上啟下的關鍵作用&#xff0c;是提升昇騰AI處理器計算效率的關鍵平臺。主要包括有各種引擎、編譯器、執行器、算…

(番外篇)指針的一些相關習題講解(速進,干貨滿滿)(2)

前言&#xff1a; 小編感覺最近有點太墮落&#xff0c;于是我開始從事這篇文章的撰寫&#xff0c;現在也是進入七月份了&#xff0c;我現在文章開頭定一個小目標&#xff0c;我決定在七月份發布至少十篇文章&#xff0c;希望我可以說到做到&#xff08;我前面就口頭欠了不少文章…