一、多媒體基礎概念

1. 媒體的分類

   • 感覺媒體：人類感官直接接收的信息形式（如聲音、圖像）。
   • 表示媒體：信息的數字化表示（如JPEG圖像、MP3音頻）。
   • 顯示媒體：輸入/輸出設備（如鍵盤、顯示器）。
   • 存儲媒體：數據存儲介質（如硬盤、光盤）。
   • 傳輸媒體：數據傳輸介質（如光纖、電磁波）。

2. 多媒體的定義
   通過計算機技術整合文本、圖形、音頻、視頻等多種媒體，建立邏輯連接，實現交互性系統。
   應用領域：工業、醫療、教育、娛樂、智能家居等。

---

二、多媒體的核心特征

特征	說明
多維化	支持多種媒體類型（如視覺、聽覺）的交互與處理。
集成性	硬件設備與軟件功能的整合（如音視頻同步處理）。
交互性	用戶主動控制信息（如游戲中的實時操作）。
實時性	時間敏感型媒體（如直播視頻、語音通話）需即時處理。

---

三、多媒體系統組成

1. 硬件層
   • 輸入設備：攝像頭、麥克風、掃描儀。
   • 輸出設備：顯示器、揚聲器、打印機。
   • 存儲設備：SSD、光盤、云存儲。
2. 軟件層
   • 驅動軟件：設備底層控制（如聲卡驅動）。
   • 操作系統：資源調度（如Windows多媒體服務）。
   • 數據處理軟件：音視頻編輯工具（如Adobe Premiere）。
   • 創作工具：多媒體內容生成平臺（如Unity）。

---

四、關鍵技術詳解

1. 視音頻技術

• 視頻處理：
  • 數字化：模擬信號→數字信號（如ADC轉換）。
  • 編碼標準：
    • 靜態圖像：JPEG、JPEG 2000（高壓縮比）。
    • 動態視頻：MPEG系列（MPEG-4支持低帶寬傳輸）。
    • 實時通信：H.26L（高容錯性，適用于視頻會議）。
• 音頻處理：
  • 語音識別：將語音轉為文本（如Siri）。
  • 合成技術：文本轉語音（TTS）。

2. 數據壓縮技術

壓縮類型	原理	典型格式
無損壓縮	保留全部數據（統計冗余消除）	FLAC、WAV（音質優先）
有損壓縮	舍棄人眼/耳不敏感信息（不可逆）	MP3、WMA（體積小，適合傳輸）

3. 通信技術

• 傳輸介質：光纖（高速）、無線（靈活性高）。
• 數據傳輸技術：
  • 多路復用：頻分/時分復用（提升信道利用率）。
  • 差錯控制：CRC校驗（保障數據完整性）。

4. VR/AR技術

技術類型	特點	應用場景
桌面式VR	低成本，易實現（需外設交互）	3D建模、模擬訓練
沉浸式VR	全感官沉浸（頭盔、數據手套）	虛擬旅游、醫療仿真
增強現實AR	疊加虛擬信息到現實世界（需空間定位）	工業維修導航、教育互動

關鍵技術挑戰：

• 數據采集優化（如激光掃描動態地形）。
• 實時交互反饋（力覺/觸覺手套）。

---

五、重點考點與典型考題

1. 考點1：多媒體特征
   考題：多媒體技術的“實時性”主要針對哪類媒體？舉例說明其應用場景。
   答案：針對時間敏感型媒體（如直播視頻、語音通話），需保證低延遲處理。

2. 考點2：壓縮技術對比
   考題：有損壓縮與無損壓縮的核心區別是什么？各舉一個音頻格式例子。
   答案：有損壓縮舍棄部分信息（如MP3），無損保留全部數據（如FLAC）。

3. 考點3：VR/AR分類
   考題：AR技術的核心依賴哪些技術？說明其在工業維修中的價值。
   答案：依賴計算機圖形學、空間定位技術；可疊加維修指引到設備實體，提升效率。

---

六、總結

多媒體系統的核心在于集成異構媒體并保障實時交互，關鍵技術涵蓋編解碼、壓縮、傳輸及新型VR/AR應用。架構師需關注：

• 硬件選型（如支持4K編解碼的GPU）。
• 軟件棧適配（如選擇低延遲通信協議）。
• 平衡質量與性能（有損壓縮在傳輸中的取舍）。