VLC視頻播放器原理詳細分析含TS流格式分析

vlc是一個功能強大的玩意,能做很多有意思的事情。
最簡單的,從界面打開一個文件播放,也可以在命令行下使用,如
C:\Program Files\VideoLAN\VLC>vlc.exe test.ts
獲取內置的幫助,會寫到vlc-help.txt
C:\Program Files\VideoLAN\VLC>vlc.exe -h
獲取更詳細的幫助,有大量的選項介紹
C:\Program Files\VideoLAN\VLC>vlc.exe -H
在線使用幫助
http://www.videolan.org/doc/play-howto/en/play-howto-en.html
http://www.videolan.org/doc/streaming-howto/en/streaming-howto-en.html
搜索并顯示可用的模塊列表
C:\Program Files\VideoLAN\VLC>vlc.exe -l
Windows下,默認情況,VLC的配置文件在 %APPDATA%\vlc\vlcrc
%APPDATA%在XP下通常是 C:\Documents and Settings\用戶名\ApplicationData
Linux下,在用戶home目錄的/.vlc/中
vlc的選項完全可以通過修改vlcrc來設置,界面只是略微方便一點
重置所有選項到默認狀態
C:\Program Files\VideoLAN\VLC>vlc.exe–reset-config
VLC從vlcrc中指定的plugin-path,以及當前目錄的modules和plugins目錄來遞歸查找plugin
VLC 的大部分功能都是通過plugin來實現的。VLC默認有大量的動態插件,例如官方VLC0.8.6e有210個插件。為了加快啟動速度,vlc會在%APPDATA%\vlc\cache中緩存plugin的列表,選項plugins-cache=0可以禁止緩存plugin
打開一個UDP組播流,組播組 239.255.1.1,端口 4567,默認端口1234
對于rtp協議,VLC會自動識別,寫udp還是rtp都沒問題
C:\Program Files\VideoLAN\VLC>vlc.exeudp://@239.255.1.1:4567
在本地UDP端口 888 接收流, “@”表示綁定一個地址,而不是連接該地址
C:\Program Files\VideoLAN\VLC>vlc.exeudp://@888
串流輸出,就是在播放的時候,以某種方式向外傳送視頻,在打開界面
的串流/保存 中設置會比較方便
例如,循環播放test.ts, 以rtp方式傳送到224.1.1.1端口1234, 同時顯示視頻
vlc.exe test.ts –loop:sout=#duplicate{dst=std{access=rtp,mux=ts,dst=224.1.1.1:1234},dst=display}
例如,接收UDP端口888,數據全部保存到C:\dump.ts
vlc.exe udp://@888 :demux=dump :demuxdump-file=”C:\dump.ts”
關于Windows下視頻輸出模塊
Direct3D :效果比DirectX差一點,但是方便截圖,也可以在圖像上實現alpha
DirectX:效果最好,利用DirectX的顯示加速
OpenGL:在不同的硬件上表現不太一樣
WinGDI:最慢的一種,不需要顯卡加速
caca:用彩色的Assic字符來顯示,很有意思
臨時啟用某個視頻輸出,可以這樣
C:\Program Files\VideoLAN\VLC-0.8.6e>vlc test.ts–vout=caca
ActiveX控件
官方發布的VLC自帶ActiveX控件 axvlc.dll,注冊之后可以方便的在應用程序和網頁
中使用VLC,注冊的辦法是
C:\Program Files\VideoLAN\VLC-0.8.6e>regsvr32axvlc.dll
ActiveX VLC的使用方法可以參考源代碼中ActiveX目錄的README.TXT和test.html
ActiveX控件的接口有第一版和第二版,第一版簡單,功能少,已經不再維護
建議用第二版本,功能多一點
Mozilla Plugin
你還可以在Windows和Linux的Firefox中使用VLC。Windows下可以在安裝VLC的時候選上
Mozillaplugin,事實上它做的就是在HKLM_Software_MozillaPlugin鍵下添加一個VLC的子鍵。
Linux下就不太清楚了,但是你可以把libvlcplugin.so(或者叫npvlc.so)和插件目錄
放到Firefox的plugins目錄,來使之生效。
同樣這適用于基于Xulrunner的應用程序,事實上像 Miro、SongBird等xul應用都是用的
這個插件。
與ActiveX類似的,VLC的Mozilla Plugin也有兩套接口,建議用新的第二版。
注冊表
在Windows下VLC只使用很少量的注冊表的信息,最重要的一條是HKLM_Software_VLC鍵
下的InstallDir項,VLC的Mozilla Plugin和ActiveX控件通過這一項來定位其插件的目錄
Telnet、Http控制
對VLC來說,控制界面都是Interface類的模塊,你可以使用各種控制模塊。Windows下
默認使用的是wxwidgets圖形界面,你還可以使用http、telnet等界面,來遠程控制VLC,
夠酷吧?如果你用VLC在服務器上專門作視頻流轉發一類的事情,這種遠程界面
可以幫上大忙。
視頻過濾器
0.8系列中有多達13種視頻過濾器,為視頻添加各種效果和特殊處理。用的比
較多的是反交錯deinterlace過濾器,在觀看MPEG2視頻時很有用。
Skin2界面
一個漂亮一點的,可以換膚的界面,覺得它不太穩定很少用。
其他的
播放DVD、VCD光盤,打開DirectShow設備,播放當前屏幕…很多好玩的功能可以去摸索一下
一些問題
目前的VLC無法播放Real視頻,如rm、rmvb。其實從0.9版本的VLC開始可以依賴其他解碼
器播放。但就目前測試的情況來看,順序播放沒問題,但是拖動則效果很差
RTSP的播放,拖動有問題,在獲取播放位置時有缺陷。例如和達爾文服務器的配合。
視頻播放的基本原理
當初看VLC代碼花了不少時間,其中很大的原因是不太了解視頻播放的基本原理。現在看來,幾乎所有的視頻播放器,如VLC、MPlayer、Xine,包括DirectShow,在播放視頻的原理和架構上都是非常相似的,理解這個對理解VLC的源碼會有事半功倍的效果。
大致的來說,播放一個視頻分為4個步驟:
1. acess 訪問,或者理解為接收、獲取、得到
2. demux 解復用,就是把通常合在一起的音頻和視頻分離(還有可能的字幕)
3. decode 解碼,包括音頻和視頻的解碼
4. output 輸出,也分為音頻和視頻的輸出(aout和vout)
拿 播放一個UDP組播的MPEGTS流來說吧,access部分負責從網絡接收組播流,放到VLC的內存緩沖區中,access模塊關注IP協議,如是否IPv6、組播地址、組播協議、端口等信息;如果檢測出來是RTP協議(RTP協議在UDP頭部簡單得加上了固定12個字節的信息),還要分析RTP頭部信息。這部分可以參看VLC源碼/modules/access/udp.c。在同目錄下還可以看到大量的access模塊,如file、http、dvd、ftp、smb、tcp、dshow、mms、v4l…等等
而demux部分首先要解析TS流的信息。TS格式是MPEG2協議的一部分,概括地說,TS通常是固定188字節的一個packet,一個TS流可以包含多個program(節目),一個program又可以包含多個視頻、音頻、和文字信息的ES流;每個ES流會有不同的PID標示。而又為了可以分析這些ES流,TS有一些固定的PID用來間隔發送program和es流信息的表格:PAT和PMT表。關于TS格式的詳細信息可以去google一下。
VLC專門做了一個獨立的庫libdvbpsi來解析和編碼TS流,而調用它的代碼可以參見VLC源碼/modules/demux/ts.c。
其實之所以需要demux,是因為音視頻在制作的時候實際上都是獨立編碼的,得到的是分開的數據,為了傳輸方便必須要用某種方式合起來,這就有了各種封裝格式也就有了demux。
demux分解出來的音頻和視頻流分別送往音頻解碼器和視頻解碼器。因為原始的音視頻都是占用大量空間,而且冗余度較高的數據,通常在制作的時候就會進行某種壓縮。這就是我們熟知的音視頻編碼格式,包括MPEG1(VCD)、MPEG2(DVD)、MPEG4、H.264、rmvb等等。音視頻解碼器的作用就是把這些壓縮了的數據還原成原始的音視頻數據。VLC解碼MPEG2使用了一個獨立的庫libmpeg2,調用它的源文件是/modules/codec/libmpeg2.c。VLC關于編解碼的模塊都放在/modules/codec目錄下,其中包括著名的龐大的 ffmpeg。
解碼器,例如視頻解碼器輸出的是一張一張的類似位圖格式的圖像,但是要讓人從屏幕看得到,還需要一個視頻輸出的模塊。當然可以像一個Win32窗口程序那樣直接把圖像畫到窗口DC上——VLC的一個輸出模塊WinGDI就是這么干的,但是通常這太慢了,而且消耗大量的CPU。在Windows下比較好的辦法是用DirectX的接口,會自動調用顯卡的加速功能。
這樣的功能分解使得模塊化更容易一點,每個模塊住需要專注于自己的事;從整體來說功能強大而且靈活。
但是事情總是不會那么簡單。就拿access來說,媒體的訪問是分層的,如RTSP就涉及到IPv4、TCP、UDP、RTCP、RTSP等多個層次的協議。有些視頻格式包括了傳輸、封裝格式和編輯碼格式如MPEG系列,有些封裝格式是獨立的容器,但是很多人會誤解它是編解碼格式,如mkv、avi這些。
音頻和視頻在demux之后就是獨立的,但是需要有一套機制把它們同步起來。同時我們需要有一套機制來控制速度、暫停、停止、跳進,獲取各種媒體信息,這些都是很復雜而又很重要的事情。
另外也許需要在某個地方插入一些修改,來實現某種效果。如音頻的EQ,視頻的亮度調整之類的,VLC專門設計了access_filter、audio_filter和video_filter類型的模塊來做這一類事情。
VLC比較獨特的地方是集成了原來的VLS的功能,這依賴于VLC中stream_output類型的模塊,它們可以把正在播放的視頻以某種方式重新轉碼和發送出去,如http、UDP、文件等等。
MPlayer的結構與此是類似的,如/stream目錄對應的是access的功能,/mpdemux對應的demux功能,/libmpcodecs是解碼器,/libvo和/libao2分別是視頻和音頻的輸出。
DirectShow也是類似的,不過分類更多一些更復雜一點。DirectShow里面的模塊叫做“filter”,filter之間通過”pin”來連接。access的模塊對應于DirectShow中的SourceFIlter,這一類Filter只有輸出pin沒有輸入pin。demux模塊對應于splitterfilter,這種filter有一個輸入pin,多個輸出pin。解碼模塊是一類transformfilter,有一個輸入pin、一個輸出pin,輸出模塊對應于readeringfilter,有一個輸入pin,沒有輸出pin。當然transform filter不一定是解碼器,也可能是某種其他的處理

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/news/447210.shtml
繁體地址,請注明出處:http://hk.pswp.cn/news/447210.shtml
英文地址,請注明出處:http://en.pswp.cn/news/447210.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

算法入門篇八 貪心算法

牛客網 左程云老師的算法入門課 貪心算法 貪心算法的解題步驟 例子 題目要求 解題策略 按照結束時間早的會議先安排,比如先安排【2,4】,當4結束了,所有開始時間小于4的全部淘汰,【1,7】、【3&#xff…

算法入門篇九 暴力遞歸

牛客網 左程云老師的算法入門課 暴力遞歸 原則 漢諾塔問題 問題 打印n層漢諾塔從左邊移動到最右邊的過程 思想 一共六個過程,左到右、左到中,中到左,中到右,右到左,右到中,互相嵌套使用 左到右 將1…

rtsp和sdp

RTSP 是由Realnetwork 和Netscape共同提出的如何有效地在IP網絡上傳輸流媒體數據的應用層協議 。 實時流協議(RTSP)建立并控制一個或幾個時間同步的連續流媒體,如音頻和視頻。盡管連續媒體流與控制流交叉是可能的,RTSP本身并不發…

使用javascript實現對于chineseocr的API調用

ChineseOCR在線API 網頁地址 界面 提供多種接口調用方式,比如在線調用、Javascript api調用、curl api調用和python api調用四種方式,本次使用javascript api調用的方式進行OCR識別在線Javascript工具 在線工具網頁鏈接在線Base64 轉化工具 在線工具…

移動流媒體業務的技術與標準

1 引言   流媒體業務是從Internet上發展起來的一種多媒體應用,指使用流(Streaming)方式在網絡上傳輸的多媒體文件,包括音頻、視頻和動畫等。   流媒體傳輸技術的主要特點是以流(streaming)的形式進行多…

使用python實現對于chineseocr的API調用

ChineseOCR在線API 網頁鏈接 界面 提供多種接口調用方式,比如在線調用、Javascript api調用、curl api調用和python api調用四種方式,本次使用javascript api調用的方式進行OCR識別在線Base64 轉化工具 Base64在線小工具代碼修改 新增一個變量fill_w…

UDP穿透NAT

NAT(Network AddressTranslators),網絡地址轉換: 網絡地址轉換是在IP地址日益缺乏的情況下產生的,它的主要目的就是為了能夠地址重用。NAT分為兩大類,基本的NAT和NAPT(Network Address/Port Translator)。 最開始NAT是運行在路由器…

算法入門篇十 圖

圖的存儲方式 臨接表臨接矩陣 表達 點集/邊集有向圖/無向圖 Graph&#xff08;大結構就是圖&#xff09;&#xff08;包含點集合和邊集合&#xff09; import java.util.HashMap; import java.util.HashSet;public class Graph {public HashMap<Integer, Node> nodes;…

SDP協議 學習筆記

SDP:Session Description ProtocolSDP格式:Session descriptionv (protocolversion)o (owner/creatorand session identifier)s (sessionname)i* (sessioninformation)u* (URI ofdescription)e* (emailaddress)p* (phonenumber)c*(connection information - not required if in…

以太坊私有鏈 使用dev模式

dev 使用dev模式&#xff0c;創建一個管理員賬號&#xff0c;控制挖礦&#xff0c;將證明機制改為POA啟動dev模式&#xff0c;需要重新創建一個文件夾&#xff0c;重新搭建私有鏈條 命令 mkdir myDevChain cd myDevChain geth --datadir . --dev console 2>output.log 實…

超文本傳輸協議

超文本傳輸協議 超文本傳輸協議超文件傳輸協定(HTTP&#xff0c;HyperTextTransfer Protocol)是因特網上應用最為廣泛的一種網絡傳輸協定。所有的WWW文件都必須遵守這個標準。設計HTTP最初的目的是為了提供一種發布和接收HTML頁面的方法。 目錄 介紹請求信息請求方法安全方法超…

以太坊區塊鏈 JSON-RPC

RPC定義 以太坊客戶端提供了API和一組遠程調用的&#xff08;RPC&#xff09;命令&#xff0c;這些命令被編碼成json的格式&#xff0c;被叫做JSON-RPC-API。本質上&#xff0c;JSON-RPC API就是一個接口&#xff0c;允許我們編寫的程序使用以太坊客戶端作為網關&#xff0c;訪…

利用MFC調用libvlc.dll作一個簡單的播放器

簡單介紹MFC調用libvlc.dll作一個簡單的播放器&#xff0c;拋磚引玉&#xff0c;各位VC達人繼續深入研究&#xff0c;Jeremiah對VC確實不太感興趣&#xff0c;所以就不做太深入的研究了。2009.10.29修改&#xff1a;加入clip_children屬性設置。參開第1步。環境&#xff1a; …

對于以太坊虛擬機 (EVM)及其相關知識的講解

以太坊虛擬機&#xff08;EVM&#xff09; EVM是智能合約的運行環境作為區塊驗證協議的一部分&#xff0c;參與網絡的每個節點都會運行EVM&#xff0c;審查節點會檢查驗證正在驗證的區塊中列出的交易&#xff0c;并運行EVM中交易觸發的代碼EVM是沙盒封裝的&#xff0c;并且是完…

對于以太坊的Solidity語言介紹

Solidity是什么 Solidity是一門面向合約的、為實現智能合約而創建的高級編程語言&#xff0c;主要目的是為了在以太坊虛擬機&#xff08;EVM&#xff09;上運行Solidity是靜態語言&#xff0c;支持繼承、庫和復雜的用戶定義等特性內含的類型除了常見的編程語言中的標準類型&am…

live555 接收rtsp視頻流流程分析

live555 接收rtsp視頻流流程分析 RTSP交互流程 C表示RTSP客戶端&#xff0c;S表示RTSP服務端 ① C->S: OPTIONrequest //詢問S有哪些方法可用 S->C: OPTION response //S回應信息中包括提供的所有可用方法 ② C->S: DESCRIBErequest //要求得到S…

使用Remix編寫Solidity語言的小例子

設置數值/取數值/加法運算 講解 uint默認使用256位數的整型view表示這個函數僅僅對于數據僅僅是讀取&#xff0c;沒有修改操作returns(uint )&#xff0c;如果單純指定uint&#xff0c;返回的是函數體內的return值&#xff0c;如果包含uint sum,uint SAD_a&#xff0c;那么返…

RTP協議棧簡介

流媒體指的是在網絡中使用流技術傳輸的連續時基媒體&#xff0c;其特點是在播放前不需要下載整個文件&#xff0c;而是采用邊下載邊播放的方式&#xff0c;它是視頻會議、IP電話等應用場合的技術基礎。RTP是進行實時流媒體傳輸的標準協議和關鍵技術&#xff0c;本文介紹如何在L…

深入理解Solidity

Solidity源文件布局 pragma&#xff08;版本雜注&#xff09; 用于指定源文件的版本&#xff0c;表明編譯器的版本&#xff0c;例如 pragma solidity ^0.4.0^用于指代版本號需要大于0.4.0但是不可以超過大的層級&#xff0c;必須小于0.5.0也可以使用大于等于小于來指定版本 i…

H264 流媒體 編碼匯總

實時傳輸協議&#xff08;RTP&#xff09;和實時控制協議&#xff08;RTCP&#xff09; RTP是一種提供端對端傳輸服務的實時傳輸協議&#xff0c;用來支持在單目標廣播和多目標廣播網絡服務中傳輸實時數據&#xff0c;而實時數據的傳輸則由RTCP協議來監視和控制。 RTP定義在RFC…