五月激情开心网,五月天激情社区,国产a级域名,婷婷激情综合,深爱五月激情网,第四色网址

媒體技術(shù)優(yōu)選九篇

時(shí)間:2022-11-06 19:18:51

引言:易發(fā)表網(wǎng)憑借豐富的文秘實(shí)踐,為您精心挑選了九篇媒體技術(shù)范例。如需獲取更多原創(chuàng)內(nèi)容,可隨時(shí)聯(lián)系我們的客服老師。

媒體技術(shù)

第1篇

1、流媒體的出現(xiàn)

    長(zhǎng)期以來(lái),由于受到網(wǎng)路帶寬的限制,互聯(lián)網(wǎng)上的數(shù)據(jù)都是以文字、圖片之類的靜態(tài)內(nèi)容為主,而那些音頻、視頻數(shù)據(jù)很難在網(wǎng)上,因?yàn)橐话惴菈嚎s的廣播級(jí)品質(zhì)視頻需要160Mbps的網(wǎng)絡(luò)帶寬;非壓縮CD音質(zhì)的音頻則需要大約2.8Mbps的網(wǎng)絡(luò)帶寬。目前大部分網(wǎng)絡(luò)用戶的帶寬還只是56Kbps,這與音頻、視頻的傳播要求相差甚遠(yuǎn)。網(wǎng)絡(luò)帶寬很難在短期內(nèi)得到迅速提升,因此要實(shí)現(xiàn)網(wǎng)上音頻、視頻傳播就必須在傳播文件本身下功夫,這樣就出現(xiàn)了流媒體(Streaming media)。所謂流媒體是指采用流式傳輸?shù)姆绞皆贗nternet播放的媒體格式,而流式傳輸方式則是將整個(gè)A/V及3D等多媒體文件經(jīng)過特殊的壓縮方式分成一個(gè)個(gè)壓縮包,由視頻服務(wù)器向用戶計(jì)算機(jī)連續(xù)、實(shí)時(shí)傳送。

     流媒體技術(shù)的開發(fā)創(chuàng)意是從傳統(tǒng)的TCP/IP協(xié)議對(duì)通過網(wǎng)絡(luò)傳送信息的控制方法中得到的。當(dāng)我們通過TCP/IP協(xié)議下載文件時(shí),服務(wù)器會(huì)按照一定的次序?qū)⑽募殖扇舾蓚€(gè)獨(dú)立的數(shù)據(jù)包,然后依次發(fā)送出去。而客戶端的程序會(huì)將這些數(shù)據(jù)包重新組裝起來(lái),最終形成和原來(lái)完全一樣的完整的文件。這時(shí)候,我們就可以對(duì)這個(gè)文件進(jìn)行任何可能的操作了。流技術(shù)則不然。流技術(shù)能夠按照特定的順序?qū)⑽募l(fā)送出去,而播放程序則可以邊接收數(shù)據(jù)邊播放他們。

2、流媒體形式簡(jiǎn)介

    目前,在Internet/Intranet上提供流媒體服務(wù)的軟件中應(yīng)用廣泛、成熟的產(chǎn)品還不多。 根據(jù)媒體形式的不同,流媒體可分為如下五類:

1)、流式音頻。網(wǎng)上流式音頻主要有數(shù)字化聲音、音樂和語(yǔ)音識(shí)別三種形式,如ToolVox,RealAudio,Crescendo MIDI等。

2)、流式視頻。如VDO Net公司的VDO Live,CISCO公司的IP/TV, XING Technology公司的StreamWorks等。

3)、流式動(dòng)畫。如Macromedia公司的FLASH矢量動(dòng)畫。

4)、流式圖象。新推出的RealPlayer G2支持RealPix流式圖象文件格式。

5)、流式文本。新推出的RealPlayer G2支持RealText流式文本文件格式。

二、流媒體實(shí)現(xiàn)的關(guān)鍵技術(shù)---流式傳輸

    流式傳輸?shù)亩x很廣泛,現(xiàn)在主要指通過網(wǎng)絡(luò)傳送媒體(如視頻、音頻等)的技術(shù)總稱。其特定含義為通過INTERNET將影視節(jié)目傳送到PC機(jī)。

1、 流式傳輸?shù)姆绞?/p>

     實(shí)現(xiàn)流式傳輸有兩種方法:順序流式傳輸(progressive streaming)和實(shí)時(shí)流式傳輸(Realtime streaming)。

1)、順序流式傳輸(progressive streaming)

     順序流式傳輸是順序下載,在下載文件的同時(shí)用戶可觀看再線媒體,在給定時(shí)刻,用戶只能觀看已下載的那部分,而不能跳到還未下載的前頭部分,順序流式傳輸不象實(shí)時(shí)流式傳輸在傳輸期間根據(jù)用戶連接的速度做調(diào)整。由于標(biāo)準(zhǔn)的HTTP服務(wù)器可發(fā)送這種形式的文件,也不需要其他特殊協(xié)議,它經(jīng)常被稱作HTTP流式傳輸。順序流式傳輸比較適合高質(zhì)量的短片段,如片頭、片尾和廣告,由于該文件在播放前觀看的部分是無(wú)損下載的,這種方法保證電影播放的最終質(zhì)量。這意味著用戶在觀看前,必須經(jīng)歷延遲,對(duì)較慢的連接尤其如此。

     順序流式文件是放在標(biāo)準(zhǔn)HTTP 或 FTP服務(wù)器上,易于管理,基本上與防火墻無(wú)關(guān)。順序流式傳輸不適合長(zhǎng)片段和有隨機(jī)訪問要求的視頻,如:講座、演說(shuō)與演示。它也不支持現(xiàn)場(chǎng)廣播,嚴(yán)格說(shuō)來(lái),它是一種點(diǎn)播技術(shù)。

2)、實(shí)時(shí)流式傳輸(Realtime streaming)

     實(shí)時(shí)流式傳輸總是實(shí)時(shí)傳送,特別適合現(xiàn)場(chǎng)事件,也支持隨機(jī)訪問,用戶可快進(jìn)或后退以觀看前面或后面的內(nèi)容。理論上,實(shí)時(shí)流一經(jīng)播放就可不停止,但實(shí)際上,可能發(fā)生周期暫停。

    實(shí)時(shí)流式傳輸必須配匹連接帶寬,這意味著在以調(diào)制解調(diào)器速度連接時(shí)圖象質(zhì)量較差。而且,由于出錯(cuò)丟失的信息被忽略掉,網(wǎng)絡(luò)擁擠或出現(xiàn)問題時(shí),視頻質(zhì)量很差。如欲保證視頻質(zhì)量,順序流式傳輸也許更好。實(shí)時(shí)流式傳輸需要特定服務(wù)器,如QuickTime Streaming Server、RealServer與Windows Media Server。這些服務(wù)器允許你對(duì)媒體發(fā)送進(jìn)行更多級(jí)別的控制,因而系統(tǒng)設(shè)置、管理比標(biāo)準(zhǔn)HTTP服務(wù)器更復(fù)雜。實(shí)時(shí)流式傳輸還需要特殊網(wǎng)絡(luò)協(xié)議,如:RTSP (Realtime Streaming Protocol)或MMS (Microsoft Media Server)。這些協(xié)議在有防火墻時(shí)有時(shí)會(huì)出現(xiàn)問題,導(dǎo)致用戶不能看到一些地點(diǎn)的實(shí)時(shí)內(nèi)容。

2、流式傳輸?shù)脑?/p>

1)流式傳輸?shù)膶?shí)現(xiàn)途徑與過程

     首先,多媒體數(shù)據(jù)必須進(jìn)行預(yù)處理才能適合流式傳輸,這是因?yàn)槟壳暗木W(wǎng)絡(luò)帶寬對(duì)多媒體巨大的數(shù)據(jù)流量來(lái)說(shuō)還顯得遠(yuǎn)遠(yuǎn)不夠。預(yù)處理主要包括兩方面:一是降低質(zhì)量;二是采用先進(jìn)高效的壓縮算法。

    其次,流式傳輸?shù)膶?shí)現(xiàn)需要緩存。這是因?yàn)镮nternet是以包傳輸為基礎(chǔ)進(jìn)行斷續(xù)的異步傳輸。數(shù)據(jù)在傳輸中它們要被分解為許多包,由于網(wǎng)絡(luò)是動(dòng)態(tài)變化的,各個(gè)包選擇的路由可能不盡相同,故到達(dá)客戶端的時(shí)間延遲也就不等。為此,使用緩存系統(tǒng)來(lái)彌補(bǔ)延遲和抖動(dòng)的影響,并保證數(shù)據(jù)包的順序正確,從而使媒體數(shù)據(jù)能連續(xù)輸出,而不會(huì)因網(wǎng)絡(luò)暫時(shí)擁塞使播放出現(xiàn)停頓。

    再次,流式傳輸?shù)膶?shí)現(xiàn)需要合適的傳輸協(xié)議。WWW技術(shù)是以HTTP協(xié)議為基礎(chǔ)的,而HTTP又建立在TCP協(xié)議基礎(chǔ)之上。由于TCP需要較多的開銷,故不太適合傳輸實(shí)時(shí)數(shù)據(jù)。在流式傳輸?shù)膶?shí)現(xiàn)方案中,一般采用HTTP/TCP來(lái)傳輸控制信息,而用RTP/UDP來(lái)傳輸實(shí)時(shí)聲音數(shù)據(jù)。 2) 、支持流媒體傳輸?shù)木W(wǎng)絡(luò)協(xié)議

A、實(shí)時(shí)傳輸協(xié)議RTP與RTCP

RTP: 實(shí)時(shí)傳輸協(xié)議(Real-timeTransportProtocol)一種用于Internet上針對(duì)多媒體數(shù)據(jù)流的一種傳輸協(xié)議。

RPCP: 實(shí)時(shí)傳輸控制協(xié)議(Real-timeTransportControlProtocol)和RTP一起提供流量控制和擁塞控制服務(wù)。

    RTP是用于Internet上針對(duì)多媒體數(shù)據(jù)流的一種傳輸協(xié)議。RTP被定義為在一對(duì)一或一對(duì)多的傳輸情況下工作,其目的是提供時(shí)間信息和實(shí)現(xiàn)流同步。RTP通常使用UDP來(lái)傳送數(shù)據(jù),但RTP也可以在TCP或ATM等其他協(xié)議之上工作。當(dāng)應(yīng)用程序開始一個(gè)RTP會(huì)話時(shí)將使用兩個(gè)端口:一個(gè)給RTP,一個(gè)給RTCP。RTP本身并不能為按順序傳送數(shù)據(jù)包提供可靠的傳送機(jī)制,也不提供流量控制或擁塞控制,它依靠RTCP提供這些服務(wù)。通常RTP算法并不作為一個(gè)獨(dú)立的網(wǎng)絡(luò)層來(lái)實(shí)現(xiàn),而是作為應(yīng)用程序代碼的一部分。

     實(shí)時(shí)傳輸控制協(xié)議RTCP和RTP一起提供流量控制和擁塞控制服務(wù)。在RTP會(huì)話期間,各參與者周期性地傳送RTCP包。RTCP包中含有已發(fā)送的數(shù)據(jù)包的數(shù)量、丟失的數(shù)據(jù)包的數(shù)量等統(tǒng)計(jì)資料,因此,服務(wù)器可以利用這些信息動(dòng)態(tài)地改變傳輸速率,甚至改變有效載荷類型。RTP和RTCP配合使用,它們能以有效的反饋和最小的開銷使傳輸效率最佳化,因而特別適合傳送網(wǎng)上的實(shí)時(shí)數(shù)據(jù)。 B、 時(shí)流協(xié)議RTSP

    RTSP:實(shí)時(shí)流協(xié)議 (RealTimeStreamingProtocol) 定義了一對(duì)多的應(yīng)用程序如何有效地通過IP網(wǎng)絡(luò)傳送多媒體數(shù)據(jù)。

     實(shí)時(shí)流協(xié)議RTSP(RealTimeStreamingProtocol)是由RealNetworks和Netscape共同提出的,該協(xié)議定義了一對(duì)多應(yīng)用程序如何有效地通過IP網(wǎng)絡(luò)傳送多媒體數(shù)據(jù)。RTSP在體系結(jié)構(gòu)上位于RTP和RTCP之上,它使用TCP或RTP完成數(shù)據(jù)傳輸。HTTP與RTSP相比,HTTP傳送HTML,而RTP傳送的是多媒體數(shù)據(jù)。HTTP請(qǐng)求由客戶機(jī)發(fā)出,服務(wù)器作出響應(yīng);使用RTSP時(shí),客戶機(jī)和服務(wù)器都可以發(fā)出請(qǐng)求,即RTSP可以是雙向的。

C、資源預(yù)訂協(xié)議RSVP協(xié)議

     RSVP:資源預(yù)訂協(xié)議(ResourceReserveProtocol )正在開發(fā)的Internet上的資源預(yù)訂協(xié)議。

    由于音頻和視頻數(shù)據(jù)流比傳統(tǒng)數(shù)據(jù)對(duì)網(wǎng)絡(luò)的延時(shí)更敏感,要在網(wǎng)絡(luò)中傳輸高質(zhì)量的音頻、視頻信息,除帶寬要求之外,還需其他更多的條件。 使用RSVP預(yù)留一部分網(wǎng)絡(luò)資源(即帶寬),能在一定程度上為流媒體的傳輸提供方便

3) 、識(shí)別流媒體類型的途徑--MIME

     Web服務(wù)器和Web瀏覽器如何識(shí)別流媒體并進(jìn)行相應(yīng)的處理呢?答案是MIME。MIME是MultipurposeInternet MailExtensions(通用因特網(wǎng)郵件擴(kuò)展)的縮略詞。它不僅用于電子郵件,還能用來(lái)標(biāo)記在Internet上傳輸?shù)娜魏挝募愋汀eb服務(wù)器和Web瀏覽器都基于HTTP協(xié)議,而HTTP都內(nèi)建有MIME。HTTP正是通過MIME標(biāo)記Web上繁多的多媒體文件格式。

     流式傳輸?shù)倪^程一般是這樣的:

1、 用戶選擇某一流媒體服務(wù)后,Web瀏覽器與Web服務(wù)器之間使用HTTP/TCP交換控制信息,以便把需要傳輸?shù)膶?shí)時(shí)數(shù)據(jù)從原始信息中檢索出來(lái)

2、 然后客戶機(jī)上的Web瀏覽器啟動(dòng)A/VHelper程序,使用HTTP從Web服務(wù)器檢索相關(guān)參數(shù)對(duì)Helper程序初始化。這些參數(shù)可能包括目錄信息、A/V數(shù)據(jù)的編碼類型或與A/V檢索相關(guān)的服務(wù)器地址。

3、 A/VHelper程序及A/V服務(wù)器運(yùn)行實(shí)時(shí)流控制協(xié)議(RTSP),以交換A/V傳輸所需的控制信息。與CD播放機(jī)或VCRs所提供的功能相似,RTSP提供了操縱播放、快進(jìn)、快倒、暫停及錄制等命令的方法。

4、 A/V服務(wù)器使用RTP/UDP協(xié)議將A/V數(shù)據(jù)傳輸給A/V客戶程序(一般可認(rèn)為客戶程序等同于Helper程序),一旦A/V數(shù)據(jù)抵達(dá)客戶端,A/V客戶程序即可播放輸出。

    需要說(shuō)明的是,在流式傳輸中,使用RTP/UDP和RTSP/TCP兩種不同的通信協(xié)議與A/V服務(wù)器建立聯(lián)系,是為了能夠把服務(wù)器的輸出重定向到一個(gè)不同于運(yùn)行A/VHelper程序所在客戶機(jī)的目的地址。實(shí)現(xiàn)流式傳輸一般都需要專用服務(wù)器和播放器,其基本原理如圖一所示。

三、流媒體的播放方式

1、 單播

    在客戶端與媒體服務(wù)器之間需要建立一個(gè)單獨(dú)的數(shù)據(jù)通道,從一臺(tái)服務(wù)器送出的每個(gè)數(shù)據(jù)包只能傳送給一個(gè)客戶機(jī),這種傳送方式稱為單播。每個(gè)用戶必須分別對(duì)媒體服務(wù)器發(fā)送單獨(dú)的查詢,而媒體服務(wù)器必須向每個(gè)用戶發(fā)送所申請(qǐng)的數(shù)據(jù)包拷貝。這種巨大冗余首先造成服務(wù)器沉重的負(fù)擔(dān),響應(yīng)需要很長(zhǎng)時(shí)間,甚至停止播放;管理人員也被迫購(gòu)買硬件和帶寬來(lái)保證一定的服務(wù)質(zhì)量。

2、 組播

    IP組播技術(shù)構(gòu)建一種具有組播能力的網(wǎng)絡(luò),允許路由器一次將數(shù)據(jù)包復(fù)制到多個(gè)通道上。采用組播方式,單臺(tái)服務(wù)器能夠?qū)资f(wàn)臺(tái)客戶機(jī)同時(shí)發(fā)送連續(xù)數(shù)據(jù)流而無(wú)延時(shí)。媒體服務(wù)器只需要發(fā)送一個(gè)信息包,而不是多個(gè);所有發(fā)出請(qǐng)求的客戶只需連結(jié)到這個(gè)數(shù)據(jù)流而不是連結(jié)到視頻服務(wù)器,從而降低帶寬的使用。網(wǎng)絡(luò)利用效率大大提高,成本大為下降。

3、 點(diǎn)播與廣播

     點(diǎn)播連接是客戶端與服務(wù)器之間的主動(dòng)的連接。在點(diǎn)播連接中,用戶通過選擇內(nèi)容項(xiàng)目來(lái)初始化客戶端連接。用戶可以開始、停止、后退、快進(jìn)或暫停流。點(diǎn)播連接提供了對(duì)流的最大控制,但這種方式由于每個(gè)客戶端各自連接服務(wù)器,卻會(huì)迅速用完網(wǎng)絡(luò)帶寬。

     廣播指的是用戶被動(dòng)接收流。在廣播過程中,客戶端接收流,但不能控制流。例如,用戶不能暫停、快進(jìn)或后退該流。廣播方式中數(shù)據(jù)包的單獨(dú)一個(gè)拷貝將發(fā)送給網(wǎng)絡(luò)上的所有用戶,而不管用戶是否需要。

     使用單播發(fā)送和廣播方式發(fā)送的方式會(huì)非常浪費(fèi)網(wǎng)絡(luò)帶寬,組播吸收了上述兩種發(fā)送方式的長(zhǎng)處,克服了上述兩種發(fā)送方式的弱點(diǎn),組播不會(huì)復(fù)制數(shù)據(jù)包的多個(gè)拷貝傳輸?shù)骄W(wǎng)絡(luò)上,也不會(huì)將數(shù)據(jù)包發(fā)送給不需要它的那些客戶,保證了網(wǎng)絡(luò)上多媒體應(yīng)用占用網(wǎng)絡(luò)的最小帶寬。

四、流媒體的文件格式

1、 壓縮媒體文件格式

     壓縮格式有時(shí)被稱為壓縮媒體格式,包含了描述一段聲音和圖象的同樣信息,盡管它的文件大小被處理得更小。很明顯,壓縮過程改變了數(shù)據(jù)位的編排。在壓縮媒體文件再次成為媒體格式前,其中數(shù)據(jù)需要解壓縮。由于壓縮過程自動(dòng)進(jìn)行,并內(nèi)嵌在媒體文件格式中,通常我們?cè)诖鎯?chǔ)文件時(shí)沒有注意到這點(diǎn)。該過程如圖二所示。

 

2、 流式文件格式

    流式文件格式經(jīng)過特殊編碼,使其適合在網(wǎng)絡(luò)上邊下載邊播放,而不是等到下載完整個(gè)文件才能播放。可以在網(wǎng)上以流的方式播放標(biāo)準(zhǔn)媒體文件,但效率不高。將壓縮媒體文件編碼成流式文件,必須假如一些附加信息,如計(jì)時(shí)、壓縮和版權(quán)信息。編碼過程如圖三所示。表一列舉了常用的流式文件類型。

3、媒體格式

    媒體格式不是壓縮格式,也不是傳輸協(xié)議,其本身并不描述視聽數(shù)據(jù),也不提供編碼方法。媒體格式是視聽數(shù)據(jù)安排的唯一途徑,物理數(shù)據(jù)無(wú)關(guān)緊要,我們僅需要知道數(shù)據(jù)類型和安排方式。以特定方式安排數(shù)據(jù)有助于流式多媒體的發(fā)展,因?yàn)槲覀兿M幸粋€(gè)開放媒體格式為所有商業(yè)流式產(chǎn)品應(yīng)用,為應(yīng)用不同壓縮標(biāo)準(zhǔn)和媒體文件格式格式的媒體提供一個(gè)事實(shí)上的標(biāo)準(zhǔn)方法。我們也可從以相同格式同步不同類型流中獲益。 總有一天,單個(gè)媒體格式能包含不同類型媒體的所有信息,如計(jì)時(shí)、多個(gè)流同步、版權(quán)和所有人信息。實(shí)際視聽數(shù)據(jù)可位于多個(gè)文件中,而由媒體文件包含的信息控制流的播放。常用媒體格式如表二所示。

五、媒體服務(wù)器

1、媒體服務(wù)器的硬件平臺(tái)

     視頻服務(wù)器的工作模式是當(dāng)服務(wù)器響應(yīng)客戶的視頻流后,從存儲(chǔ)系統(tǒng)讀入一部分視頻數(shù)據(jù)到對(duì)應(yīng)于這個(gè)視頻流的特定的緩存中,然后此緩存中的內(nèi)容送入網(wǎng)絡(luò)接口發(fā)送到客戶。當(dāng)一個(gè)新的客戶請(qǐng)求視頻服務(wù)時(shí),服務(wù)器根據(jù)系統(tǒng)資源的使用情況,決定是否響應(yīng)此請(qǐng)求。系統(tǒng)的資源包括存儲(chǔ)I/O的帶寬、網(wǎng)絡(luò)帶寬、內(nèi)存大小和CPU的使用率。

1) 、目前有三中類型的視頻服務(wù)器結(jié)構(gòu):

A、通用主機(jī)方法

     最早的通用視頻服務(wù)器采用計(jì)算機(jī)主機(jī)來(lái)實(shí)現(xiàn)其功能,它運(yùn)行在一個(gè)標(biāo)準(zhǔn)的操作系統(tǒng)上,如UNIX系統(tǒng),硬件由一系列眾多的的視頻磁盤陣列組成。視頻服務(wù)器的主要功能是存儲(chǔ)、選擇、傳送大量的數(shù)據(jù),卻很少進(jìn)行數(shù)據(jù)處理。因此,將主機(jī)作為視頻服務(wù)器既不利于發(fā)揮主機(jī)的主要功能,有增加了系統(tǒng)的成本,因?yàn)楸仨毺峁┐罅康牟⒎潜仨毜挠布蛙浖R虼耍斜匾芯烤哂袑iT的功能、結(jié)構(gòu)簡(jiǎn)單的視頻服務(wù)器。

B、緊耦合多處理機(jī)

     按照視頻服務(wù)器功能要求,制作出大量完成某項(xiàng)指令或?qū)iT功能的硬件單元,然后將相關(guān)單元組合成相應(yīng)的專用系統(tǒng)。這些系統(tǒng)有的擅長(zhǎng)創(chuàng)建靜止圖象,有的是數(shù)據(jù)庫(kù)管理器,還有的是網(wǎng)絡(luò)設(shè)備和其它動(dòng)態(tài)視頻的數(shù)據(jù)庫(kù)。最后將這些系統(tǒng)級(jí)聯(lián)起來(lái)構(gòu)成緊耦合多處理機(jī)實(shí)現(xiàn)的視頻服務(wù)器。這種服務(wù)器費(fèi)用低、性能高、功能強(qiáng),具有解決專項(xiàng)問題的特征,但節(jié)目受到一定的限制,擴(kuò)展性較差。

C、調(diào)諧視頻服務(wù)器

     調(diào)諧視頻服務(wù)器的主板有一個(gè)有獨(dú)特微碼的嵌入式仿真器控制。磁盤控制器、ATM打包器和記帳計(jì)算機(jī)接口都利用這些極高速的仿真器來(lái)提供它們的功能和各功能塊間的通訊。仿真器是通過特殊的寄存器總線和微碼緊密耦合的。調(diào)諧視頻服務(wù)器的結(jié)構(gòu)是可擴(kuò)展的。只要在主板中插入更多的服務(wù)通路,就可以達(dá)到擴(kuò)容的目的。

2、 視頻服務(wù)器的軟件平臺(tái)

     網(wǎng)絡(luò)視頻平臺(tái)包括媒體內(nèi)容制作、發(fā)行與管理模塊、用戶管理模塊、視頻服務(wù)器。內(nèi)容制作涉及視頻采集、編碼。發(fā)行模塊負(fù)責(zé)將節(jié)目提交到網(wǎng)頁(yè),或?qū)⒁曨l流地址郵寄給用戶。內(nèi)容管理主要完成視頻存儲(chǔ)、查詢;節(jié)目不多時(shí)可使用文件系統(tǒng),當(dāng)節(jié)目量大,就必須編制數(shù)據(jù)庫(kù)管理系統(tǒng)。用戶管理可能包括用戶的登記和授權(quán)。視頻服務(wù)器將內(nèi)容通過點(diǎn)播或直播的方式播放。對(duì)范圍廣、用戶多的播放,可在不同區(qū)域的中心(如中國(guó)華東上海、華北北京、華中武漢等)建立相應(yīng)的分發(fā)中心,協(xié)同完成播放。此外,對(duì)商業(yè)站點(diǎn),還應(yīng)包括計(jì)費(fèi)系統(tǒng)等。網(wǎng)絡(luò)視頻播放的結(jié)構(gòu)如圖三所示。

1)任務(wù)服務(wù)(Session Service)

    建立和維持客戶和服務(wù)器之間的通信通道;為特定的客戶設(shè)備管理一系列的服務(wù)器資源;每一個(gè)客戶設(shè)備只分配一個(gè)任務(wù)。

2)內(nèi)容服務(wù)(Content Service)

其操作過程如下:

⑴、 為當(dāng)前的一個(gè)或多個(gè)視頻主題查詢內(nèi)容;

⑵、 容服務(wù)返回一個(gè)與所需要的視頻內(nèi)容相關(guān)聯(lián)的"assetcookie";

⑶、 客戶把"assetcookie"交給流服務(wù),準(zhǔn)備視頻內(nèi)容"流化"

⑷、 流服務(wù)用節(jié)目解析器解析出"assetcookie";

⑸、 流服務(wù)定位MDS中所關(guān)聯(lián)的節(jié)目?jī)?nèi)容;

⑹、 流服務(wù)指引"視頻泵""流出"節(jié)目?jī)?nèi)容到客戶端。

3)流服務(wù)(StreamService)

    流服務(wù)指引"視頻泵"(VideoPump)以實(shí)時(shí)流的形式分發(fā)數(shù)據(jù)(MPEG-1或MPEG-2傳輸流)到客戶端;同"視頻泵"一起執(zhí)行VCR控制功能(暫停、繼續(xù)、快進(jìn)、快退);客戶端通過媒體網(wǎng)絡(luò)(MediaNet)以流(MediaNetStream)的形式接收BLOB數(shù)據(jù);

     -BLOB(BinaryLargeOBject)二進(jìn)制大對(duì)象,如bitmap(位圖)、imagestills(靜止畫面)及客戶需要下載供本地訪問的一些存儲(chǔ)在VS中的數(shù)據(jù),以可靠方式傳輸(通過MN),而實(shí)時(shí)視頻流的傳輸往往被認(rèn)為是不可靠的(如圖五)。

4)媒體數(shù)據(jù)存儲(chǔ)服務(wù)(MediaDataStoreService-MDS)

     進(jìn)行文件管理(創(chuàng)建、存儲(chǔ)、修改、刪除)及目錄管理功能;當(dāng)"視 頻泵"(videopump)要"播"一個(gè)視頻文件時(shí),它先給MDS目錄服務(wù)器(MDSDirectoryServer)發(fā)一個(gè)消息打開文件,然后從該目錄服務(wù)器得到這個(gè)文件的磁盤布局?jǐn)?shù)據(jù);由于影像文件都很大,視頻服務(wù)器采用RAID(Redundant Arrays of Inexpensive Disks)存儲(chǔ)影像文件;所有用來(lái)存儲(chǔ)影像節(jié)目文件的磁盤稱作一個(gè)卷(volume),每個(gè)卷都有一個(gè)TOC(table of contents),存儲(chǔ)卷里面的文件及它們?cè)诖疟P陣列的位置,TOC的大小決定了一個(gè)卷能存儲(chǔ)文件的個(gè)數(shù);AStripe是卷上所有磁盤同樣大小的一塊存儲(chǔ)空間;Striping是把一個(gè)文件分散成片(塊)存儲(chǔ)在不同的磁盤上,可以減少單塊盤的訪問次數(shù)和時(shí)間,以利于并發(fā)流的處理;存儲(chǔ)節(jié)目時(shí),先存tableofcontents(如文件的大小、創(chuàng)建的時(shí)間、在磁盤陣列中的位置等),然后橫跨磁盤連續(xù)地存儲(chǔ),每一塊盤上存一個(gè)stripe,當(dāng)寫完第一個(gè)RAID后,繼續(xù)下一個(gè)RAID,當(dāng)寫到最后一個(gè)RAID的最后一塊硬盤時(shí),又從第一個(gè)RAID寫起。當(dāng)最后一個(gè)stripe沒寫滿時(shí),會(huì)留下空的小塊,下次寫盤時(shí),又從下一個(gè)RAID開始寫盤;因?yàn)椴捎肦AID存儲(chǔ)機(jī)制,當(dāng)硬盤出現(xiàn)故障,不影響視頻服務(wù)器正常運(yùn)行,數(shù)據(jù)不會(huì)丟失。視頻服務(wù)器還支持"熱插拔"(hot-swap)磁盤。

5)文件(節(jié)目)上傳和下載(FTPService)

     視頻服務(wù)器提供遠(yuǎn)程訪問MDS的能力,即mdsftp。遠(yuǎn)程客戶計(jì)算機(jī) 運(yùn)行FTP即可上傳和下載視頻服務(wù)器中的MDS文件(影像節(jié)目文件),如圖六所示。

    視頻服務(wù)器還提供遠(yuǎn)程兩臺(tái)視頻服務(wù)器之間上傳和下載MDS文件(影 像節(jié)目文件)的能力,這特別適合分布式大規(guī)模VOD系統(tǒng)的實(shí)現(xiàn)。

6)RTSP服務(wù)

     RTSP(RealTimeStreamingProtocol)服務(wù)處理客戶與服務(wù)器之間的 通信任務(wù);接收客戶基于RTSP協(xié)議的請(qǐng)求;把請(qǐng)求映射為適當(dāng)?shù)幕诿襟w網(wǎng)絡(luò)(MN)的視頻服務(wù)器呼叫;執(zhí)行呼叫到合適的視頻服務(wù)器進(jìn)程;轉(zhuǎn)發(fā)視頻服務(wù)器應(yīng)答并返回給客戶如圖七。

六、未來(lái)屬于流媒體

     人們常說(shuō)互聯(lián)網(wǎng)是一場(chǎng)革命,實(shí)際上在流媒體全面發(fā)展之前,這場(chǎng)革命是不徹底的。沒有流媒體的互聯(lián)網(wǎng)無(wú)聲無(wú)影,所謂"虛擬的世界"的說(shuō)法名與實(shí)相去太遠(yuǎn)。流媒體技術(shù)全面應(yīng)用后,人們?cè)诰W(wǎng)上聊天就不必用文字表達(dá)自己的語(yǔ)言了,直接語(yǔ)音輸入就行了。如果想彼此看見對(duì)方的容貌、表情,只要雙方各有一個(gè)攝像頭就可以了;電子商務(wù)的貨品展示也不再限于圖片的二維觀看了,看到感興趣的商品,點(diǎn)擊后,就會(huì)有講解員和商品的影像出現(xiàn),可以達(dá)到與現(xiàn)實(shí)完全一致的展示效果,而且你可以與講解員進(jìn)行現(xiàn)場(chǎng)交流;網(wǎng)上新聞也不僅僅只能用文字和圖片表達(dá),更有真實(shí)感的影像新聞也會(huì)出現(xiàn)。非但如此,流媒體還將給互聯(lián)網(wǎng)帶來(lái)全新的內(nèi)容,如網(wǎng)絡(luò)電視、網(wǎng)絡(luò)影院、網(wǎng)上教育等。

流媒體發(fā)端于美國(guó),目前的流媒體技術(shù)都源于美國(guó),而且美國(guó)的帶寬比國(guó)內(nèi)豐富得多,因此流媒體在美國(guó)的應(yīng)用已經(jīng)非常廣泛。像如今在美國(guó)如火如荼的MP3.COM就是得益于流媒體技術(shù). 網(wǎng)絡(luò)電視,相對(duì)于傳統(tǒng)電視,它的優(yōu)勢(shì)是:

第一,提升電視臺(tái)的形象,在國(guó)內(nèi)眾多的電視臺(tái)網(wǎng)站中,能夠把電視臺(tái)最大的優(yōu)勢(shì)資源--視頻節(jié)目在互聯(lián)網(wǎng)上進(jìn)行全面應(yīng)用的電視臺(tái)并不多,網(wǎng)絡(luò)電視能夠馬上提升電視臺(tái)的國(guó)內(nèi)國(guó)際形象。

第二,網(wǎng)絡(luò)電視是一個(gè)全互動(dòng)的電視概念,它是雙向的,對(duì)電視臺(tái)和觀眾的溝通反饋起著非常大的作用,傳統(tǒng)電視這方面是相當(dāng)弱的,基本上,它是單向的。

第三,網(wǎng)絡(luò)電視除了能在互聯(lián)網(wǎng)上進(jìn)行廣播外,它還能讓全世界的網(wǎng)民對(duì)電視節(jié)目進(jìn)行點(diǎn)播,想看什么就看什么,想什么時(shí)候看就什么時(shí)候看。傳統(tǒng)電視能做到這一點(diǎn)嗎?不能。

第2篇

關(guān)鍵詞:流媒體;傳輸協(xié)議;系統(tǒng)結(jié)構(gòu)

流媒體(Streaming Media)是指采用流式傳輸?shù)姆绞皆贗nternet播放的多媒體格式。在流媒體出現(xiàn)之前,人們?cè)诨ヂ?lián)網(wǎng)上獲取音視頻信息的唯一方式就是將音視頻文件下載到本地計(jì)算機(jī)進(jìn)行觀看。而流媒體技術(shù)把連續(xù)的影像和聲音信息以數(shù)據(jù)流的方式實(shí)時(shí),即邊下邊播的方式,使得用戶無(wú)需等待下載或只需少量時(shí)間緩沖即可觀看,大大提高了音視頻信息的可觀賞性,節(jié)約用戶時(shí)間及系統(tǒng)資源。

自從1995年progressive Network公司(即RealNetwork公司)第一個(gè)流產(chǎn)品以來(lái),流媒體得到巨大的發(fā)展,已經(jīng)成為目前互聯(lián)網(wǎng)上呈現(xiàn)音、視頻信息的主要方式。

1. 流媒體傳輸?shù)姆椒?/p>

流媒體傳輸技術(shù)分為兩類::順序流傳輸(Progressive streaming )和實(shí)時(shí)流傳輸(Realtime streaming)。

順序流方式又叫漸進(jìn)式下載,其傳輸方式是順序下載,在下載文件的同時(shí)用戶可觀看在線內(nèi)容,用戶只能觀看已下載的部分,而不能跳到還未下載的部分。由于標(biāo)準(zhǔn)的HTTP服務(wù)器可發(fā)送順序流式傳輸?shù)奈募膊恍枰渌厥鈪f(xié)議,所以順序流式傳輸經(jīng)常被稱作HTTP流式傳輸。

實(shí)時(shí)流方式:實(shí)時(shí)流式傳輸使媒體可被實(shí)時(shí)觀看到,特別適合現(xiàn)場(chǎng)廣播并提供VCR 功能,具備交互性,可以在播放的過程中響應(yīng)用戶的快進(jìn)或后退等操作。實(shí)時(shí)流式傳輸必須匹配網(wǎng)絡(luò)帶寬,其出錯(cuò)的部分一般被忽略,傳輸質(zhì)量特別時(shí)低帶寬時(shí)的質(zhì)量要比順序傳輸?shù)牟睢?shí)時(shí)流傳輸需要專門的流媒體服務(wù)器和流傳輸協(xié)議。

2. 流媒體技術(shù)原理

流式傳輸方式是指通過特定算法將音頻和視頻等多媒體文件分解成多個(gè)小的數(shù)據(jù)包,由服務(wù)器向客戶端連續(xù)傳送,用戶可播放已經(jīng)接收到的數(shù)據(jù)包,而不需要將整個(gè)文件下載到客戶端。由于TCP協(xié)議不太適合傳輸多媒體數(shù)據(jù),故在實(shí)時(shí)流媒體方案中,一般采用HTTP/TCP來(lái)傳輸控制信息,而用RTP/UDP來(lái)傳輸實(shí)時(shí)數(shù)據(jù)。

3. 流媒體技術(shù)的系統(tǒng)結(jié)構(gòu)

目前不同公司的流媒體解決方案各不相同。但就其本質(zhì)來(lái)說(shuō),一個(gè)完整的流媒體系統(tǒng)至少包括三個(gè)組件:編碼工具、服務(wù)器及播放器。這三個(gè)組件間通過特定的通信協(xié)議相互聯(lián)系,按特定的格式相互交換數(shù)據(jù)。

4. 傳輸協(xié)議

流媒體系統(tǒng)各組件通過傳輸協(xié)議相互通信。對(duì)于順序流傳輸,可采用HTTP協(xié)議進(jìn)行傳輸。但HTTP協(xié)議并不適合傳輸實(shí)時(shí)流數(shù)據(jù)。在流式傳輸?shù)膶?shí)現(xiàn)方案中,一般采用HTTP/TCP來(lái)傳輸控制信息,而用RTP/UDP來(lái)傳輸實(shí)時(shí)多媒體數(shù)據(jù)。傳輸協(xié)議是流媒體技術(shù)的一個(gè)重要組成部分,也是基礎(chǔ)組成部分。它包括"RSVP(資源預(yù)留協(xié)議)"、"RTP(實(shí)時(shí)傳輸協(xié)議)"、"R T C P (實(shí)時(shí)傳輸控制協(xié)議)" 和"RTSP(實(shí)時(shí)流協(xié)議)",這四種協(xié)議構(gòu)成了"rea1-time"服務(wù)的基礎(chǔ)。

4.1 資源預(yù)留協(xié)議RSVP (Resource Reserve Protocol)

RSVP是Internet上的資源預(yù)訂協(xié)議,使用RSVP可以讓流數(shù)據(jù)的接收者主動(dòng)請(qǐng)求流數(shù)據(jù)上的路由器,為該數(shù)據(jù)流預(yù)留一分網(wǎng)絡(luò)資源(即帶寬),在一定程度上為流媒體的傳輸提供服務(wù)質(zhì)量。

4.2  實(shí)時(shí)傳輸協(xié)議RTP與RTCP

RTP是用于Internet/Intranet針對(duì)多媒體數(shù)據(jù)流的一種傳輸協(xié)議。RTP被定義為在一對(duì)一或一對(duì)多傳輸?shù)那闆r下工作,其目的是提供時(shí)間信息和實(shí)現(xiàn)流同步。RTP通常使用UDP來(lái)傳送數(shù)據(jù),但它本身并不能為按順序傳送數(shù)據(jù)包提供可靠的傳送機(jī)制,也不提供流量控制或擁塞控制,它依靠RTCP提供這些服務(wù)。RTCP和RTP一起提供流量控制和擁塞控制服務(wù)。RTP和RTCP配合使用,能以有效的反饋和最小的開銷使傳輸效率最佳化,特別適合傳送網(wǎng)上的實(shí)時(shí)數(shù)據(jù)。

4.3  實(shí)時(shí)流協(xié)議RTSP

RTSP是由Real Networks和Netscape共同提出的,該協(xié)議定義了一對(duì)多應(yīng)用程序如何有效地通過IP網(wǎng)絡(luò)傳送多媒體數(shù)據(jù)。RTSP在體系結(jié)構(gòu)上位于RTP和RTCP之上,它使用TCP或RTP完成數(shù)據(jù)傳輸。RTSP 是應(yīng)用級(jí)協(xié)議,它以底層的RTP和RSVP為依托,控制實(shí)時(shí)數(shù)據(jù)的發(fā)送,它提供了可擴(kuò)展框架,使實(shí)時(shí)數(shù)據(jù)的受控、點(diǎn)播成為可能。在客戶端應(yīng)用程序中對(duì)流式多媒體內(nèi)容的播放、暫停等操作都是通過RTSP協(xié)議實(shí)現(xiàn)的。

4.4 MMS協(xié)議(Microsoft Media Server Protocol)

與QuickTime和Realsystem流媒體技術(shù)采用RTSP協(xié)議進(jìn)行傳輸不同,微軟采用專用協(xié)議MMS進(jìn)行流式傳輸。

MMS協(xié)議是用來(lái)訪問并且流式接收Windows Media服務(wù)器中流媒體文件(asf或 wmv)的一種協(xié)議。MMS協(xié)議是訪問Windows Media點(diǎn)上的單播內(nèi)容的默認(rèn)方法。觀眾在 Windows Media Player 中必須使用 MMS 協(xié)議才能引用該流。

5. 主要的流媒體技術(shù)

5.1 四大流媒體技術(shù)

目前,互聯(lián)網(wǎng)上流媒體主要流媒體技術(shù)方案有Real Networks公司的Real System方案,微軟公司的Windows Media流式媒體解決方案,Apple公司的QuickTime流式媒體解決方案及Adobe公司的Flash流媒體解決方案。

5.1.1 Real System

Real Networks是Internet上流媒體傳輸?shù)南闰?qū)者和領(lǐng)導(dǎo)者。其流媒體文件包括RealAudio,Real Video,Real Presentation和RealFlash4類文件。

5.1.2 Windows Media

Windows Media的前身是微軟公司的Netshow產(chǎn)品,隨著流媒體的廣泛應(yīng)用,微軟推出了整套的流媒體制作、和播放產(chǎn)品。由于Windows Media的成本較低且簡(jiǎn)單易學(xué),支持屏幕錄制等功能,故在教育方面應(yīng)用較廣。其流媒體文件包括視頻文件WMV/ASF,音頻文件WMA等。

5.1.3 QuickTime流式媒體解決方案

Apple的QuickTime是一個(gè)跨平臺(tái)的解決方法,同時(shí)支持蘋果系統(tǒng)及Windows,其播放器支持多達(dá)40種的格式,交互性較強(qiáng)。由于大部分QuickTime編碼器和服務(wù)器軟件均運(yùn)行在蘋果操作系統(tǒng)中,故QuickTime流式媒體在PC機(jī)上應(yīng)用較少。

5.2 新型流媒體技術(shù)

5.2.1 HTTP流式媒體

傳統(tǒng)的順序流傳輸(Progressive streaming )由于采用傳統(tǒng)的HTTP協(xié)議傳輸,并不支持現(xiàn)場(chǎng)直播等實(shí)時(shí)流傳輸。而隨著網(wǎng)絡(luò)技術(shù)的發(fā)展,最新的流媒體技術(shù)已經(jīng)支持采用HTTP協(xié)議傳輸流媒體文件和進(jìn)行實(shí)時(shí)流傳輸。HTTP流式媒體的代表有Microsoft公司 IIS平滑流式媒體(IIS Smooth St reaming)、APPLE公司HTTP流媒體直播(HTTP Live streaming),Adobe公司最新的Flash Media Server 4.5也支持HTTP流式媒體傳輸。

5.2.2 P2P流媒體

P2P流媒體技術(shù)并不是一個(gè)嶄新的流媒體技術(shù)。他是P2P技術(shù)同流媒體技術(shù)結(jié)合的產(chǎn)物。基于P2P 的流媒體服務(wù)系統(tǒng)并不改變現(xiàn)有的流媒體服務(wù)架構(gòu), 只是在現(xiàn)有系統(tǒng)的基礎(chǔ)上, 改變傳統(tǒng)模式下的服務(wù)方式和數(shù)據(jù)傳輸路徑, 使請(qǐng)求同一媒體流的客戶端組成一個(gè)P2P 網(wǎng)絡(luò), 使服務(wù)器只須向這個(gè)P2P 網(wǎng)絡(luò)中的少數(shù)節(jié)點(diǎn)發(fā)送數(shù)據(jù), 而這些節(jié)點(diǎn)可以把得到的數(shù)據(jù)共享給其余的節(jié)點(diǎn)。

6.總結(jié)

截至2011年6月,我國(guó)的網(wǎng)民人數(shù)已經(jīng)達(dá)到4.85億,其中中國(guó)家庭電腦寬帶上網(wǎng)網(wǎng)民規(guī)模達(dá)到3.90億人。如此巨大的網(wǎng)民數(shù)量,為流媒體的發(fā)展帶來(lái)了前所未有的機(jī)遇發(fā)展機(jī)遇。隨著互聯(lián)網(wǎng)的飛速發(fā)展,人們對(duì)互聯(lián)網(wǎng)內(nèi)容多樣化的需求也越來(lái)越強(qiáng)烈,流媒體業(yè)務(wù)的需求與只俱增。目前,流媒體已經(jīng)廣泛應(yīng)用于網(wǎng)絡(luò)電視,遠(yuǎn)程教育,移動(dòng)設(shè)備,數(shù)字電視,安防監(jiān)控,視頻會(huì)議等多個(gè)領(lǐng)域。今后流媒體的發(fā)展趨勢(shì)是:①隨著流媒體技術(shù)的進(jìn)步、網(wǎng)絡(luò)帶寬的增加及新型高質(zhì)量編碼方式的出現(xiàn),流媒體的質(zhì)量進(jìn)一步提高,高清流媒體將成為主流。②流媒體技術(shù)的應(yīng)用更加廣泛。基于流媒體技術(shù)的數(shù)字電視將取代傳統(tǒng)有線電視成為主流;同時(shí)隨著3G網(wǎng)絡(luò)基礎(chǔ)設(shè)施的完善和移動(dòng)終端功能的增強(qiáng),融合語(yǔ)音、文字、圖像等多種形態(tài)的移動(dòng)實(shí)時(shí)流媒體業(yè)務(wù),如手機(jī)流媒體直播、移動(dòng)網(wǎng)絡(luò)會(huì)議等,將使流媒體的應(yīng)用達(dá)到一個(gè)新的高度。

參考文獻(xiàn):

[1]莊捷.流媒體原理與應(yīng)用 [M].北京:中國(guó)廣播電視出版社,2007:21-41.

[2]齊俊杰,胡潔,麻信洛.流媒體技術(shù)入門與提高[M].2.北京:國(guó)防工業(yè)出版社,2009:1-30.

第3篇

關(guān)鍵詞:流媒體;編碼方式;傳輸協(xié)議

目前在中國(guó)的寬帶網(wǎng)絡(luò)市場(chǎng)上,基于不同壓縮編碼方式的mpeg-1,mpeg-2,real,wmt,quicktime等各種流媒體技術(shù)的產(chǎn)品成了寬帶網(wǎng)絡(luò)的寵兒,日益受到人們的關(guān)注。

一、流媒體的概念與特點(diǎn)

流媒體是指運(yùn)用可變帶寬技術(shù),在數(shù)據(jù)網(wǎng)絡(luò)上按時(shí)間先后次序傳輸和播放的連續(xù)音/視頻數(shù)據(jù)的一種格式。流媒體在播放前只將部分內(nèi)容緩存,并不下載整個(gè)文件,在數(shù)據(jù)流傳送的同時(shí),用戶可在計(jì)算機(jī)上利用相應(yīng)的播放器或其它的硬件、軟件對(duì)壓縮的動(dòng)畫、視音頻等流式多媒體文件解壓后進(jìn)行播放,這樣就節(jié)省了下載等待時(shí)間和存儲(chǔ)空間,使時(shí)延大大減少,而多媒體文件的剩余部分將在后臺(tái)的服務(wù)器內(nèi)繼續(xù)下載。

流媒體數(shù)據(jù)流具有連續(xù)性、實(shí)時(shí)性、時(shí)序性三大特點(diǎn),具有嚴(yán)格的前后時(shí)序關(guān)系。

二、流媒體系統(tǒng)

流媒體系統(tǒng)包括音/視頻源的編碼/解碼、存儲(chǔ)、流媒體服務(wù)器、媒體流傳輸網(wǎng)絡(luò)、用戶端播放器5個(gè)部分(如圖1所示),原始音/視頻流經(jīng)過編碼和壓縮后,形成媒體文件存儲(chǔ),媒體服務(wù)器根據(jù)用戶的請(qǐng)求把媒體文件傳遞到用戶端的媒體播放器。

三、流媒體關(guān)鍵技術(shù)

流媒體系統(tǒng)中,影響流媒體播放質(zhì)量的3個(gè)最關(guān)鍵的因素是:編碼和壓縮的性能與效率、媒體服務(wù)器的性能、媒體流傳輸?shù)馁|(zhì)量控制。

(一)編碼/壓縮

流媒體系統(tǒng)中的編碼用于創(chuàng)建、捕捉和編輯多媒體數(shù)據(jù),形成流媒體格式。

影響音/視頻流的編碼性能的因素很多:首先是編碼效率,要求在保證一定音/視頻質(zhì)量的前提下,媒體流的碼流速率盡量低,以達(dá)到壓縮流媒體文件的目的。其次是編碼的冗余性和可靠性,與普通多媒體文件壓縮/編碼不同的是,流媒體文件需要在網(wǎng)絡(luò)上實(shí)時(shí)傳輸,因此必須考慮傳輸中數(shù)據(jù)丟失對(duì)解碼質(zhì)量的影響。在internet環(huán)境下,最典型的方法是多描述編碼(mdc)。mdc把原始的視頻序列壓縮成多位流,每個(gè)流對(duì)應(yīng)一種描述,都可以提供可接受的視覺質(zhì)量,多個(gè)描述結(jié)合起來(lái)提供更好的質(zhì)量。最后需要考慮速率調(diào)節(jié)的能力,一種方法是采用可擴(kuò)展的層次編碼,生成多個(gè)子位流(substream),其中一個(gè)位流是基本位流,它可以獨(dú)立解碼,輸出粗糙質(zhì)量的視頻序列,其他的子位流則起質(zhì)量增強(qiáng)的作用,所有的子位流一起還原出最好質(zhì)量的視頻序列。當(dāng)網(wǎng)絡(luò)速率變化時(shí),可以通過調(diào)節(jié)流輸出的層次來(lái)控制碼流的速率,從而適應(yīng)網(wǎng)絡(luò)速率的變化。

(二)媒體服務(wù)器

流媒體系統(tǒng)中的媒體服務(wù)器用于存放和控制流媒體的數(shù)據(jù)。

隨著流媒體規(guī)模的擴(kuò)大,流媒體服務(wù)器的性能成為制約流媒體服務(wù)擴(kuò)展能力的重要因素。流媒體服務(wù)器性能的關(guān)鍵指標(biāo)是流輸出能力和能同時(shí)支持的并發(fā)請(qǐng)求數(shù)量。影響流媒體服務(wù)器性能的因素很多,包括cpu能力、i/o總線、存儲(chǔ)帶寬等。通常單個(gè)流媒體服務(wù)器的并發(fā)數(shù)都在幾百以內(nèi),因此為了具有更好的性能,目前的高性能流媒體服務(wù)器都采用大規(guī)模并行處理的結(jié)構(gòu),例如采用超立方體的結(jié)構(gòu)將各個(gè)流媒體服務(wù)單元連接起來(lái)。還有一種方法是采用簡(jiǎn)單的pc集群的方式,這種方式下多個(gè)pc流媒體服務(wù)器用局域網(wǎng)連接,前端采用內(nèi)容交換/負(fù)載均衡器將流媒體服務(wù)的請(qǐng)求分布到各個(gè)pc媒體服務(wù)單元。后一種方式的性能不如前一種方式,但是成本低,容易實(shí)現(xiàn)。

(三)流媒體傳輸網(wǎng)絡(luò)

流媒體在因特網(wǎng)上的傳輸必然涉及到網(wǎng)絡(luò)傳輸協(xié)議,這是制約流媒體性能的最重要的因素。為了保證對(duì)網(wǎng)絡(luò)擁塞、時(shí)延和抖動(dòng)極其敏感的流媒體業(yè)務(wù)在面向無(wú)連接的ip網(wǎng)絡(luò)中的服務(wù)質(zhì)量,必須采用合適的協(xié)議,其中包括internet本身的多媒體傳輸協(xié)議,以及一些實(shí)時(shí)流式傳輸協(xié)議等。

①internet本身的多媒體傳輸協(xié)議

rsvp(resource reserve protocol)協(xié)議預(yù)留一部分網(wǎng)絡(luò)帶寬,能在一定程度上為流媒體的傳輸提供qos。在某些試驗(yàn)性的系統(tǒng)如網(wǎng)絡(luò)視頻會(huì)議工具vic中就集成了rsvp。該協(xié)議的兩個(gè)重要概念是流與預(yù)定。流是從發(fā)送者到一個(gè)或多個(gè)接收者的連接特征,通過ip包中"流標(biāo)記"來(lái)認(rèn)證。發(fā)送一個(gè)流之前,發(fā)送者傳輸一個(gè)路徑信息到目的接收方,這個(gè)信息包括源ip地址、目的ip地址和一個(gè)流規(guī)格。這個(gè)流規(guī)格是由流的速率和延遲組成的。接收者實(shí)現(xiàn)預(yù)定后,基于接收者的模式能夠?qū)崿F(xiàn)一種分布式解決方案。

②實(shí)時(shí)流式傳輸協(xié)議

目前幾種支持流媒體傳輸?shù)膮f(xié)議主要有用于 internet上針對(duì)多媒體數(shù)據(jù)流的實(shí)時(shí)傳輸協(xié)議rtp(real-time transport protocol)、與rtp一起提供流量控制和擁塞控制服務(wù)的實(shí)時(shí)傳輸控制協(xié)議rtcp(real-time transport control protocol)、定義了一對(duì)多的應(yīng)用程序如何有效地通過ip網(wǎng)絡(luò)傳送多媒體數(shù)據(jù)的實(shí)時(shí)流協(xié)議rtsp(real-time streaming protocol)。

rtp

rtp被定義在一對(duì)一或一對(duì)多的傳輸情況下工作,其目的是提供時(shí)間信息和實(shí)現(xiàn)流同步。rtp通常使用udp來(lái)傳送數(shù)據(jù),也可在tcp或atm等其他協(xié)議上工作。rtp本身并不能為按順序傳送數(shù)據(jù)包提供可靠的傳送機(jī)制,也不提供流量控制或擁塞控制,它依靠rtcp提供這些服務(wù)。

rtcp

在rtp會(huì)話期間,各參與者周期性地傳送rtcp包。rtcp包中含有已發(fā)送的數(shù)據(jù)包的數(shù)量、丟失的數(shù)據(jù)包的數(shù)量等統(tǒng)計(jì)資料,因此服務(wù)器可以利用這些信息動(dòng)態(tài)地改變傳輸速率,甚至改變有效載荷類型,以適應(yīng)網(wǎng)絡(luò)的帶寬。通常采用兩個(gè)方法來(lái)調(diào)節(jié):一是窗口法,通過逐漸增大傳送的碼率,當(dāng)發(fā)現(xiàn)網(wǎng)絡(luò)上出現(xiàn)了包的碰撞,也就是檢測(cè)到了丟包時(shí),再減小發(fā)送的碼率;二是基于速率的方法,先估計(jì)網(wǎng)絡(luò)的帶寬資源,再調(diào)整編碼的目標(biāo)速率來(lái)適應(yīng)網(wǎng)絡(luò)的狀態(tài)。基于窗口的解決方案會(huì)引入類似tcp的重傳,所以經(jīng)常采用基于速率的解決方案。rtp和rtcp配合使用,能以有效的反饋和最小的開銷使傳輸效率最佳化,因而特別適合傳送網(wǎng)上的實(shí)時(shí)數(shù)據(jù)。

rtsp

rtsp在體系結(jié)構(gòu)上位于rtp和rtcp之上,它使用tcp或rtp完成數(shù)據(jù)傳輸。http與rtsp相比,前者的請(qǐng)求由客戶機(jī)發(fā)出,服務(wù)器作出響應(yīng);使用后者時(shí),客戶機(jī)和服務(wù)器都可以發(fā)出請(qǐng)求,即rtsp可以是雙向的。rtsp是應(yīng)用級(jí)協(xié)議,控制實(shí)時(shí)數(shù)據(jù)的發(fā)送,它提供了可擴(kuò)展框架,使實(shí)時(shí)數(shù)據(jù)的受控、點(diǎn)播成為可能。該協(xié)議目的在于控制多個(gè)數(shù)據(jù)發(fā)送連接,為選擇發(fā)送通道(如udp、組播udp與tcp)提供途徑,并為選擇基于rtp上發(fā)送機(jī)制提供方法。

四、結(jié)論

從技術(shù)的角度來(lái)說(shuō),對(duì)各種基于流媒體的應(yīng)用影響最大的不是帶寬,而是流媒體傳輸過程中的抖動(dòng)和延時(shí)。網(wǎng)絡(luò)的延遲和抖動(dòng)影響數(shù)據(jù)包傳輸順序的正確,使媒體數(shù)據(jù)不能連續(xù)輸出,造成播放出現(xiàn)停頓。為了解決擁塞造成的抖動(dòng)和延時(shí)問題,不但要求網(wǎng)絡(luò)有足夠的帶寬,還要有較好的穩(wěn)定性和可伸縮性。對(duì)等網(wǎng)絡(luò)(peer to peer)以其各節(jié)點(diǎn)平權(quán)、資源共享的特點(diǎn)避免了傳統(tǒng)的client/server模式中對(duì)server集中訪問帶來(lái)的網(wǎng)絡(luò)擁塞,使網(wǎng)絡(luò)有較好的穩(wěn)定性。

第4篇

關(guān)鍵詞:多媒體技術(shù) 圖形 圖像

中圖分類號(hào):TP39 文獻(xiàn)標(biāo)識(shí)碼:A 文章編號(hào):1007-3973(2011)006-082-02

多媒體技集文字、聲音、圖像、視頻、通信等多項(xiàng)技術(shù)于一體,采用計(jì)算機(jī)的數(shù)字記錄和傳輸傳送方式,對(duì)各種媒體進(jìn)行處理,具有廣泛的用途,甚至可代替目前的各種家用電器,集計(jì)算機(jī)、電視機(jī)、錄音機(jī)、錄像機(jī)、VCD機(jī)、DVD機(jī)、電話機(jī)、傳真機(jī)等各種電器為一體,是一個(gè)涉及面極廣的綜合技術(shù),是開放性的沒有最后界限的技術(shù),其產(chǎn)業(yè)涉及電子工業(yè)、計(jì)算機(jī)工業(yè)、廣播電視、出版業(yè)和通訊業(yè)等。

1 多媒體技術(shù)應(yīng)用的意義

多媒體技術(shù)發(fā)展到今天,已經(jīng)對(duì)人類的現(xiàn)實(shí)生活產(chǎn)生了深遠(yuǎn)的意義和影響,具體表現(xiàn)在以下幾個(gè)方面:一是使計(jì)算機(jī)可以處理人類生活中最直接、最普遍的信息,從而使得計(jì)算機(jī)應(yīng)用領(lǐng)域及功能得到了極大的擴(kuò)展。二是使計(jì)算機(jī)系統(tǒng)的人機(jī)交互界面更加友好方便,非專業(yè)人員可以方便地使用和操作計(jì)算機(jī)。這也使計(jì)算機(jī)的應(yīng)用可以很快速的普及;三是多媒體技術(shù)使音像技術(shù)、計(jì)算機(jī)技術(shù)和通信技術(shù)三大信息處理技術(shù)緊密地結(jié)合起來(lái),大大的促進(jìn)了信息處理技術(shù)的發(fā)展,聲音、視頻、圖像壓縮方面的基礎(chǔ)技術(shù)已逐步成熟,并形成了產(chǎn)品進(jìn)入市場(chǎng),形成一個(gè)巨大的產(chǎn)業(yè)鏈。

2 多媒體技術(shù)涉及的內(nèi)容

多媒體技術(shù)涉及的內(nèi)容包括多媒體數(shù)據(jù)壓縮、多媒體處理、多媒體數(shù)據(jù)存儲(chǔ)、多媒體開發(fā)工具等。下面加以簡(jiǎn)單介紹:

多媒體數(shù)據(jù)壓縮涉及多模態(tài)轉(zhuǎn)換、壓縮編碼;多媒體處理主要是音頻信息處理,如音樂合成、語(yǔ)音識(shí)別、文字與語(yǔ)音相互轉(zhuǎn)換;

多媒體數(shù)據(jù)存儲(chǔ)主要涉及數(shù)據(jù)庫(kù)技術(shù),這里指多媒體數(shù)據(jù)庫(kù),如圖像處理會(huì)產(chǎn)生大量數(shù)據(jù),就要考慮數(shù)據(jù)庫(kù)存儲(chǔ)技術(shù);

多媒體開發(fā)工具:第一種是基于時(shí)間的,它以可視的時(shí)間軸來(lái)決定事件的順序和對(duì)象上演的時(shí)間。這種時(shí)間軸包括許多行道或頻道,以使安排多種對(duì)象同時(shí)展現(xiàn)。比如Director和Action;第二種是基于圖符或流線的,它把多媒體成分和交互隊(duì)列(事件)按結(jié)構(gòu)化框架或過程組織為對(duì)象。使項(xiàng)目的組織方式簡(jiǎn)化且多數(shù)情況下是顯示沿各分支路徑上各種活動(dòng)的流程圖。比如Authorware;第三種是基于卡片或頁(yè)面的,它提供一種可以將對(duì)象連接于頁(yè)面或卡片的工作環(huán)境,一頁(yè)卡片便是數(shù)據(jù)結(jié)構(gòu)中的一個(gè)節(jié)點(diǎn),它類似于教科書中的一頁(yè)或數(shù)據(jù)袋內(nèi)的一張卡片,如HyperCard;第四種是以傳統(tǒng)程序語(yǔ)言為基礎(chǔ)的,需要用戶編程量較大,而且重用性差、不便于組織和管理多媒體素材、調(diào)試?yán)щy,如VB、Delphi等。

3 主要多媒體技術(shù)的發(fā)展?fàn)顩r

多媒體技術(shù)的發(fā)展?fàn)顩r可以從以下幾個(gè)方面分析:

(1)音頻技術(shù)。音頻技術(shù)主要包括四個(gè)方面:音頻數(shù)字化、語(yǔ)音處理、語(yǔ)音合成及語(yǔ)音識(shí)別。

音頻數(shù)字化目前是較為成熟的技術(shù),多媒體聲卡就是采用此技術(shù)而設(shè)計(jì)的,在這種技術(shù)的支持下,數(shù)字音響一改傳統(tǒng)的模擬方式而達(dá)到了理想的音響效果。音頻采樣包括兩個(gè)重要的參數(shù)即采樣頻率和采樣數(shù)據(jù)位數(shù)。采樣頻率即對(duì)聲音每秒鐘采樣的次數(shù),采樣頻率越高音質(zhì)越好,存貯數(shù)據(jù)量越大。采樣數(shù)據(jù)位數(shù)即每個(gè)采樣點(diǎn)的數(shù)據(jù)表示范圍,目前常用的有8、12和16位三種。采樣位數(shù)越高,存貯數(shù)據(jù)量越大,音質(zhì)也越好。

語(yǔ)音處理主要集中在音頻壓縮上,目前最新的MPEG語(yǔ)音壓縮算法可將聲音壓縮六倍。

語(yǔ)音合成又稱文語(yǔ)轉(zhuǎn)換(Textto Speech)技術(shù),它能將任意文字信息實(shí)時(shí)轉(zhuǎn)化為標(biāo)準(zhǔn)流暢的語(yǔ)音朗讀出來(lái),相當(dāng)于給機(jī)器裝上了人工嘴巴。涉及聲學(xué)、語(yǔ)言學(xué)、數(shù)字信號(hào)處理、計(jì)算機(jī)科學(xué)等多個(gè)學(xué)科技術(shù)。

語(yǔ)音識(shí)別在音頻技術(shù)中難度最大最吸引人,就是讓機(jī)器通過識(shí)別和理解過程把語(yǔ)音信號(hào)轉(zhuǎn)變?yōu)橄鄳?yīng)的文本或命令的高級(jí)技術(shù)。語(yǔ)音識(shí)別技術(shù)主要包括特征提取技術(shù)、模式匹配準(zhǔn)則及模型訓(xùn)練技術(shù)三個(gè)方面。讓計(jì)算機(jī)聽懂人說(shuō)話是發(fā)展人機(jī)語(yǔ)音通信和新一代智能計(jì)算機(jī)的主要目標(biāo)。

(2)視頻技術(shù)。視頻技術(shù)包括視頻數(shù)字化和視頻編碼技術(shù)兩個(gè)方面。視頻數(shù)字化是將模擬視頻信號(hào)經(jīng)模數(shù)轉(zhuǎn)換和彩色空間變換轉(zhuǎn)為計(jì)算機(jī)可處理的數(shù)字信號(hào),使得計(jì)算機(jī)可以顯示和處理視頻信號(hào)。視頻數(shù)字化后色彩、清晰度及穩(wěn)定性都有了明顯的提高。視頻編碼技術(shù)是將數(shù)字化的視頻信號(hào)經(jīng)過編碼成為電視信號(hào),從而可以在電視上播放。

(3)圖像壓縮技術(shù)。圖像壓縮一直是技術(shù)熱點(diǎn),是計(jì)算機(jī)處理圖像和視頻以及網(wǎng)絡(luò)傳輸?shù)闹匾A(chǔ),目前有三個(gè)壓縮標(biāo)準(zhǔn)即JPEG、MPEG和H.26。

JPEG是國(guó)際上彩色、灰度、靜止圖像的第一個(gè)國(guó)際標(biāo)準(zhǔn),它不僅適于靜態(tài)圖像的壓縮,電視圖像序列的幀內(nèi)圖像的壓縮編碼,也常采用JPEG壓縮標(biāo)準(zhǔn)。它包括兩部分:一是基于DPCM(空間線性預(yù)測(cè))技術(shù)的無(wú)失真編碼,一是基于DCT(離散余弦變換)和哈夫曼編碼的有失真算法。前者圖像壓縮無(wú)失真,但是壓縮比很小,目前主要應(yīng)用的是后一種算法,圖像有損失但壓縮比很大,壓縮20倍左右時(shí)基本看不出失真。MPEG是針對(duì)運(yùn)動(dòng)圖像的數(shù)據(jù)壓縮技術(shù)。目前又分為MPEG-I、MPEG-II、MPEG-IV、MPEG-7和MPEG-21。它除了對(duì)單幅圖像進(jìn)行編碼以外還利用圖像序列中的相關(guān)原則,將幀間的冗余去掉,這樣大大提高了圖像的壓縮比例。H.26是視頻圖像壓縮編碼國(guó)際標(biāo)準(zhǔn),主要用于視頻電話和電視會(huì)議,可以以較好的質(zhì)量來(lái)傳輸更復(fù)雜的圖像。

4 多媒體技術(shù)應(yīng)用領(lǐng)域

多媒體技術(shù)的應(yīng)用領(lǐng)域非常廣泛,涉及農(nóng)業(yè)生產(chǎn)、軍事、旅游、互聯(lián)網(wǎng)、家庭娛樂、電子地圖、網(wǎng)絡(luò)通信、辦公自動(dòng)化、航空航天、生產(chǎn)管理、教育教學(xué)、信息咨詢、商業(yè)廣告等等,下面從幾個(gè)方面進(jìn)行簡(jiǎn)單說(shuō)明:

(1)教育和娛樂:它可能是多媒體技術(shù)應(yīng)用最多的一個(gè)領(lǐng)域,一般的游戲都使用了動(dòng)畫,三維圖形,視頻播放,聲音處理等技術(shù),還有影視娛樂業(yè)中的電影特技、變形效果,電視/電影/卡通混編特技、MTV特技制作、仿真游戲。在教育方面,多媒體技術(shù)主要體現(xiàn)在形象教學(xué)、模擬展示上,比如電子教案、形象教學(xué)、模擬交互過程、網(wǎng)絡(luò)多媒體教學(xué)、仿真工藝過程等,這使得教學(xué)過程具有很好的交互性,并可用逼真的形象表現(xiàn)所需的信息。

(2)商業(yè)廣告:是另一種對(duì)多媒體技術(shù)需求較多的應(yīng)用領(lǐng)域,主要體現(xiàn)在特技合成、大型演示中,象影視商業(yè)廣告、公共招貼廣告、大型顯示屏廣告、平面印刷廣告等,這里要用到視頻捕捉、圖像壓縮與解壓縮、圖像編輯與轉(zhuǎn)換、音頻同步,添加字幕等技術(shù)。

(3)虛擬現(xiàn)實(shí)技術(shù)和遠(yuǎn)程傳輸:它可以用來(lái)模擬復(fù)雜的動(dòng)作和仿真,利用計(jì)算機(jī)和其它的相關(guān)設(shè)備將人們帶入一個(gè)虛擬的世界。虛擬現(xiàn)實(shí)技術(shù)體現(xiàn)在人工智能模擬上,象生物形態(tài)模擬、生物智能模擬、人類行為智能模擬,比較典型的例子就是駕駛訓(xùn)練系統(tǒng),它就使用了虛擬現(xiàn)實(shí)技術(shù);多媒體技術(shù)在遠(yuǎn)程傳輸上的最成功表現(xiàn)就是多媒體在Intemet上的應(yīng)用,它突破了Intemet只能傳輸字符的限制,從而展示給遠(yuǎn)處一個(gè)接近現(xiàn)實(shí)的畫面,這在醫(yī)療上體現(xiàn)了具大的作用,象遠(yuǎn)程診斷、遠(yuǎn)程手術(shù)。

多媒體技術(shù)在上述應(yīng)用領(lǐng)域發(fā)展的過程中,不僅促進(jìn)了多媒體軟件的發(fā)展,同時(shí)也促進(jìn)了多媒體硬件的發(fā)展。對(duì)于軟件來(lái)說(shuō),可以分成以下幾類:

文字處理:記事本、寫字板、Word、WPS

圖形圖像處理:PhotoShop、CorelDraw、Freehand等;

動(dòng)畫制作:AutoDesk、Animator Pro、3DS MAX、Maya、Flash等;

聲音處理:Ulead Media Studio、Sound Forge、Audition(Cool Edit)、Wave Edit等;

視頻處理:Ulead Media Studio、Adobe Premiere等;

對(duì)于硬件來(lái)說(shuō),不僅聲頻卡(Audio Card)、光盤(CD-ROM)、視頻卡(Video Card)等這些基本產(chǎn)品得到了廣泛的發(fā)展,其它的硬件設(shè)備如攝像機(jī)、掃描儀、觸摸屏、打印機(jī)、影碟機(jī)、音響設(shè)備等也得到快速的發(fā)展和廣泛的普及,這些產(chǎn)品已走進(jìn)平常百姓家,給人們帶來(lái)了很多生活樂趣。

參考文獻(xiàn):

第5篇

關(guān)鍵詞:多媒體;視頻智能編輯;視頻感興趣區(qū);圖像視頻場(chǎng)景分析

中圖分類號(hào):TP37 文獻(xiàn)標(biāo)識(shí)碼:A文章編號(hào):1007-9599(2012)01-0000-02

Multimedia Technology Study

Du Pengxiang,Huang Shanshi

(China Telecom Co.,Ltd.,Wenzhou Branch,Wenzhou325000,China)

Abstract:This article is from the macro summarizes the development and application point of the current image video of the underlying technology from the perspective of an image of video algorithms researchers talk about the understanding of this area.The field of image and video business applications, multimedia entertainment,the Internet, intelligent monitoring,industrial machine vision,OCR,biometrics, medical image processing,as well as military defense in several areas, multimedia areas is an important branch of a lot of image field of video the new algorithms and new theories are often the first application in the multimedia field.

Keywords:Multimedia;Video intelligent editing;Video interest region;Image video scene analysis

多媒體領(lǐng)域主要集中了MicroSoft、Adobe、MITSUBISHI、Cyberlink、Muvee、Autodesk、Corel、Sony、2D3、MotionDSP等一批公司,以及與之相關(guān)的PAMI、IJCV、CVPR、ICCV、ECCV、SIGRAPH等眾多多高水平的學(xué)術(shù)期刊和學(xué)術(shù)會(huì)議。多媒體領(lǐng)域的研究方向比較雜,包括但不限于下面幾類,視頻智能編輯、視頻感興趣區(qū)、圖像視頻場(chǎng)景分析、圖像視頻修復(fù)及后處理、人臉系列技術(shù)、非真實(shí)感渲染(NPL)系列技術(shù)、3D系列技術(shù)、人機(jī)交互技術(shù)等。

主要包括視頻鏡頭邊界檢測(cè)以及在此基礎(chǔ)上的視頻自動(dòng)故事片生成、視頻廣告檢測(cè)、視頻廢鏡頭檢測(cè)等。視頻鏡頭邊界檢測(cè)在經(jīng)歷了一段時(shí)間的發(fā)展之后,檢測(cè)率也達(dá)到一定的程度,目前基本上不再有新的文章出現(xiàn)。視頻自動(dòng)故事片生成往往需要音視頻技術(shù)的結(jié)合,并且由于缺乏有效的評(píng)級(jí)機(jī)制,最近幾年已經(jīng)不是研究的熱點(diǎn),但是相信各個(gè)視頻編輯領(lǐng)域的公司仍在研究或者開發(fā)過程之中。視頻中的廣告檢測(cè)作為其中的一個(gè)小的分支,可能因?yàn)闆]有很大的商業(yè)價(jià)值,研究的并不多,但想要真正實(shí)現(xiàn)高的檢測(cè)率,仍然有很多值得研究的地方。視頻廢鏡頭檢測(cè)其實(shí)是視頻修復(fù)的一部分,包括檢測(cè)視頻中的抖動(dòng)片段、模糊片段、過曝過暗片段等,從而達(dá)到視頻修復(fù)的目的。

(一)視頻感興趣區(qū)的研究

最近是一個(gè)熱點(diǎn)方向,感興趣區(qū)提取和跟蹤可以用來(lái)做視頻智能縮放,可以用來(lái)指導(dǎo)視頻編輯中的精彩視頻片段選擇,還可以在片源采集時(shí)就用來(lái)指導(dǎo)攝像機(jī)捕捉精彩片段。人臉、人物、車輛、小動(dòng)物、房屋、花草樹木等在特定的場(chǎng)景下等都可以作為感興趣區(qū),感興趣區(qū)提取的方式方法也比較多,但除了人臉、人物檢測(cè)技術(shù)上還比較成熟之外,其他目標(biāo)的檢測(cè)很難達(dá)到滿意的準(zhǔn)確度。人物檢測(cè)基礎(chǔ)上的精細(xì)分割摳像技術(shù),也是圖像領(lǐng)域的一個(gè)基礎(chǔ)研究方向,準(zhǔn)確的摳像,是換背景等智能化效果的基礎(chǔ)。

(二)圖像視頻場(chǎng)景分析

主要用在視頻管理和視頻按場(chǎng)景選擇和編輯。通過對(duì)不同的場(chǎng)景的特征進(jìn)行分析設(shè)計(jì)分類器進(jìn)行分類,對(duì)于視頻管理這種不要求很高精度的應(yīng)用點(diǎn)可以滿足要求。照片和視頻按場(chǎng)景內(nèi)容管理,跟基于人臉識(shí)別技術(shù)的照片管理,是基于內(nèi)容管理的兩個(gè)方式,相信今后的多媒體編輯和管理軟件都會(huì)逐步增加這個(gè)功能。

(三)圖像視頻的修復(fù)及后處理

主要包括視頻抖動(dòng)修復(fù)、圖像視頻去模糊、視頻過曝過暗修復(fù)、視頻去霧化、老電影舊照片修復(fù)、馬賽克修復(fù)、視頻圖像超分辨率、視頻圖像智能變比例縮放、視頻幀插值、圖像視頻去噪等。

視頻抖動(dòng)修復(fù)關(guān)鍵是攝像機(jī)軌跡的檢測(cè),確定了攝像機(jī)的移動(dòng)軌跡,視頻修復(fù)就有了基礎(chǔ)的指導(dǎo)。通過尋找視頻中的特征點(diǎn),然后對(duì)特征點(diǎn)進(jìn)行跟蹤,通過分析每個(gè)特征點(diǎn)的軌跡,確定攝像機(jī)的整體軌跡。如果假定視頻中的內(nèi)容都是一個(gè)平面上,只考慮攝像機(jī)在2D平面的軌跡,事情要容易的多,但事實(shí)上攝像機(jī)的軌跡應(yīng)該是3D的,這就變成了一個(gè)“Structure from Motion”的問題,處理起來(lái)就比較復(fù)雜,但如果想得到理想的穩(wěn)像效果,得出攝像機(jī)3D軌跡是必須的。另外,攝像機(jī)3D軌跡的求取,也是其他基于3D的視頻應(yīng)用的基礎(chǔ),這個(gè)后面再講。

圖像視頻去模糊,這個(gè)的關(guān)鍵是尋找模糊核,也就是拍攝的瞬間攝像機(jī)或相機(jī)的運(yùn)動(dòng)軌跡,在這個(gè)運(yùn)動(dòng)軌跡上反卷積,就可以恢復(fù)攝像機(jī)不動(dòng)情況下拍攝的視頻、圖像,也就是不模糊的視頻、圖像了。所以,對(duì)視頻的去模糊,比起對(duì)圖像的去模糊,手段要多一些,因?yàn)橐曨l去模糊可以通過視頻序列的信息來(lái)得到攝像機(jī)的運(yùn)動(dòng)軌跡。而圖像的去模糊,這個(gè)運(yùn)動(dòng)軌跡只能是通過對(duì)圖像內(nèi)部結(jié)構(gòu)的分析進(jìn)行估計(jì)。考慮到軌跡估計(jì)和反卷積的運(yùn)算量,不管是圖像去模糊還是視頻去模糊,目前都不算很成熟,但是成熟的產(chǎn)品應(yīng)該會(huì)在短期內(nèi)出現(xiàn)。

視頻過曝過暗修復(fù),如果視頻質(zhì)量不是太差,直方圖被擠壓的不是太厲害,還可以通過直方圖均衡化的方式進(jìn)行簡(jiǎn)單修復(fù),但是如果直方圖被擠壓的很嚴(yán)重,那就只能刪除了。

視頻、圖像去霧化,簡(jiǎn)單點(diǎn)說(shuō),就是把被霧化的圖像建模為一個(gè)正常的無(wú)霧的圖像與純霧的圖像的合成,因?yàn)榕臄z得到圖像中霧的灰度值與景深有關(guān),所以好的去霧算法,應(yīng)該是以準(zhǔn)確的景深估計(jì)為基礎(chǔ)的,3D景深估計(jì)也是一個(gè)很熱的方向。

老電影舊照片修復(fù),大概包括色彩的修復(fù)和一些劃痕修復(fù),色彩修復(fù),可以以類似去霧的建模方式,也可以簡(jiǎn)單的做色調(diào)調(diào)節(jié),問題都不大。劃痕修復(fù)就比較復(fù)雜,除了要把劃痕檢測(cè)到,還要用周圍的像素來(lái)填充劃痕的像素,比較典型的全變分方法可以用來(lái)處理這類問題。

馬賽克修復(fù),馬賽克修復(fù)基本上還是要從產(chǎn)生的原因入手,如果是編解碼層的問題,可以對(duì)編解碼的數(shù)據(jù)嘗試修復(fù)。如果到了解碼后的圖像數(shù)據(jù),想要修復(fù)就是一個(gè)無(wú)中生有的問題了,只能是依靠邊緣紋理來(lái)去掉馬賽克的效果,但是想要恢復(fù)圖像內(nèi)容,除非后臺(tái)有一個(gè)強(qiáng)大的針對(duì)特定目標(biāo)的數(shù)據(jù)庫(kù)來(lái)支持虛構(gòu)類似的內(nèi)容,否則毫無(wú)辦法。

視頻、圖像超分辨率,超分辨率的方法,總體來(lái)說(shuō)兩種思路,一種是挖掘圖像的邊緣信息,在圖像放大的時(shí)候,盡量保邊緣,這類方法以NEDI方法為典型,缺點(diǎn)是速度比較慢。另一類是基于Patch的方法,首先建立一個(gè)低分辨率Patch對(duì)應(yīng)高分辨率Patch的映射表,前期先把這個(gè)映射關(guān)系建立好,然后就只需要通過查找映射表來(lái)進(jìn)行超分辨率操作了。如果建立的映射表足夠大,那就可以得到比較理想的超分辨率結(jié)果,理論上講不論速度還是質(zhì)量都比前一種方法要好。

視頻圖像智能變比例縮放,是指通過分析圖像視頻中的內(nèi)容,在圖像、視頻縮放的過程中,保留有內(nèi)容的關(guān)鍵區(qū)域比例不變,而壓縮、擴(kuò)展不重要的區(qū)域,這樣看起來(lái)縮放后的圖像、視頻主要內(nèi)容不會(huì)變形。基于圖像的智能縮放算法比較成熟,基于視頻的由于要考慮視頻序列的前后幀的連續(xù)性,必須加入時(shí)間軸的約束,因此效果不如圖像理想,做的不好會(huì)引出視頻的抖動(dòng)問題。

視頻幀插值,可以用來(lái)解決幀率變化的情況下,出現(xiàn)的視頻抖動(dòng)問題,主要是一個(gè)視頻的全局運(yùn)動(dòng),類似于視頻抖動(dòng)檢測(cè),應(yīng)該說(shuō)技術(shù)上不復(fù)雜,但是視頻中的局部運(yùn)動(dòng)會(huì)干擾全局的運(yùn)動(dòng)估計(jì),這樣插值出來(lái)的幀就會(huì)存在一定的瑕疵。

圖像視頻去噪,方法很多,簡(jiǎn)單點(diǎn)通過濾波高頻信號(hào)的方法如高斯濾波,或者簡(jiǎn)單的中值濾波都可以有一定的效果,但是目前看來(lái),最理想的方法還是非局部均值(NLM)方法。其他的一些例如偏微分方程的方法也可以嘗試。

五、人臉系列技術(shù)

包括人臉檢測(cè)、跟蹤,人臉特征點(diǎn)定位,人臉識(shí)別,人臉的表情識(shí)別,人的年齡、性別識(shí)別,人臉的美化,人臉卡通效果,人臉的變形效果,人臉的3D重建等以及與此相關(guān)的眼睛檢測(cè)和紅眼修復(fù)等。

六、非真實(shí)感渲染(NPL)系列技術(shù)

包括水墨畫、水彩畫、油畫、漫畫效果等人工畫效果,風(fēng)、雪、雨、煙、霧、火焰、海浪等一些自然環(huán)境的模擬效果。

人工畫效果的實(shí)現(xiàn)主要是基于Stroke的方式,難點(diǎn)在于圖像的解析,一個(gè)好的人工畫效果,需要正確的將圖像分解為不同的區(qū)域,并分析不同區(qū)域的結(jié)構(gòu)特點(diǎn)來(lái)確定用筆方式、Stroke的精細(xì)度等參數(shù)。

對(duì)自然環(huán)境的模擬,主要是一些粒子的模擬,可以采用基于物理模型的方式研究粒子的受力及運(yùn)動(dòng)方式,流體力學(xué)的相關(guān)方法是這個(gè)領(lǐng)域的核心。

NPL技術(shù),除了用于對(duì)圖像、視頻的特效上,另外像一些煙霧效果和水墨畫效果用于藝術(shù)字的特效也是不錯(cuò)的選擇。

七、3D系列技術(shù)

3D技術(shù)在視頻中的應(yīng)用點(diǎn),可以看到的有3D穩(wěn)像、3D對(duì)象嵌入等等,這里的關(guān)鍵是獲取攝像機(jī)的3D軌跡與視頻中的特征點(diǎn)的3D深度信息,通過視頻序列分析攝像機(jī)的3D軌跡的技術(shù)叫“Structure from Motion”,大量的文章可以參考。有了攝像機(jī)的3D軌跡與視頻中的特征點(diǎn)的3D深度信息,2維的圖像信息就一定程度擴(kuò)展到了3維。全景圖的拼接技術(shù),本質(zhì)上也利用了基于雙目視覺3維重構(gòu)的一部分技術(shù)。得到了3D攝像頭軌跡,可以利用這個(gè)信息進(jìn)行3D插幀,借此虛擬重構(gòu)雙目視覺畫面,通過3D眼鏡,就可以看到比較理想的3D場(chǎng)景了。3D的應(yīng)用,可以想象的空間比較大,多了一維信息,總可以做出一些新的東西。

八、人機(jī)交互技術(shù)

人機(jī)交互是指通過攝像頭捕捉人的手勢(shì)、身體的姿態(tài)、面部表情、眼睛的移動(dòng)等信息,代替?zhèn)鹘y(tǒng)的鼠標(biāo)鍵盤來(lái)指導(dǎo)計(jì)算機(jī)做出相應(yīng)的處理。技術(shù)層面主要涉及目標(biāo)的檢測(cè)、跟蹤以及姿態(tài)的識(shí)別。相比之前提到的多媒體的各種方向,人機(jī)交互應(yīng)該是最有市場(chǎng)前景的方向,應(yīng)用點(diǎn)也非常多。

第6篇

關(guān)鍵詞:多媒體;新媒體藝術(shù);創(chuàng)意;設(shè)計(jì)人性化

中圖分類號(hào):J93 文獻(xiàn)標(biāo)識(shí)碼:A 文章編號(hào):2095-4115(2013)08-63-1

多媒體,是一個(gè)人們熟知的詞語(yǔ)。換句話說(shuō),我們生活在多媒體時(shí)代。它作為一種傳播形式,集文字、圖像、視頻、音樂、動(dòng)畫等藝術(shù)形式于一身。設(shè)計(jì)者根據(jù)不同年齡層次的受眾的不同心理需求對(duì)各個(gè)藝術(shù)項(xiàng)目進(jìn)行創(chuàng)意策劃,最后加以整合,便形成了現(xiàn)在各種多媒體藝術(shù)作品――如實(shí)景加3D動(dòng)畫片、3D電影等、加油站滾動(dòng)服務(wù)信息等。我們把這些集合多種藝術(shù)形式,并結(jié)合電腦、網(wǎng)絡(luò)的多媒體技術(shù)的藝術(shù)作品,統(tǒng)稱為“新媒體藝術(shù)”。

那么,我們首先要了解新媒體藝術(shù)的定義、內(nèi)涵。

一 新媒體藝術(shù)的定義與內(nèi)涵

新媒體藝術(shù)是什么?它是以光學(xué)媒介和電子媒介為基本語(yǔ)言的新藝術(shù)學(xué)科,其大量繼承交流方式中的一種新方式,亦稱為電子傳媒,普遍具有交互性。它涉及計(jì)算機(jī)技術(shù)、藝術(shù)學(xué)、傳播學(xué)、社會(huì)學(xué)、哲學(xué)、科學(xué)等諸多領(lǐng)域,是一個(gè)多學(xué)科交叉、融合的綜合體。從這些文字中,我們不難發(fā)現(xiàn),新媒體藝術(shù)既承載著藝術(shù)設(shè)計(jì)構(gòu)思,又承載著多媒體技術(shù)的運(yùn)用。

設(shè)計(jì)師們可以在其上自如地設(shè)計(jì),并與外界增強(qiáng)溝通。換一種說(shuō)法,即多媒體技術(shù)為設(shè)計(jì)師提供了廣闊的、便捷的展示空間與表現(xiàn)環(huán)境。那么,“這張畫紙”是如何吸引各年齡層次受眾的呢?

二 多媒體技術(shù)的巧妙應(yīng)用,使藝術(shù)新媒體化

筆者在此舉一例:廣西藝術(shù)學(xué)院于2012年1月15日在相思湖校區(qū)美術(shù)館舉行編導(dǎo)系畢業(yè)展――《面世》。這次畢業(yè)展吸引了社會(huì)各界人士的加盟參與,并在鳳凰網(wǎng)、騰訊網(wǎng)、廣西新聞網(wǎng)等多家大型新聞媒體大力報(bào)道、宣傳,可見其反響之大。為什么這個(gè)畢業(yè)展能取得成功?全靠策展人的創(chuàng)意與多媒體技術(shù)的巧妙結(jié)合。《面世》既體現(xiàn)了2013屆編導(dǎo)系畢業(yè)生在微電影、攝影構(gòu)思、編排與操作技術(shù)上的創(chuàng)新,也體現(xiàn)了他們通過努力,將自己的學(xué)習(xí)成果展示于社會(huì)的自信,展現(xiàn)了編導(dǎo)系學(xué)生對(duì)于“面世”的欣喜之情,從側(cè)面反映出他們的自信與朝氣。從藝術(shù)造詣上說(shuō),就是在普通視覺傳達(dá)上,運(yùn)用多媒體技術(shù)修飾、整合,使整部作品、整個(gè)展會(huì),變成了調(diào)動(dòng)所有人體感官的互動(dòng)性、交融性藝術(shù)品,其內(nèi)涵更富人文氣息,反映了當(dāng)代設(shè)計(jì)師、策展人對(duì)作品內(nèi)涵中“設(shè)計(jì)人性化”的追求。

三、多媒體技術(shù)的特征

綜上所述,多媒體技術(shù)傳達(dá)出的藝術(shù)特征有:(1)多媒體并置,多感官綜合體驗(yàn),這是傳統(tǒng)傳媒形式(即單一的視覺體驗(yàn))無(wú)法達(dá)到的。在包括網(wǎng)絡(luò)計(jì)算機(jī)和傳感器、投影、音效等多種設(shè)備的共同作用下,多媒體技術(shù)下所產(chǎn)生的新媒體藝術(shù),讓受眾在虛擬場(chǎng)景中將視覺、聲音、氛圍、觸覺一并體驗(yàn),新媒體藝術(shù)所呈現(xiàn)的形態(tài)就超越了傳統(tǒng)媒介給受眾帶來(lái)的單一視覺體驗(yàn)。(2)結(jié)構(gòu)交互。傳統(tǒng)媒介作品很難在受眾與受眾間、媒介與受眾間進(jìn)行雙向互動(dòng),進(jìn)而產(chǎn)生共鳴。而多媒體技術(shù)下產(chǎn)生的新媒體藝術(shù)所具有的交互性,使其自身成為一種體驗(yàn)式游戲,手中可參與其中,直接構(gòu)成作品的一部分,從而使作品得以真正完成。(3)跨學(xué)科資源共享、整合。這既是多媒體技術(shù)交互性的另一種表現(xiàn),又是新媒體藝術(shù)連結(jié)、交互性質(zhì)的另一種體現(xiàn)――新媒體藝術(shù)涵蓋了諸多技術(shù)與學(xué)科,最大限度體現(xiàn)了藝術(shù)與科技的結(jié)合。作為藝術(shù)作品,它的交互性可以用來(lái)描述兩種互不關(guān)聯(lián)的特征。一方面,它表明藝術(shù)作品的觀賞者可以控制自己采用何種順序來(lái)進(jìn)入某一個(gè)藝術(shù)作品;另一方面,這一概念也可以用來(lái)描述在藝術(shù)作品的生產(chǎn)者與消費(fèi)者間日益增長(zhǎng)的交互性關(guān)系。(4)虛擬現(xiàn)實(shí)。在電腦硬件和軟件所控制、創(chuàng)造的幻真性虛擬情境,受眾可以使用數(shù)據(jù)頭盔、電子手套等工具,或直接用手指點(diǎn)觸,讓自己進(jìn)入一個(gè)幻真世界。但是,這么豐富的特征展示,追根溯源,還得專注于創(chuàng)意以及內(nèi)涵,凸顯設(shè)計(jì)人性化 。

四、結(jié)語(yǔ)

總體而言,多媒體技術(shù)使藝術(shù)走向了新媒體化,藝術(shù)家創(chuàng)作有了新的突破,他們不再是獨(dú)立創(chuàng)作,而是有觀賞者(受眾)一同參與創(chuàng)作,完成作品。觀賞者參與創(chuàng)作的特點(diǎn)恰好迎合了大眾的自?shī)市睦怼6嗝襟w技術(shù)的出現(xiàn),它改變了藝術(shù)的創(chuàng)作方式、欣賞方式和傳播方式,甚至影響到了藝術(shù)創(chuàng)作的理想、觀念,最終使新媒體藝術(shù)成為藝術(shù)創(chuàng)新勢(shì)在必行的一個(gè)重要元素。

現(xiàn)代新型藝術(shù)之路必須形成的氣候、景象。因?yàn)椋旅襟w藝術(shù)代表著當(dāng)今藝術(shù)發(fā)展中最有力、最尖銳的探索力量,綜合并融匯各種藝術(shù)形式,從而最大限度地展現(xiàn)其自身的復(fù)合性與多元性特征,并釋放其自身魅力。久而久之,新媒體藝術(shù)將起著翻天覆地的變化,它將會(huì)作為一種強(qiáng)大的傳播手段,塑造人們的情感與思想,改變?nèi)藗兊纳盍?xí)慣,從而更好地服務(wù)于大眾,促進(jìn)社會(huì)的發(fā)展。

參考文獻(xiàn):

[1]徐偉雄,許星等.用新媒體再現(xiàn)藝術(shù)設(shè)計(jì)作品[J].華東理工大學(xué)學(xué)報(bào),2005,(03).

[2]馬曉翔.新媒體藝術(shù)透視[M].南京:南京大學(xué)出版社, 2008:02.[3]孫曄,叢淼.新媒體藝術(shù)與視覺文化[J]. 大眾文藝,2010,(18).

第7篇

Abstract: Combined with the development practice of new media platform, this paper fully clarifies the general outline of the new media platform technology, discusses the working principle and interfaces of various aspects in detail.

關(guān)鍵詞: 門戶;產(chǎn)品;流媒體;CDN

Key words: portal;product;streaming media;CDN

中圖分類號(hào):TN919 文獻(xiàn)標(biāo)識(shí)碼:A 文章編號(hào):1006-4311(2014)17-0208-02

0 引言

新媒體平臺(tái)技術(shù)不僅是業(yè)務(wù)的重要支撐,更是業(yè)務(wù)的靈魂主體。由于新媒體的高度互聯(lián)網(wǎng)化,平臺(tái)技術(shù)在相當(dāng)程度上決定了產(chǎn)品和服務(wù),這是一般技術(shù)平臺(tái)所不具備的重要特征。一個(gè)成熟的互聯(lián)網(wǎng)或新媒體服務(wù),應(yīng)為用戶提供端到端的服務(wù)。新媒體形態(tài)種類繁多,這里討論限定為以視聽體驗(yàn)為主的媒體形態(tài)。

1 總體架構(gòu)

新媒體平臺(tái)技術(shù)最簡(jiǎn)模型是:業(yè)務(wù)平臺(tái)、傳輸通道和終端。業(yè)務(wù)平臺(tái)實(shí)現(xiàn)三大功能:門戶、產(chǎn)品和訂購(gòu)關(guān)系,形成客戶購(gòu)買服務(wù)的商業(yè)行為;傳輸通道由第三方運(yùn)營(yíng)商提供基礎(chǔ)平臺(tái)(互聯(lián)網(wǎng)),服務(wù)商在此基礎(chǔ)上構(gòu)建內(nèi)容分發(fā)網(wǎng)絡(luò)(CDN)進(jìn)行通道優(yōu)化;最后通過客戶端將業(yè)務(wù)平臺(tái)的服務(wù)傳遞至最終用戶。

2 業(yè)務(wù)平臺(tái)

業(yè)務(wù)平臺(tái)主要由門戶、產(chǎn)品、訂購(gòu)關(guān)系組成。

2.1 門戶 門戶是用戶使用服務(wù)的窗口,由展示層、門戶管理和數(shù)據(jù)庫(kù)三層架構(gòu)支撐,載體是多種類型用戶終端。展示層開發(fā)流程是:用戶界面設(shè)計(jì)、視覺設(shè)計(jì)、Web前端開發(fā)。用戶界面設(shè)計(jì)完成人機(jī)交互和操作邏輯;視覺設(shè)計(jì)完成平面渲染;Web前端開發(fā)基于標(biāo)記語(yǔ)言(HTML、CSS)和腳本語(yǔ)言(JS)完成Web服務(wù)器前端代碼的開發(fā)。

用戶界面設(shè)計(jì)和視覺設(shè)計(jì)接口是:邏輯說(shuō)明文檔和線框圖;視覺設(shè)計(jì)和Web前端開發(fā)的接口是PSD、JPEG文件;Web前端開發(fā)和門戶管理的接口是API調(diào)用。

門戶管理包括:門戶內(nèi)容管理、門戶模板管理、門戶展示管理、門戶。門戶內(nèi)容管理負(fù)責(zé)門戶內(nèi)容的采集編輯;門戶模板管理對(duì)可復(fù)用頁(yè)進(jìn)行分類整合;門戶展示管理基于模板對(duì)展位布局進(jìn)行調(diào)控;門戶是門戶頁(yè)的物理節(jié)點(diǎn),由服務(wù)器集群和均衡組成,也是分布式部署的根節(jié)點(diǎn)。由此有序下發(fā)到傳輸通道的門戶CDN(也稱Web CDN);門戶管理涵蓋所有終端,同時(shí)支持用戶終端的交互轉(zhuǎn)換。門戶的終端匹配是瀏覽器。垂直搜索和智能推薦是優(yōu)化門戶的重要手段。依據(jù)大數(shù)據(jù)可以實(shí)現(xiàn)門戶的個(gè)性化分組。優(yōu)秀的門戶設(shè)計(jì)目標(biāo)是:高效和簡(jiǎn)便,使用戶感覺不到門戶的存在。這需要大量技術(shù)支撐。

2.2 產(chǎn)品 視聽體驗(yàn)的媒體產(chǎn)品核心是直播和點(diǎn)播。主要由產(chǎn)品管理系統(tǒng)、素材數(shù)據(jù)庫(kù)、音視頻編碼、流媒體、編輯生產(chǎn)、存儲(chǔ)系統(tǒng)、版權(quán)管理等系列核心技術(shù)組成。

①產(chǎn)品管理系統(tǒng)由用戶界面、產(chǎn)品管理、產(chǎn)品數(shù)據(jù)庫(kù)支撐。用戶界面是人機(jī)交互界面,與對(duì)外門戶不同,采用簡(jiǎn)約工具軟件風(fēng)格。產(chǎn)品管理包括:素材庫(kù)導(dǎo)入、產(chǎn)品內(nèi)容管理、直播管理、點(diǎn)播管理、分發(fā)管理、上線管理。產(chǎn)品數(shù)據(jù)庫(kù)是素材數(shù)據(jù)庫(kù)的下游。從素材庫(kù)提取消息到產(chǎn)品庫(kù),經(jīng)過整理分類,生成規(guī)定格式的文件,有序下發(fā)到傳輸通道的點(diǎn)播文件CDN。②素材數(shù)據(jù)庫(kù)也稱媒體資源庫(kù),將不同來(lái)源的消息進(jìn)行標(biāo)注和結(jié)構(gòu)化處理。對(duì)消息遵照標(biāo)著錄規(guī)則進(jìn)行統(tǒng)一錄入,著重記錄消息的內(nèi)容屬性(摘要、主題詞)和層次屬性(節(jié)目、片段、場(chǎng)景、靜幀);同時(shí)將非結(jié)構(gòu)化、半結(jié)構(gòu)化和結(jié)構(gòu)化原始消息進(jìn)行統(tǒng)一結(jié)構(gòu)化處理。③音視頻編碼是信源壓縮編碼。由于數(shù)字化最高采樣頻率為定值,導(dǎo)致數(shù)字音視頻必存在冗余。主導(dǎo)視頻壓縮編碼格式是:MPEG.X和H.26X。由于面向?qū)ο缶幋a方案仍存在技術(shù)障礙,而H.264網(wǎng)絡(luò)友好協(xié)議的特征,使其成為目前主流視頻編碼格式,用以生成時(shí)移、回看、點(diǎn)播的音視頻文件。④流媒體服務(wù)器和核心路由器組成直播流源。直播流利用組播協(xié)議發(fā)送至傳輸通道,減輕網(wǎng)絡(luò)壓力。流媒體技術(shù)是一個(gè)協(xié)議族,跨越、服務(wù)器和客戶端。由于流文件隨播即逝,起到了保護(hù)版權(quán)作用。⑤新媒體業(yè)務(wù)編輯生產(chǎn)要素是簡(jiǎn)捷和高效,日常大量任務(wù)是拆條、快編。MPEG.2是演播室友好的編碼格式,而網(wǎng)絡(luò)友好的H.264貫穿新媒體生產(chǎn)全業(yè)務(wù)流程,因此,應(yīng)采用簡(jiǎn)化技術(shù)流程的H.264編碼格式進(jìn)行編輯生產(chǎn)。⑥傳統(tǒng)存儲(chǔ)系統(tǒng)按實(shí)體組成分為:硬盤接口、存儲(chǔ)交換、存儲(chǔ)體;按體系結(jié)構(gòu)分為:DAS、NAS、SAN。硬盤接口有兩大類:ATA接口、SCIS接口,包含串聯(lián)和并聯(lián)。由于并聯(lián)互擾,串聯(lián)效率高于并聯(lián)。硬盤容錯(cuò)采用RAID技術(shù)(獨(dú)立磁盤冗余陣列)。存儲(chǔ)交換是將盤陣和主機(jī)網(wǎng)絡(luò)化的交換協(xié)議,采用主流FC協(xié)議。存儲(chǔ)體按成本由低到高分為:SATA硬盤、SAS硬盤、FC硬盤、固體硬盤等。在線存儲(chǔ)一般采用成本高可靠性好的硬盤;近線和離線存儲(chǔ)一般采用成本低容量大的硬盤。在存儲(chǔ)體系結(jié)構(gòu)中,DAS是原始硬盤的一種延伸,SAN是封閉的高成本存儲(chǔ)網(wǎng)絡(luò),NAS是開放的廉價(jià)存儲(chǔ)網(wǎng)絡(luò)。云存儲(chǔ)在傳統(tǒng)存儲(chǔ)系統(tǒng)的基礎(chǔ)上做廣泛延展,通過對(duì)所有計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)的虛擬化,形成存儲(chǔ)資源池,達(dá)到存儲(chǔ)資源利用的最大化。新媒體存儲(chǔ)方案總體原則是:核心高可靠、邊緣低成本、逐步向云存儲(chǔ)過渡。⑦音視頻產(chǎn)品版權(quán)管理采用數(shù)字水印技術(shù),在不影響產(chǎn)品使用價(jià)值前提下,提取隱藏在載體中的信息,達(dá)到產(chǎn)品版權(quán)保護(hù)目的。

2.3 訂購(gòu)關(guān)系 訂購(gòu)關(guān)系主要由業(yè)務(wù)運(yùn)營(yíng)支撐系統(tǒng)(BOSS)組成。業(yè)務(wù)運(yùn)營(yíng)支撐系統(tǒng)按主體分為客戶和商家兩部分。客戶包括:計(jì)費(fèi)、支付、預(yù)存、結(jié)算、鑒權(quán)、認(rèn)證、客戶服務(wù)等;商家包括:營(yíng)業(yè)、賬務(wù)、產(chǎn)品和業(yè)務(wù)管理、決策支持等。計(jì)費(fèi)是用戶有償消費(fèi)記錄,結(jié)算是用戶支付記錄,認(rèn)證是合法性確認(rèn),鑒權(quán)是訪問權(quán)力限定;營(yíng)業(yè)是商家的進(jìn)、銷、存記錄,賬務(wù)是商家間貿(mào)易記錄。系統(tǒng)提供兩種被訪問方式:用戶直接訪問和第三方間接訪問。業(yè)務(wù)運(yùn)營(yíng)支撐系統(tǒng)的技術(shù)平臺(tái)采用三層架構(gòu),與Web開發(fā)可視化不同,BOSS業(yè)務(wù)邏輯繁雜,因此,邏輯清晰、可擴(kuò)展性、大流量并發(fā)、穩(wěn)定性是BOSS的重點(diǎn)。

3 傳輸通道

傳輸通道由直播流保障通道和基于運(yùn)營(yíng)商互聯(lián)網(wǎng)的CDN共同組成。直播流保障通道是指:城域網(wǎng)和接入網(wǎng)擴(kuò)容、路由組播協(xié)議、QoS保障等網(wǎng)絡(luò)技術(shù)手段。由于數(shù)字視頻碼率較常規(guī)通信業(yè)務(wù)的大幅提高,城域網(wǎng)和接入網(wǎng)的節(jié)點(diǎn)和鏈路都要做相應(yīng)擴(kuò)容;路由組播協(xié)議部署在城域網(wǎng)的同時(shí),在接入網(wǎng)中也盡可能的下沉,最大限度的接近用戶終端,以減輕網(wǎng)絡(luò)流量壓力;QoS保障是在現(xiàn)實(shí)資源條件下用戶與網(wǎng)絡(luò)的約定,以期達(dá)到有限資源利用最大化。CDN分為門戶CDN和點(diǎn)播CDN,兩個(gè)CDN相互獨(dú)立,門戶CDN每戶幾十Kbps,點(diǎn)播CDN每戶幾Mbps。CDN節(jié)點(diǎn)的部署應(yīng)根據(jù)區(qū)域用戶實(shí)際活躍度有目標(biāo)的逐步延伸。

4 終端

終端涉及平臺(tái)、接入和切換。互聯(lián)網(wǎng)終端平臺(tái)是開放平臺(tái),如操作系統(tǒng)、瀏覽器、播放器等;接入主導(dǎo)趨勢(shì)是:高質(zhì)量同步產(chǎn)品接入優(yōu)化通道的“私網(wǎng)”,可延時(shí)產(chǎn)品接入共享“公網(wǎng)”;利用無(wú)線局域網(wǎng)技術(shù)實(shí)現(xiàn)移動(dòng)終端和固定終端之間自由切換。

5 安全

新媒體平臺(tái)融于互聯(lián)網(wǎng)技術(shù)體系,在開放的互聯(lián)網(wǎng)環(huán)境中,安全保障難度極高。網(wǎng)絡(luò)信息安全的熱點(diǎn)長(zhǎng)期集中在邊界防護(hù)上。保密、保護(hù)和保障,在信息安全發(fā)展的不同階段,思想和方法不斷變化。目前主導(dǎo)方向是:依據(jù)可信計(jì)算的思想,防內(nèi)為主,從主機(jī)加固開始,向外擴(kuò)展直至邊界。做真實(shí)系統(tǒng)的影子系統(tǒng),按照等級(jí)保護(hù)的規(guī)范進(jìn)行模擬測(cè)試,穩(wěn)定后將安全策略移植到真實(shí)系統(tǒng)上。

參考文獻(xiàn):

[1]康彬.新媒體時(shí)代的受眾研究――由麥奎爾的《受眾分析》談起[J].新聞知識(shí),2011(01).

第8篇

多媒體技術(shù)的發(fā)展迅速,軟件也在不斷地更新,這就使舞臺(tái)表現(xiàn)中計(jì)算機(jī)的應(yīng)用越來(lái)越廣泛,不僅如此,多媒體技術(shù)在舞美領(lǐng)域的應(yīng)用,也為舞臺(tái)的視覺和人們的審美觀念都產(chǎn)生了很大的改變。由于多媒體技術(shù)的運(yùn)用,舞美技術(shù)不斷的突破了手工時(shí)代的封閉性和局限性,實(shí)現(xiàn)舞臺(tái)的時(shí)間藝術(shù)與空間藝術(shù)的綜合,不僅具有音樂與文學(xué)的聽覺性和文學(xué)性,還有建筑與繪畫的視覺性和空間性。另外,多媒體技術(shù)在舞美領(lǐng)域中運(yùn)用的作用也是具有一定意義的,不僅能夠?qū)⑷藗兊囊曈X范圍得到擴(kuò)展,還在一定程度上促進(jìn)人們思維能力的提升。在圖形設(shè)計(jì)和舞美創(chuàng)作上,計(jì)算機(jī)起到了非常重要的主導(dǎo)作用,幫助我們開發(fā)新的思路,將計(jì)算機(jī)語(yǔ)言轉(zhuǎn)換成舞臺(tái)語(yǔ)言,從而激發(fā)出創(chuàng)意的火花。

二、多媒體技術(shù)在舞美中的運(yùn)用

1、虛擬現(xiàn)實(shí)技術(shù)

計(jì)算機(jī)具有非常神奇的表現(xiàn)力,能夠隨心所欲地創(chuàng)造理想形態(tài)。計(jì)算機(jī)的三維技術(shù),在仿真和創(chuàng)造上具有非常強(qiáng)的能力,可以在虛擬的空間里,創(chuàng)造出極其逼真的世界,還能夠在想象力下創(chuàng)造出大自然的視野,在三維動(dòng)畫所表現(xiàn)的空間畫面中,以超現(xiàn)實(shí)的表現(xiàn)力設(shè)計(jì)出動(dòng)態(tài)的理想世界,而這些功能對(duì)于傳統(tǒng)的材料工具和技法來(lái)說(shuō)是很難實(shí)現(xiàn)和企及的。在傳統(tǒng)的舞美設(shè)計(jì)中,首先要進(jìn)行構(gòu)思,做出初步的草圖,在導(dǎo)演和相關(guān)部門協(xié)商之后,形成具體化的構(gòu)思,然后做出效果圖。而手繪圖只能通過二維空間來(lái)表現(xiàn)三維空間,不能直觀的顯示出真實(shí)的場(chǎng)景。還有舞美中的燈光效果也不能僅僅通過手繪來(lái)顯示,由于燈光變化很多,不能手繪出每一種燈光變化的效果圖。另外在舞臺(tái)上,所有的燈光、布景在安排設(shè)定完畢,一旦產(chǎn)生燈光和布景的問題是很難解決的,所以只有通過計(jì)算機(jī)三維技術(shù)來(lái)進(jìn)行彌補(bǔ)。通過計(jì)算機(jī)燈光設(shè)計(jì)的相關(guān)軟件,對(duì)于燈光的顏色、材質(zhì)和影子以及相關(guān)的附加效果進(jìn)行編輯和圖像生成,從而真實(shí)地展現(xiàn)現(xiàn)場(chǎng)燈光效果。

2、新型影像設(shè)備

由于科學(xué)技術(shù)的發(fā)展,在舞臺(tái)演出中也不斷的應(yīng)用種類更多、更加先進(jìn)的影像設(shè)備,不僅提升了舞臺(tái)效果,對(duì)于舞臺(tái)演出藝術(shù)的進(jìn)步和發(fā)展也有著一定的促進(jìn)作用。LED電子顯示屏作為一個(gè)先進(jìn)的科技產(chǎn)品,具有非常強(qiáng)大的功能,在現(xiàn)代舞臺(tái)中的應(yīng)用也在日益的廣泛。LED有著極其豐富的表現(xiàn)力,不僅能夠模擬實(shí)景,將自然再現(xiàn)出來(lái),還可以作為顯示器顯示一些效果圖像和資料等。而傳統(tǒng)布景與LED相比,靈活性和虛擬性遠(yuǎn)遠(yuǎn)不如LED,在燈光系統(tǒng)上也有著很大的差距,LED屏幕除了能夠模擬出現(xiàn)實(shí)的空間造型,也能夠很好地表現(xiàn)出燈光效果。而LED也在不斷完善和發(fā)展,成為舞美中非常重要的組成部分。在演出過程中,大屏幕能夠代替?zhèn)鹘y(tǒng)的布景,顯示出搭配節(jié)目的畫面,這種虛擬畫面可以為我們提供想象的空間和真是的氣氛。相對(duì)于實(shí)體布景來(lái)說(shuō),LED的制作成本更低,表現(xiàn)的效果更好。

3、視聽特技

在視聽技術(shù)中,應(yīng)用于舞美領(lǐng)域中最為重要的就是舞臺(tái)照明和舞臺(tái)音響。舞臺(tái)照明主要是在演出要求和整體構(gòu)思下,通過燈光技術(shù)設(shè)備和相關(guān)手段與舞臺(tái)人物和景物進(jìn)行配合,使舞臺(tái)表現(xiàn)出理想的視覺形象。傳統(tǒng)的舞臺(tái)燈光的工作是人工更換滌綸色紙,而這種手動(dòng)操作的方式不僅程序繁瑣,缺乏安全性,在演出過程中同一盞燈也不可以換色,不利于燈光設(shè)計(jì)的發(fā)展。在進(jìn)行燈光設(shè)計(jì)時(shí),必須緊扣舞臺(tái)的主題,有針對(duì)性地對(duì)每一個(gè)節(jié)目進(jìn)行燈光藝術(shù)創(chuàng)作,實(shí)現(xiàn)燈光表現(xiàn)形式與節(jié)目?jī)?nèi)容的高度統(tǒng)一。近年來(lái)我國(guó)文藝事業(yè)的發(fā)展對(duì)舞臺(tái)燈光提出了更高的要求,必須逐步的實(shí)現(xiàn)舞臺(tái)燈光的自動(dòng)化、智能化以及科學(xué)化。舞臺(tái)音響技術(shù)在舞臺(tái)上也占有非常重要的地位,在當(dāng)代傳媒技術(shù)的影響下,音響技術(shù)也在不斷的提升設(shè)計(jì)理念,使舞臺(tái)表現(xiàn)更加完整。當(dāng)前多維數(shù)字音響技術(shù)已經(jīng)開始為人們所了解,并在不久的將來(lái)一定會(huì)得到創(chuàng)新和普及,這對(duì)于舞美來(lái)說(shuō)無(wú)疑也是一個(gè)值得探究的領(lǐng)域。

三、結(jié)束語(yǔ)

第9篇

1流媒體技術(shù)的應(yīng)用現(xiàn)狀

現(xiàn)在,流媒體已經(jīng)逐漸發(fā)展成為一個(gè)朝陽(yáng)產(chǎn)業(yè)。有專家預(yù)言,流媒體將成為未來(lái)因特網(wǎng)上應(yīng)用的主流,實(shí)現(xiàn)溝通和傳播的多向性,使傳播不再受到時(shí)間和空間的限制。流媒體技術(shù)廣泛用于新聞出版、證券、娛樂、電子商務(wù)、遠(yuǎn)程培訓(xùn)、視頻會(huì)議、遠(yuǎn)程教育、遠(yuǎn)程醫(yī)療等互聯(lián)網(wǎng)信息服務(wù)的方方面面,總結(jié)起來(lái)有三大應(yīng)用。

1.1網(wǎng)絡(luò)視頻直播目前,流媒體技術(shù)作為第四代媒體技術(shù)中的一種,很多大型的新聞娛樂媒體,如中央電視臺(tái)和一些地方電視臺(tái)等,都在互聯(lián)網(wǎng)上提供基于流媒體技術(shù)的節(jié)目,目前流媒體的視頻直播應(yīng)用突破了網(wǎng)絡(luò)帶寬的限制,實(shí)現(xiàn)了在低帶寬的環(huán)境下的高質(zhì)量影音傳輸,其中的智能流技術(shù)保證不同連接速率下的用戶,使得用戶可以隨時(shí)隨地應(yīng)用流媒體技術(shù)在網(wǎng)絡(luò)上觀看多媒體信息。

1.2遠(yuǎn)程教育Internet的使用開創(chuàng)了遠(yuǎn)程教育的里程碑,它促進(jìn)了遠(yuǎn)程教育中的教學(xué)傳遞日趨現(xiàn)代化,這種教育形式能跨越校界、區(qū)界甚至國(guó)界。流媒體技術(shù)應(yīng)用突破傳統(tǒng)的遠(yuǎn)程教育以文本為主、沒有聲音和視頻,解決了教學(xué)模式單

一、交互性差的問題。教學(xué)模式多樣化體現(xiàn)在教師的在線直播授課和授課視頻觀看,學(xué)員可以由針對(duì)性的選擇想要學(xué)習(xí)的章節(jié)和內(nèi)容,極大的提高了學(xué)習(xí)的效率節(jié)省時(shí)間。此外,流媒體技術(shù)也使遠(yuǎn)程教育的交互從單向通信的方式,如通過Email、在線聊天、BBS等。采用流媒體技術(shù),把流式視頻、音頻加入答疑系統(tǒng)將提高它的完整性和交互能力。流媒體的VOD技術(shù)還可以進(jìn)行交互式教學(xué),達(dá)到因材施教的目的。像Flash、Shockwave等技術(shù)就經(jīng)常應(yīng)用到網(wǎng)絡(luò)教學(xué)中。學(xué)生可以通過網(wǎng)絡(luò)共享學(xué)習(xí)經(jīng)驗(yàn)。大型企業(yè)可以利用基于流媒體技術(shù)的遠(yuǎn)程教育對(duì)員工進(jìn)行培訓(xùn)。

1.3視頻點(diǎn)播及電視電話會(huì)議視頻會(huì)議系統(tǒng)指互聯(lián)網(wǎng)上或者其它數(shù)據(jù)網(wǎng)絡(luò)上開展的一種交互式多媒體通信業(yè)務(wù)。視頻會(huì)議系統(tǒng)與流媒體技術(shù)應(yīng)用相結(jié)合,利用流媒體技術(shù)的良好的可訪問性、可擴(kuò)展性和對(duì)帶寬的有效利用性,實(shí)現(xiàn)視頻會(huì)議內(nèi)容的廣播和錄播,并且由于流媒體終端播放軟件大多是免費(fèi)的,因此利用流媒體機(jī)制:點(diǎn)對(duì)點(diǎn)(unicast)、多址廣播(Multicast)和廣播(Broadcast)可以很好地滿足視頻會(huì)議的如上需求:首先可以使大量的授權(quán)流媒體用戶參加到視頻會(huì)議中,擴(kuò)大了會(huì)議的規(guī)模和覆蓋面;而且利用流媒體技術(shù)的記錄功能,視頻會(huì)議在召開完以后可以實(shí)時(shí)存儲(chǔ),流媒體用戶就可以通過點(diǎn)播的方式來(lái)訪問會(huì)議的內(nèi)容。

流媒體進(jìn)行PHP的通信,最常見的就是可視電話。只要兩端都有一臺(tái)接入Internet的電腦和一個(gè)攝像頭,在世界任何地點(diǎn)都可以進(jìn)行音視頻通信。此外,大型企業(yè)可以利用基于流媒體的視頻會(huì)議系統(tǒng)來(lái)組織跨地區(qū)的會(huì)議和討論。

2流媒體技術(shù)的研究現(xiàn)狀

目前,流媒體技術(shù)主要表現(xiàn)在三個(gè)方面:分別是編碼器(編碼技術(shù))、播放器(播放支持)和流服務(wù)器,三者缺一不可。在數(shù)據(jù)網(wǎng)絡(luò)上傳輸流媒體,需要解決從音/視頻源的編碼/解碼、存儲(chǔ),到網(wǎng)絡(luò)端的媒體服務(wù)、媒體流傳輸,到用戶端的播放一系列問題。

怎樣使較好質(zhì)量的流媒體實(shí)時(shí)播放,需要考慮媒體流傳輸?shù)母鱾€(gè)環(huán)節(jié)。其中,影響傳輸質(zhì)量的三個(gè)最關(guān)鍵的因素是:編碼和壓縮的性能、媒體服務(wù)器的性能、媒體流傳輸?shù)馁|(zhì)量控制。

2.1編碼及壓縮:流媒體文件需要在網(wǎng)絡(luò)上實(shí)時(shí)傳輸,因此必須考慮傳輸中數(shù)據(jù)丟失對(duì)解碼質(zhì)量的影響。針對(duì)這個(gè)問題,采用先進(jìn)的編碼技術(shù),例如錯(cuò)誤彈性編碼(ErrorResilientEncoding):在編碼中通過適當(dāng)?shù)目刂剖沟冒l(fā)生數(shù)據(jù)丟失后能夠最大限度地減少對(duì)質(zhì)量的影響。此外,媒體流的壓縮/編碼還需要考慮速率調(diào)節(jié)的能力,網(wǎng)絡(luò)的擁塞狀況是實(shí)時(shí)改變的,流媒體的編碼應(yīng)該最大限度適應(yīng)網(wǎng)絡(luò)速率的變化。

2.2服務(wù)器的性能提高:流媒體應(yīng)用規(guī)模和范圍的擴(kuò)大,流媒體服務(wù)器的性能也成為制約流媒體服務(wù)擴(kuò)展能力的重要因素。提高服務(wù)器的性能包括CPU能力提高,I/O總線帶寬和傳輸速度,存儲(chǔ)帶寬擴(kuò)展等。

2.3媒體流傳輸?shù)馁|(zhì)量控制:由于流媒體傳輸對(duì)網(wǎng)絡(luò)帶寬、延遲、丟失率等都有很高的要求,提高流媒體系統(tǒng)的整體擴(kuò)展性和降低單個(gè)服務(wù)器性能要求是未來(lái)發(fā)展的趨勢(shì)。

此外還有流媒體技術(shù)研究還有流媒體傳輸協(xié)議和流媒體文件格式的兼容和壓縮的研究上,流媒體在網(wǎng)絡(luò)上傳輸需要合適的協(xié)議,TCP需要較多的開銷,故不太適合傳輸實(shí)時(shí)數(shù)據(jù),流媒體一般采用HTTP/TCP來(lái)傳輸控制信息,而用RTP/UDP來(lái)傳輸實(shí)時(shí)多媒體數(shù)據(jù),流媒體中協(xié)議有三種:實(shí)時(shí)傳輸協(xié)議RTP與RTCP;實(shí)時(shí)流協(xié)議RTSP;資源預(yù)訂協(xié)議RSVP。流媒體文件的格式主要有三類:RealSystem的RealMedia文件格式;微軟高級(jí)流格式ASF簡(jiǎn)介;QuickTime電影(Movie)文件格式。針對(duì)流媒體傳輸協(xié)議的研究和文件格式的轉(zhuǎn)換上也是當(dāng)前研究的一個(gè)方向。

相關(guān)文章
相關(guān)期刊
主站蜘蛛池模板: 高清一级毛片 | 激情影院在线观看 | 国产精品久久久久久久久久久威 | 国产在线公开视频 | 日产精品一区二区三区免费 | 色综合天 | av2014天堂网| 国产中文在线视频 | 国产精品拍拍 | 欧美欧洲性色老头老妇 | 在线毛片免费观看 | 国产一级毛片视频在线! | 人人狠狠综合久久亚洲88 | 国内精品伊人久久久久 | 国产精品视频公开费视频 | 国产一区美女视频 | 免费看一级视频 | 精品成人免费播放国产片 | 国产福利精品在线 | 爱爱激情网 | 久久国产经典视频 | 久久www免费人成_看 | 欧美高清视频在线 | 国产精品久久免费 | 国产一级精品高清一级毛片 | 国产你懂的在线 | 国产高清精品久久久久久久 | 国产我不卡| 国产精品久久久久久永久牛牛 | 国产成人网 | 国产婷婷色综合成人精品 | 欧美h网| 国产高清一级毛片在线不卡 | 午夜高清视频在线观看 | 51短视频版在线观看www免费 | 国产精品欧美日韩 | 麻豆精品在线播放 | 久久两性视频 | 久久国产精品亚洲 | 久久精品一区二区三区四区 | 国产精华av午夜在线观看 |