- 相關(guān)推薦
淺析大數(shù)據(jù)視角下的電影內(nèi)容特征論文
( 一 ) 電影數(shù)據(jù)獲取平臺(tái)架構(gòu)
電影內(nèi)容語義數(shù)據(jù)能體現(xiàn)作品的豐富特征，蘊(yùn)含大量視頻、音頻、類型、感情、燈光、色彩、鏡頭、特效、情節(jié)等語義信息，更是電影大數(shù)據(jù)的金礦。上海大學(xué)上海電影學(xué)院針對(duì)電影內(nèi)容數(shù)據(jù)開展團(tuán)隊(duì)研究，人工與程序相結(jié)合，已面向數(shù)千部電影和電視劇開展影視內(nèi)容數(shù)據(jù)的提取和積累。
電影數(shù)據(jù)獲取平臺(tái)總體流程包括人工和計(jì)算機(jī)自動(dòng)數(shù)據(jù)生成，人工分配 4 000 部電影并分配給每位參與團(tuán)隊(duì)成員，按時(shí)間節(jié)點(diǎn)和字段類型分步填寫電影基本內(nèi)容字段、電影制作團(tuán)隊(duì)字段。成員利用計(jì)算機(jī)程序按秒分割電影畫面，開展自動(dòng)化男 1 號(hào)女 1號(hào)主角人臉識(shí)別、鏡頭分割，結(jié)合此項(xiàng)內(nèi)容成員再次人工填寫分鏡字段。另一圖像輸出獲取路徑是基本圖象元素?cái)?shù)據(jù)獲取，獲取電影畫面色彩、節(jié)奏、運(yùn)動(dòng)路徑等基本特征數(shù)據(jù)。合并分鏡字段、人臉字段、鏡頭字段、基本圖像數(shù)據(jù)字段后給出最終的視覺展示界面。獲取電影聲音序列，對(duì)聲音時(shí)域和頻域數(shù)據(jù)輸出，在聽覺界面上展示。視覺展示和聽覺展示按電影時(shí)間軸同步，便于用戶多角度比對(duì)電影數(shù)據(jù)。
人工數(shù)據(jù)錄入包括主角年齡、職業(yè)、家庭、隱喻、前后期團(tuán)隊(duì)等數(shù)十種字段。計(jì)算機(jī)自動(dòng)數(shù)據(jù)生成包含顏色、邊緣、鏡頭、3D 、頻率、人臉、景別等數(shù)十種字段。
本平臺(tái)首先需人工填寫電影編號(hào)和片名，定位電影所在本地目錄，按時(shí)間序列分割圖像和聲音，一鍵獲取亮度值、單幀紅色分量、單幀綠色分量、單幀藍(lán)色分量、單幀均方差、單幀信息熵、單幀梯度值、紋理數(shù)據(jù)四項(xiàng)、邊緣數(shù)據(jù)一項(xiàng)，同時(shí)統(tǒng)計(jì)各特征數(shù)據(jù)的全片平均值;按時(shí)間序列獲取聲響、主頻值、主頻點(diǎn)、1 / 2中位數(shù)頻點(diǎn)、1 / 4 分位數(shù)頻點(diǎn)、3 / 4 分位數(shù)頻點(diǎn)、均方差，同時(shí)統(tǒng)計(jì)各特征數(shù)據(jù)的全片平均值 ;后臺(tái)統(tǒng)計(jì)男 1 號(hào)女 1 號(hào)主角人臉出現(xiàn)的時(shí)間序列、景別、臉色、背景色等數(shù)據(jù)。
( 二 ) 電影內(nèi)容數(shù)據(jù)解讀案例
數(shù)據(jù)分類輸出后存入對(duì)應(yīng)表格，用戶使用本系統(tǒng)音視頻閱讀瀏覽器解讀已獲取電影數(shù)據(jù)。本例僅對(duì)單部電影《智取威虎山》進(jìn)行解讀。
電影色彩節(jié)奏變化解讀。用戶首先瀏覽基礎(chǔ)圖像數(shù)據(jù)。圖像顏色分量由紅、綠、藍(lán)色曲線表示。《智取威虎山》主要場(chǎng)景由戶外冰雪場(chǎng)景、室內(nèi)對(duì)白和戰(zhàn)斗構(gòu)成，偏藍(lán)的分段表示為戶外冰雪場(chǎng)景，偏紅的分段表示為室內(nèi)場(chǎng)景。由圖 3 可知，戶外冰雪場(chǎng)景明亮并偏冷色調(diào)，室內(nèi)場(chǎng)景暗淡并偏暖色調(diào)，一段昏暗的室內(nèi)對(duì)白后緊接著戶外的明快戰(zhàn)斗，按波形變化率，室內(nèi)畫面運(yùn)動(dòng)慢而戶外戰(zhàn)斗運(yùn)動(dòng)變化較快。最后的時(shí)間序列為明亮的紅色分量，這是有意安排的最終戰(zhàn)斗，筆者認(rèn)為是與故事前段戰(zhàn)斗的色彩反差對(duì)比并隱喻革命勝利。為了表達(dá)室內(nèi)明亮的暖色調(diào)，場(chǎng)景故意設(shè)計(jì)了為“座山雕”祝壽的橋段，以此實(shí)現(xiàn)了強(qiáng)烈的戰(zhàn)斗色調(diào)對(duì)比。
電影高潮位置解讀。圖像數(shù)據(jù)展示了整部電影的顏色變化率，統(tǒng)計(jì)結(jié)果表示在電影開始后 1 / 3 處，圖像變化率有個(gè)明顯的快區(qū)間，此區(qū)間即為“楊子榮”上山遇老虎并戰(zhàn)斗的特效場(chǎng)景。導(dǎo)出男 1 號(hào)主角識(shí)別序列 ( 圖 3 中綠色圓點(diǎn) ) 后發(fā)現(xiàn)，男 1 號(hào)主角首次出現(xiàn)在約開篇 8 00 秒的時(shí)間軸上，景別 ( 圖 3 中紫色圓點(diǎn) )為中景，場(chǎng)景為夜晚的火車站，臉部與環(huán)境沒有突出的亮度和顏色反差。男 1 號(hào)主角集中出現(xiàn)在上山打虎的橋段中，約在 23 00 秒到 3 000 秒的時(shí)間軸范圍內(nèi)，男 1 號(hào)主角景別以中、近、特寫為主，配以快速鏡頭和畫面變化，確認(rèn)電影高潮的時(shí)間軸位置。
電影畫面復(fù)雜度解讀。信息熵?cái)?shù)據(jù)體現(xiàn)圖像幀攜帶的信息量大小，全白、全黑或單一顏色的信息量最小。
本影片單幀信息量變化不大，僅隨亮度提高信息量略有提高，說明本影片在絕大部分時(shí)刻提供觀眾穩(wěn)定的視覺信息感受。均方差參量隨著亮度變化較為明顯。
電影畫面形態(tài)和對(duì)白位置解讀。圖像邊緣數(shù)據(jù)和梯度值體現(xiàn)單幀圖像畫面邊緣量。隨著場(chǎng)景變化，此數(shù)據(jù)略有波動(dòng)，除在戶外火車站倉庫首戰(zhàn)時(shí)，鐵軌的出現(xiàn)就讓此數(shù)據(jù)大大提高。由于是對(duì)電影全圖進(jìn)行分析，故也包含了底部字幕對(duì)白信息。當(dāng)有對(duì)白字幕出現(xiàn)時(shí)，此數(shù)據(jù)也大大提高，這為對(duì)白字幕在時(shí)間軸上出現(xiàn)確切位置提供依據(jù)。
聲音數(shù)據(jù)伴隨圖像數(shù)據(jù)而變化。頻點(diǎn)分布廣即1 / 2 中位數(shù)頻點(diǎn)、1 / 4 分位數(shù)頻點(diǎn)、3 / 4 分位數(shù)頻點(diǎn)之間差別較大說明此橋段背景聲音嘈雜 ;主頻點(diǎn)較低且集中說明是人物在安靜環(huán)境下對(duì)白的橋段 ;聲音響度也側(cè)面反映了橋段的激烈度。
( 三 ) 數(shù)據(jù)應(yīng)用初探
結(jié)合電影團(tuán)隊(duì)現(xiàn)有的廣電用戶行為數(shù)據(jù)、互聯(lián)網(wǎng)用戶行為數(shù)據(jù)、IPTV 用戶行為數(shù)據(jù)、互聯(lián)網(wǎng)購票數(shù)據(jù)和影視評(píng)論螞蟻數(shù)據(jù)，可開展廣告投放決策、內(nèi)容策劃決策、選角排序決策、分鏡決策、Layout分析、攝像決策、音樂音效決策，也可用在電影評(píng)論和觀眾審美等領(lǐng)域。
在總體電影決策方面，本研究提供的鏡頭分割和人工標(biāo)記數(shù)據(jù)能區(qū)分各橋段的時(shí)間軸位置和場(chǎng)景地理位置、時(shí)間、天氣、環(huán)境、人物、動(dòng)作、背景等基本內(nèi)容 ;提供的圖像聲音數(shù)據(jù)結(jié)合人工標(biāo)記情感數(shù)據(jù)能解讀故事情節(jié)發(fā)展節(jié)奏 ;提供的制作團(tuán)隊(duì)數(shù)據(jù)為選擇攝像、化妝、機(jī)械、美術(shù)、特效、動(dòng)畫等崗位人員提供依據(jù)。
在局部規(guī)劃方面，通過對(duì)類型片的檢索，可提供某類型片主角首度出現(xiàn)時(shí)間點(diǎn)、景別、臉部色調(diào) ;確定某類型電影高潮時(shí)段、色彩分布 ;提供全片鏡頭運(yùn)動(dòng)路徑 ;提供類型片 3D 拍攝參數(shù)等導(dǎo)演、攝像、錄音所關(guān)心的數(shù)據(jù)。
本文研究?jī)?nèi)容正為上海市內(nèi)兩部電影投資、拍攝決策開展前期服務(wù)，提供高潮時(shí)間軸分析、男 1 號(hào)女1 號(hào)主角出場(chǎng)和出鏡分析、節(jié)奏變化、鏡頭序列分割等服務(wù)。隨著數(shù)據(jù)積累和數(shù)據(jù)庫建設(shè)完整，切入中后期的拍攝、Layout階段和 3D 特效制作、3D 舒適度研究等流程中。
結(jié)語
在“互聯(lián)網(wǎng) +”的時(shí)代用戶行為數(shù)據(jù)如依托行業(yè)可較易獲取，但僅僅依靠用戶行為數(shù)據(jù)來嘗試內(nèi)容創(chuàng)意指導(dǎo)、后期制作和營(yíng)銷還遠(yuǎn)遠(yuǎn)不夠。電影內(nèi)容的語義數(shù)據(jù)能體現(xiàn)作品的豐富特征，蘊(yùn)含大量視頻、音頻、類型、感情、燈光、色彩、鏡頭、特效、情節(jié)、3D 等語義信息，更是電影大數(shù)據(jù)的金礦。本研究分階段實(shí)現(xiàn)內(nèi)容數(shù)據(jù)獲取平臺(tái)，完成了數(shù)據(jù)獲取方法和團(tuán)隊(duì)運(yùn)作流程。本研究只是電影大數(shù)據(jù)的開端，隨著團(tuán)隊(duì)數(shù)據(jù)庫建設(shè)和電影產(chǎn)業(yè)集聚，作為有能力輸出數(shù)據(jù)并擁有各渠道用戶數(shù)據(jù)的電影研究團(tuán)隊(duì)，將組合解讀好萊塢、國內(nèi)、韓國等地域的類型片內(nèi)容特征。本研究在課題組織和支持下有望作為核心技術(shù)平臺(tái)結(jié)合通用數(shù)據(jù)分析算法后投入到電影創(chuàng)作、制作、評(píng)論、欣賞等各環(huán)節(jié)中。
【淺析大數(shù)據(jù)視角下的電影內(nèi)容特征論文】相關(guān)文章：
文化視角下的城市雕塑論文07-03
知識(shí)管理視角下公共管理論文07-03
表達(dá)視角下閱讀教學(xué)的創(chuàng)新實(shí)踐分析論文07-02
淺析高效課堂視角下高中生物課堂改革07-03
心理學(xué)視角淺析領(lǐng)導(dǎo)干部如何消除消極心態(tài)論文07-03
淺析金融風(fēng)險(xiǎn)下的金融刑法創(chuàng)新的論文07-03
淺析電影《秋雨》07-03