藝卡智能移動拍攝系統(tǒng)的研發(fā)與應(yīng)用

　　【摘要】 沈陽廣電傳媒集團(tuán)研發(fā)的藝卡智能移動拍攝系統(tǒng)(以下簡稱藝卡)于2018年8月研發(fā)成功，10月在公共頻道200演播室試運行，2018年9月廣電總局規(guī)劃院廣電計量檢測中心對該系統(tǒng)進(jìn)行了測試和驗證。本文對藝卡涉及的相關(guān)技術(shù)、系統(tǒng)架構(gòu)及系統(tǒng)軟件進(jìn)行了詳述。藝卡的成功研發(fā)與應(yīng)用，為廣播電視制作智能化提升推進(jìn)提供有益的借鑒。

　　【關(guān)鍵詞】 演播室智能拍攝 精準(zhǔn)拍攝 拍攝主體跟蹤 無軌移動 微距運動拍攝和動態(tài)跟蹤拍攝

　　推薦閱讀：《模式識別與人工智能》

　　一.引言

　　目前，廣播電視節(jié)目制作已經(jīng)進(jìn)入一個全新的階段，廣電專用機(jī)器人在綜藝晚會、新聞演播間、體育賽事、VR制作等很多方面大顯身手。常見的專用機(jī)器人主要是軌道機(jī)器人。軌道機(jī)器人受軌道和線纜的限制，拍攝空間有限。且這些智能拍攝設(shè)備基本都是國外進(jìn)口，尚無具有完全自主知識產(chǎn)權(quán)的國產(chǎn)產(chǎn)品，一般價格較高，讓很多廣播電視臺和制作單位難以承受，導(dǎo)致技術(shù)推廣受限，應(yīng)用有限。

　　藝卡以國產(chǎn)機(jī)器人為攝像機(jī)承載載體，自主研發(fā)軟件控制系統(tǒng)，實現(xiàn)機(jī)器人智能拍攝，實現(xiàn)精準(zhǔn)拍攝、拍攝主體跟蹤、無軌移動、微距運動拍攝和動態(tài)跟蹤拍攝等功能。為實現(xiàn)廣播電視拍攝智能化，提高電視節(jié)目制播效率，對廣播電視行業(yè)科技進(jìn)步起到極大的推動作用。

　　二.藝卡智能移動拍攝系統(tǒng)涉及的相關(guān)技術(shù)

　　藝卡通過復(fù)合機(jī)器人和攝像機(jī)12個參數(shù)的協(xié)同控制實現(xiàn)精準(zhǔn)拍攝。本系統(tǒng)創(chuàng)造性的將復(fù)合機(jī)器人和攝像機(jī)組成一個完整的移動拍攝系統(tǒng)，其中復(fù)合機(jī)器人由傳統(tǒng)的AGV機(jī)器人和機(jī)器臂機(jī)器人兩種工業(yè)機(jī)器人復(fù)合而成。在實現(xiàn)移動拍攝時，要保持?jǐn)z像機(jī)在運動過程中對拍攝目標(biāo)主體的清晰度和合適的曝光度，需要AGV機(jī)器人、機(jī)器臂機(jī)器人、攝像機(jī)協(xié)同工作，機(jī)器人和機(jī)器臂的運動姿態(tài)與攝像機(jī)的光圈大小、焦距等參數(shù)有著緊密的關(guān)系，存在著極大的參數(shù)相關(guān)性，且這種參數(shù)相關(guān)性并非單一的相關(guān)，而是多參數(shù)相互交叉的復(fù)合相關(guān)。需要將多維度的參數(shù)進(jìn)行融合，建立統(tǒng)一、復(fù)雜的數(shù)學(xué)模型，設(shè)計協(xié)同并發(fā)算法才能實現(xiàn)精準(zhǔn)拍攝。在本系統(tǒng)中AGV具有直線運動、速度(加速度)、轉(zhuǎn)動3個維度的參數(shù);機(jī)器臂具有6個軸向的角度(角速度)6個維度的參數(shù);攝像機(jī)主要具有焦距、光圈、推拉3個維度的參數(shù)，上述12個維度的參數(shù)經(jīng)過協(xié)同控制軟件模塊進(jìn)行統(tǒng)一協(xié)同控制，達(dá)到精準(zhǔn)拍攝，實現(xiàn)了人工拍攝無法達(dá)到的效果。

　　1.機(jī)械機(jī)構(gòu)單元實施方式

　　機(jī)械機(jī)構(gòu)是智能移動機(jī)器人的骨架，由機(jī)器臂和AGV車對接而成。機(jī)械臂采用的型號是新松SR5CL型，為6軸機(jī)械臂，機(jī)械臂由本體和控制系統(tǒng)組成。本體包含電機(jī)、減速機(jī)等驅(qū)動手臂運動的部件;控制系統(tǒng)保證機(jī)械臂的正確方向及承受由于工件的重量所產(chǎn)生的彎曲和扭轉(zhuǎn)的力矩。機(jī)械臂包括6個自由度，可實現(xiàn)機(jī)器人伸縮、旋轉(zhuǎn)和升降等動作。AGV車使用新松倉儲地標(biāo)感測智能車，有蔽障、路徑規(guī)劃的能力。

　　支撐機(jī)器人所有的模塊，動力與驅(qū)動單元為智能移動機(jī)器人提供動力來源;環(huán)境感知單元負(fù)責(zé)對周圍的環(huán)境進(jìn)行感知識別及各種參數(shù)的收集，然后通過轉(zhuǎn)換成控制模塊可以識別的光電信號，輸入到控制單元進(jìn)行數(shù)據(jù)處理;執(zhí)行機(jī)構(gòu)單元為智能移動機(jī)器人執(zhí)行部分，能根據(jù)控制中心的命令執(zhí)行命令，完成任務(wù);信息處理與控制單元作為整個機(jī)械系統(tǒng)的核心部分，將來自傳感器部分采集到的信息進(jìn)行集中匯總存儲，對所有信息分析、規(guī)劃、決策并輸出命令，使機(jī)器人有目的運行。

　　2.操作系統(tǒng)

　　智能移動拍攝系統(tǒng)的控制部分由沈陽廣電傳媒集團(tuán)自主研發(fā)的“藝卡智能移動拍攝遠(yuǎn)程控制系統(tǒng)”實現(xiàn)。遠(yuǎn)程控制系統(tǒng)從軟件架構(gòu)上可歸納為三個層面，底層為指令執(zhí)行層，主要向中間層反饋當(dāng)前拍攝系統(tǒng)狀態(tài)，并根據(jù)收到的指令執(zhí)行相應(yīng)動作;中間層為協(xié)同控制層，根據(jù)系統(tǒng)輸入信息計算智能拍攝系統(tǒng)的控制指令，是軟件控制系統(tǒng)的核心部分;頂層為拍攝場景設(shè)計層，為操作人員提供軟件控制系統(tǒng)的人機(jī)交互界面，用于設(shè)計拍攝動作，也可以根據(jù)預(yù)設(shè)值自動生成機(jī)器人的拍攝動作。

　　遠(yuǎn)程控制系統(tǒng)從實現(xiàn)功能上可劃分為5個模塊：人體檢測跟蹤模塊、機(jī)器人運動控制模塊、場景編排設(shè)計模塊、相機(jī)鏡頭控制模塊和主控模塊。人體檢測跟蹤模塊完成攝像機(jī)拍攝視頻中目標(biāo)人體位置的持續(xù)檢測和跟蹤;機(jī)器人運動控制模塊根據(jù)主控模塊的指令，控制調(diào)整機(jī)器人的拍攝角度，位置和運動軌跡;場景設(shè)計編排模塊根據(jù)預(yù)設(shè)拍攝需求自動生成機(jī)器人的拍攝動作，并根據(jù)拍攝動作發(fā)送控制指令。相機(jī)鏡頭控制模塊根據(jù)收到的控制指令調(diào)整鏡頭的各項參數(shù)。主控模塊實現(xiàn)上述功能模塊的消息同步與協(xié)同控制，通過消息機(jī)制無延遲收發(fā)信息，使機(jī)器人完成拍攝任務(wù)，也為后續(xù)模塊升級和功能擴(kuò)展提供了接口。

　　3.主要功能特點

　　該系統(tǒng)具有精準(zhǔn)拍攝、拍攝主體跟蹤、無軌移動、微距運動拍攝和動態(tài)跟蹤拍攝等五大特點，是機(jī)器人技術(shù)和人工智能技術(shù)在廣電領(lǐng)域的創(chuàng)新應(yīng)用。

　　4.關(guān)鍵技術(shù)及創(chuàng)新點

　　(1)拍攝主體跟蹤技術(shù)

　　基于人工智能的拍攝主體識別技術(shù)，實現(xiàn)了精確聚焦的目標(biāo)跟蹤。

　　本系統(tǒng)創(chuàng)造性的將人工智能的理念和算法應(yīng)用到拍攝目標(biāo)識別中，能夠根據(jù)不同的目標(biāo)主體進(jìn)行輪廓識別，將識別的輪廓區(qū)域通過平面重心提取算法，提取拍攝主體的重心點后，AGV 和機(jī)器臂以此進(jìn)行高速修正，將攝像機(jī)聚焦到目標(biāo)重心，隨后計算出恰當(dāng)?shù)臄z像機(jī)焦距參數(shù)值，反饋至協(xié)同控制模塊，不斷調(diào)整機(jī)器人、攝像機(jī)，從而實現(xiàn)了精確聚焦的目標(biāo)跟蹤。

　　(2)精準(zhǔn)拍攝技術(shù)

　　使用高精度的移動軌跡標(biāo)定技術(shù)，實現(xiàn)了同一軌跡多次高精度重復(fù)拍攝。

　　系統(tǒng)所使用的機(jī)器人和機(jī)器臂具有毫米級的精度，保證了攝相機(jī)拍攝點位的精度。在移動拍攝的過程中，將攝像機(jī)的運動軌跡通過 12 個維度的參數(shù)進(jìn)行數(shù)學(xué)分割，分割成基于時間軸的切分點，同時對點間的參數(shù)變化進(jìn)行擬合算法標(biāo)定，即運動軌跡標(biāo)定。然后記憶存儲，存為拍攝場景。在每次同軌拍攝時，通過自動定點復(fù)位和校正措施，從而實現(xiàn)毫米級的運動軌跡重復(fù)拍攝。