做影視文化的傳播者
很明顯,機器學習(Machine Learning)和人工(gōng)智能(Artificial Intelligence)已經在後期制作流程中(zhōng)被大(dà)量運用了。
像Adobe、Blackmagic Design和FilmLight這樣的專業後期軟件開(kāi)發商(shāng)都在迅速跟進這些新興技術,比如Premiere Pro中(zhōng)的語音智能識别功能。
作爲一(yī)名調色師和剪輯師,在我(wǒ)的日常工(gōng)作中(zhōng)已經開(kāi)始大(dà)量使用達芬奇中(zhōng)的這些智能工(gōng)具。下(xià)面我(wǒ)會分(fēn)享五種AI功能,你可以學習并将它們用到你的工(gōng)作流程中(zhōng)。
Blackmagic Design以2019年達芬奇 16 Studio版本推出的神經網絡引擎(Neural Engine)爲起點,開(kāi)啓了他們的AI之旅。這是他們在應用程序中(zhōng)提供人工(gōng)智能/機器學習工(gōng)具的第一(yī)步,包括以Speed Warp進行智能變速控制、Super Scale進行素材縮放(fàng)變換、自動調色進行色彩匹配,更有面部識别自動美顔等精彩功能。
随着達芬奇 17 Studio版本的發布,BMD實現了更多由神經引擎驅動的功能,比如神奇遮罩、智能場景探測、物(wù)體(tǐ)移除和智能重新構圖,将AI技術又(yòu)前推進了一(yī)大(dà)步。
接下(xià)來我(wǒ)們看具體(tǐ)的應用。
在達芬奇中(zhōng),我(wǒ)最喜歡的人工(gōng)智能效果之一(yī)就是面部修飾工(gōng)具。
這個有趣的工(gōng)具可以快速地修飾皮膚、去(qù)除眼袋、增強和銳化眼睛,甚至可以對拍攝對象的面部進行微妙的二次布光(當然要在适當的時候)。
當你第一(yī)次應用ResolveFX的面部修飾工(gōng)具,隻需點擊分(fēn)析,這個工(gōng)具就會追蹤畫面中(zhōng)人的面部輪廓,完成跟蹤後,就可以獨立地調整人物(wù)包括五官在内的各個面部特征。
重要的是,如果檢測膚色或面部特征的自動檢測過程有任何問題,你還可以通過手動給它提供一(yī)個Alpha通道來告知(zhī)插件面部的正确位置,或者調整色溫色調等設置來告知(zhī)插件該畫面下(xià)膚色的真正色彩範圍。
對我(wǒ)來說,面部修飾工(gōng)具做得最好的一(yī)點是對各個參數的細緻控制,熟練掌握後可以簡捷快速地實現調整,高效地保證了鏡頭的一(yī)緻性。
但面部修飾工(gōng)具目前有一(yī)個極大(dà)的缺點:分(fēn)析過程不能批量應用,必須在每一(yī)個需要應用的片段上手動點擊運行,這會很大(dà)程度上延緩你的工(gōng)作流程。
而且更糟的是,大(dà)量的手動操作很容易遺忘而造成錯誤的效果,類似”浮動的眼睛、“懸空的嘴巴”這類錯誤輸出時有發生(shēng)。這是因爲面部修飾工(gōng)具錯誤地使用了來自前一(yī)個鏡頭的跟蹤數據,所以需要在輸出前反複檢查。
雖然達芬奇在很早就有一(yī)整套場景剪切探測的工(gōng)作流程,但它與達芬奇17中(zhōng)引入智能神經引擎的探測場景切點工(gōng)具是完全不同的。
以前的場景剪切檢測工(gōng)具隻能在導入前的媒體(tǐ)頁面上使用,需要大(dà)量的手動調整,或者需要剪輯部門提供一(yī)條完美的剪輯決策表(EDL)。說實話(huà),實際運用中(zhōng)這并不比直接用剃刀工(gōng)具手動剪好多少。我(wǒ)經常發現自己手動剪速度更快,尤其是在素材包含轉場時。
新的探測場景切點功能對于任何熟悉達芬奇剪輯頁面的人來說都是快速、簡單和直觀的:隻需在時間軸上選擇你想檢測剪切的片段,進入頂部的時間線菜單,并選擇探測場景切點。
随後達芬奇就會自動處理,并在處理過程中(zhōng)會出現對話(huà)框,提示你當前進展情況。當他探測完成,你就會在時間線上看到這些新剪切好的片段。如果你需要添加或删除剪切點,你可以在AI識别過程結束後使用達芬奇的分(fēn)割連結工(gōng)具輕松完成。
不得不說,這項功能對提高工(gōng)作流程的效率非常有幫助。雖然它不像其他一(yī)些由神經引擎驅動的新鮮功能(如神奇遮罩或面部修飾)那麽炫酷,但探測場景切點已經成爲我(wǒ)日常加速工(gōng)作的必備工(gōng)具。
不管是提取幾個鏡頭還是剪輯部門給過來的修改輸出,探測場景切點消除了素材在不同剪輯軟件之間額外(wài)往返的需要,這爲我(wǒ)節省了大(dà)量時間來完成更重要的創作任務。
達芬奇的神奇遮罩正好符合科幻小(xiǎo)說家Arthur C. Clarke關于技術的名言:"任何足夠先進的技術都與魔法無異"。
達芬奇的神奇遮罩隻要求用戶在畫面上畫出一(yī)筆,就可以确定一(yī)個或多個要在整個鏡頭中(zhōng)跟蹤的對象。接下(xià)來,由神經網絡算法訓練出來的人工(gōng)智能就會自主在整個片段中(zhōng)跟蹤選定的主體(tǐ)。
神奇遮罩甚至可以更進一(yī)步,利用其人類特征模型,智能地隔離(lí)被攝者身體(tǐ)的特定部分(fēn)—比如隻隔離(lí)裸露的皮膚、隻隔離(lí)衣服、隻隔離(lí)面部、隻隔離(lí)軀幹等。你甚至可以具體(tǐ)到一(yī)頂帽子或一(yī)雙鞋。但它對一(yī)些沒有經過大(dà)量算法訓練的對象,比如動物(wù)這類容易會出現錯誤的結果。
在最近的一(yī)個項目中(zhōng),我(wǒ)使用AI加手動的混合方法來摳一(yī)個角色的白(bái)色衣服,節省了大(dà)量時間。具體(tǐ)來說,就是先依靠神奇遮罩的人體(tǐ)識别功能來跟蹤被攝者,再結合傳統的限定器和遮罩系統來進一(yī)步完善摳像結果。
相比用達芬奇的限定器和遮罩窗口完全手動實現同樣的目标,由計算機來分(fēn)擔繁重的工(gōng)作顯然是未來調色師必須掌握并利用的優勢。
當然,神奇遮罩也有一(yī)些限制。我(wǒ)發現神奇遮罩的計算速度比傳統的摳像流程要更慢(màn),畢竟計算量變得更大(dà)了。根據我(wǒ)的實際經驗,使用神奇遮罩所需的時間大(dà)概是其他方法的三倍。但在許多情況下(xià),這仍然比手動打關鍵幀快。上手後,神奇遮罩會成爲你的工(gōng)具箱中(zhōng)的一(yī)個重要工(gōng)具,特别是當你時間緊迫,沒有時間去(qù)一(yī)幀幀校對時。
需要說明的是,我(wǒ)大(dà)部分(fēn)的經驗是使用工(gōng)作站級别的硬件得出的,這類設備一(yī)般會有幾十個核心的CPU和一(yī)塊或多塊有大(dà)量顯存的強大(dà)GPU。盡管如此,但使用過程中(zhōng)我(wǒ)仍然會遇到偶爾的卡頓或未響應。如果你使用的是功率較小(xiǎo)的台式機或筆記本電腦,而且硬件規格相當低,那我(wǒ)建議避免使用這些AI工(gōng)具,因爲它們更有可能延緩你的工(gōng)作流程,而不是改善它。
總結來說,神奇遮罩在與其他工(gōng)具協作時效果非常好,所以我(wǒ)強烈建議将它與其他摳像工(gōng)具(如傳統的限定器窗口和遮罩窗口)相結合。
我(wǒ)個人對慢(màn)動作或時間重映射鏡頭最讨厭(yàn)的地方之一(yī)是它的卡頓。它把我(wǒ)從我(wǒ)正在看的内容中(zhōng)拉了出來,讓我(wǒ)感覺像被人操縱了。所以我(wǒ)喜歡盡可能地保持鏡頭平穩。
很多時候對鏡頭進行升格處理,要到後期剪輯時才會做,所以你大(dà)概率隻有24幀的素材可供調整,這對變速來說并不理想。好在達芬奇光流運算與速度扭曲運動插值模式相結合,可以爲你提供漂亮的時間重映射效果。至少是目前你所能得到的最好效果。
你可以在剪輯頁面的屬性欄和項目設置中(zhōng)找到時間重映射和運動估計的相關設置,但速度扭曲這個AI選項隻能在剪輯頁面的屬性欄中(zhōng)對需要調整的鏡頭逐一(yī)設置。AI輔助的時間重映射雖然在一(yī)定程度上增加了渲染時間,但它提供了讨客戶喜歡的平滑時間重映射,特别是當客戶一(yī)直接觸的是幀混合這類傳統的低質量時間重映射效果時。
需要注意的是,在添加效果後要盡可能地與離(lí)線剪輯參考相匹配,所以我(wǒ)通常試圖通過調整變速來與離(lí)線參考相匹配。但如果感覺很難匹配到一(yī)緻,那讓鏡頭的變速更平滑往往是正确的方向。
想象一(yī)下(xià),你正在爲某個大(dà)型電視劇項目做後期工(gōng)作,電視劇的故事背景是中(zhōng)世紀。
拍攝過程中(zhōng),劇組小(xiǎo)心翼翼地避免了任何現代的東西入鏡,并在低照度的自然照明環境下(xià)進行暗調拍攝。在急于使用自然光來捕捉一(yī)切的過程中(zhōng),難免出現了一(yī)些小(xiǎo)錯誤。例如,一(yī)個麥克風吊杆溜進了畫面,或者一(yī)個品牌咖啡杯被遺留在了畫面中(zhōng)。
幾年前,這種類型的問題會自動成爲視效組的工(gōng)作,無論多麽複雜(zá)。如今,我(wǒ)們的調色軟件也有了長足的發展,提供了各種工(gōng)具,使得那些身兼多職的藝術家能夠在調色的同時進行物(wù)體(tǐ)移除,而不需要再基于其他軟件設計另一(yī)個完全獨立的流程。
以達芬奇爲例,達芬奇允許在調色界面上進行基礎的AI輔助物(wù)體(tǐ)移除工(gōng)作,也可以在Fusion界面進行更高級的手動操作。在我(wǒ)的日常工(gōng)作中(zhōng),就經常使用ResolveFX中(zhōng)的物(wù)體(tǐ)移除工(gōng)具來去(qù)除建築物(wù)上的某些标志(zhì)、地址和号碼,以及去(qù)除天空中(zhōng)的幹擾元素。
物(wù)體(tǐ)移除插件基于神經引擎來智能生(shēng)成純淨背景,但如果你願意,你也可以不使用它們轉而輸入你自己制作的背景圖。有時我(wǒ)會這樣做,因爲在Photoshop中(zhōng)可以相當容易地扣除小(xiǎo)物(wù)體(tǐ)或移除一(yī)些幹擾因素。
說了這麽多基于人工(gōng)智能的工(gōng)具,我(wǒ)個人仍然覺得這個領域還處于起步階段。
在我(wǒ)使用人工(gōng)智能工(gōng)具時,我(wǒ)常常不得不做相當多的手動調整,所花費(fèi)的額外(wài)處理時間也不少。另外(wài),有的時候,它也會完全失控,導緻結果不可用。可能是因爲這些畫面對于目前的人工(gōng)智能算法來說太過複雜(zá),所以仍需要人工(gōng)操作來保底。
因此,如果你是一(yī)個擁有高超技藝的特效工(gōng)作者(如roto師、合成師等),而你擔心人工(gōng)智能會搶走你的工(gōng)作,那麽至少在最近幾年内,你都可以睡個安穩覺了,人工(gōng)智能還有很長很長的路要走。
我(wǒ)對達芬奇的人工(gōng)智能工(gōng)具以及未來的發展隻是做了一(yī)些簡單的介紹,但我(wǒ)希望這五個工(gōng)具的介紹能夠爲你指明正确的方向,或者至少讓你對一(yī)些新的工(gōng)具産生(shēng)興趣,你可以考慮将其添加到你的工(gōng)作流程中(zhōng)組合運用。
畢竟,你永遠不知(zhī)道在拍攝現場會發生(shēng)什麽意外(wài),而直到素材到達你的手中(zhōng)才有人注意到。無論你願意與否,這類情況在工(gōng)作中(zhōng)屢見不鮮。
如果你對上面提到的任何功能有任何其他問題,我(wǒ)強烈建議你查看達芬奇的官方用戶手冊,你可以從達芬奇軟件頂部的幫助菜單中(zhōng)進入。該手冊足足有3500多頁,是一(yī)本非常全面的軟件應用指南(nán),對達芬奇的每項功能都有很好的說明。
掃碼獲取報價
微信小(xiǎo)程序