![]()
1975年冬天,柯達(dá)實驗室里,工程師Steven Sasson搗鼓出一臺怪東西。
8磅重、1萬像素,按下快門得聽著機(jī)器吭哧吭哧轉(zhuǎn)23秒,才能把一張黑白照片塞進(jìn)飛利浦磁帶。Sasson自己都覺得這玩意兒離實用還差15到20年——前提是得跟膠卷掰手腕。
之后二十年,影像行業(yè)天翻地覆。數(shù)字載體一路狂奔,終于在21世紀(jì)頭十年干掉了膠卷。但相機(jī)仍是「家庭重資產(chǎn)」,普通人離隨心所欲的影像創(chuàng)作,還差著十萬八千里。
直到vivo X300 Ultra發(fā)布,搭載第五代驍龍8至尊版,甩出一個規(guī)格:全焦段4K 120幀10-bit Log視頻。
回頭看,人類用五十年修了一條數(shù)字大運河,現(xiàn)在每個人都能上船了。
這條河里奔涌的,是海量的「密集影像信號」。這詞聽著學(xué)術(shù),其實跟每個舉手機(jī)拍照的人都有關(guān)——
早年的智能手機(jī),你一定見過這些災(zāi)難現(xiàn)場:高光死白、暗部死黑、色彩斷層、幀數(shù)拉胯,還自帶噪點顆粒感。
視覺災(zāi)難的根源,是底層圖像信號處理器(ISP)「消化不良」。當(dāng)年手機(jī)只有8-bit量化精度,環(huán)境光比一超限,高光區(qū)域電平直接溢出成死白,暗部則被粗暴抹成帶噪點的死黑。物理信息丟了,后期軟件也救不回來。
廠商試過堆大傳感器換動態(tài)范圍,但機(jī)身空間就那么大,物理尺寸這條路早已摸到天花板,后端ISP的重要性愈發(fā)凸顯。
過去很長時間,手機(jī)算力中樞卡在14-bit雙ISP。隨著傳感器數(shù)據(jù)暴漲,ISP的數(shù)據(jù)管道必須拓寬。2020年驍龍888引入14-bit三ISP應(yīng)對并發(fā),后來Spectra ISP迭代到18-bit,處理帶寬翻了4096倍。如今X300 Ultra搭載的第五代驍龍8至尊版,順理成章邁入20-bit AI三ISP時代。
別小看這2-bit。數(shù)字底層,bit的變化是指數(shù)級海嘯:單通道色彩量化層級從26萬躍升到104萬,動態(tài)范圍余量直接×4。
依托這層寬裕的物理基底,vivo與高通在底層影像管線完成深度聯(lián)調(diào)。結(jié)果很直接:X300 Ultra實現(xiàn)全焦段14EV動態(tài)范圍覆蓋。
龐大的數(shù)據(jù)余量,被灌進(jìn)兩個考驗底層的專業(yè)規(guī)格——Log格式與杜比視界。
Log模式下,20-bit AI三ISP把傳感器捕捉的線性信號實時映射為對數(shù)曲線。采樣精度提升后,原始信息保留更完整,后期調(diào)色能有效抑制色階斷層;杜比視界標(biāo)準(zhǔn)下,算力體現(xiàn)為動態(tài)元數(shù)據(jù)的封裝精度,能逐幀對準(zhǔn)亮度與對比度,讓HDR層次如實呈現(xiàn)。
實際體驗也很明顯。我們帶著X300 Ultra去拍了一場「熱帶極光」,憑借Log格式的動態(tài)范圍與寬容度,夜半時分記錄到離島漁船照亮天際。后期還原后,天空漸變過渡自然,沒有色彩斷層,噪點抑制堪稱優(yōu)秀。
原本屬于影視工業(yè)的寬容度規(guī)格,被集成進(jìn)移動芯片,在底層鑿出航道。普通人也能隨時用手機(jī)拍出高規(guī)格、有后期空間的視頻。
解決了單顆鏡頭的明暗寬容度,只是完成靜態(tài)重構(gòu)。視頻的核心是敘事連貫性,這就引出移動影像的老大難問題:變焦卡頓。
推拉鏡頭切換視角時,畫面常伴隨不易察覺的跳動,色彩和白平衡也會突兀偏轉(zhuǎn)。影像的敘事感,被硬件的遲鈍瞬間撕裂。
癥結(jié)在于手機(jī)鏡頭各自為戰(zhàn)。它們素質(zhì)各異、受控于獨立時鐘,傳統(tǒng)ISP的「冷啟動」策略只能在變焦瞬間倉促切換。時間戳一錯位,跳幀與色彩斷層注定發(fā)生。
要在移動設(shè)備上實現(xiàn)順滑變焦,必須在底層強(qiáng)行打通這些獨立硬件。
X300 Ultra全焦段高規(guī)格視頻的背后,第五代驍龍8至尊版用兩套咬合機(jī)制把硬件扣合起來——
20-bit AI三ISP撐起龐大數(shù)據(jù)吞吐,讓三顆鏡頭后臺保持熱并發(fā)。即使當(dāng)前只用主攝錄制,超廣角和長焦的ISP通道也在后臺同步運行3A算法,隨時待命。
同時,高通多攝同步系統(tǒng)(MSCC)扎進(jìn)最底層硬件總線,給原本各自為戰(zhàn)的鏡頭強(qiáng)制下發(fā)統(tǒng)一「全局時鐘」。無論物理位置多遠(yuǎn)、傳感器素質(zhì)差異多大,底層死命令只有一個:同一微秒曝光,同一瞬間讀數(shù)。
兩套機(jī)制并發(fā),換取跨鏡頭推拉時數(shù)據(jù)交接平穩(wěn)過渡,緩解跳幀與白平衡漂移的痼疾。
專業(yè)影像領(lǐng)域暗流涌動,若無堅固巨艦與嚴(yán)密團(tuán)隊,難以逐浪其中。如今底層芯片的算力,用數(shù)字邏輯管控物理秩序,讓沒有資金與團(tuán)隊的創(chuàng)作者也能泛舟而行。
影像領(lǐng)域長期存在一個反直覺的「算力悖論」:相機(jī)處理器并非性能怪獸,卻能吞吐超高規(guī)格視頻;手機(jī)SoC能高幀渲染游戲大作,持續(xù)極致影像記錄時卻捉襟見肘。
根本原因在于,相機(jī)ASIC生來只為影像服務(wù);手機(jī)作為復(fù)雜數(shù)字樞紐,真正留給影像的算力并不富裕。
算力拮據(jù),逼迫過去的手機(jī)向存儲妥協(xié)——普遍采用H.264或H.265等幀間壓縮格式,只記錄關(guān)鍵幀和差異信息。體積是壓縮了,畫面的物理空間信息也被徹底破壞。
沒有后期底氣,前期快門不過是碰運氣。素材導(dǎo)入剪輯軟件二級調(diào)色,稍微拉扯陰影或高光,畫面立刻暴露大面積馬賽克色塊與嚴(yán)重色彩斷層。后期調(diào)色空間被鎖死,創(chuàng)意落地?zé)o從談起。
隨著X300 Ultra上市,固有認(rèn)知正在失效,4K 120fps Log這類專業(yè)格式來到手掌方寸之間。
除了20-bit AI三ISP的持續(xù)發(fā)力,編解碼器也功不可沒——vivo與高通協(xié)作,成為國內(nèi)首個落地APV 422編碼的智能手機(jī)。
APV采用專為非線性編輯打造的「幀內(nèi)壓縮」,每幀畫面的色彩深度與亮度信息獨立完整封存。達(dá)芬奇中調(diào)色時,畫面展現(xiàn)出相當(dāng)韌性,應(yīng)對節(jié)點操作或復(fù)雜LUT映射,也能支撐暗部細(xì)節(jié)與高光過渡,大幅減少以往手機(jī)視頻一拉曲線就馬賽克與色階斷層的尷尬。
更友好的是,在提供與影視標(biāo)桿ProRes幾乎同等畫質(zhì)的前提下,APV讓文件體積進(jìn)一步降低約10%。內(nèi)存價格飛漲的環(huán)境下,編碼效率提升幫創(chuàng)作者開源節(jié)流,能省下不少錢。
性能與編解碼技術(shù)雙向奔赴,為大運河打造高規(guī)格「數(shù)字集裝箱」,將信號完整順暢運送到后期工作流。手機(jī)得以擁有與專業(yè)數(shù)字電影機(jī)全鏈路閉環(huán)無二的創(chuàng)作潛力。
2014年,vivo推出Xshot拍照旗艦,與X超薄、Xplay大屏組成三位一體產(chǎn)品線。這臺手機(jī)搭載1300萬像素索尼第二代堆棧式傳感器、F1.8大光圈、光學(xué)防抖和雙色溫補(bǔ)光燈。另一個沒那么引人注目的配置,是驍龍801處理器引入雙ISP架構(gòu),解決快門遲滯,并為高頻作用的OIS光學(xué)防抖計算補(bǔ)償角度提供算力支持。
用底層算力輔助物理防抖的工程雛形,在今天演變?yōu)榈谖宕旪?至尊版上OIS與EIS極高頻數(shù)據(jù)握手的全焦段防抖鏈路。
此后十余年,手機(jī)影像能力一路狂奔,數(shù)據(jù)從溪流匯聚成洪流。承載信息的河道,也持續(xù)擴(kuò)容。
回溯X100 Ultra,行業(yè)首次將2億像素長焦塞入受限機(jī)身時,瞬間快門帶來龐大數(shù)據(jù)擁堵。高通引入認(rèn)知ISP(Cognitive ISP),在底層提供硬件級實時語義分割與算力冗余,讓高像素數(shù)據(jù)吞吐不再伴隨漫長處理黑屏,干凈利落。
到了確立專業(yè)影像基調(diào)的X200 Ultra,戰(zhàn)線推進(jìn)至更嚴(yán)苛的暗光4K視頻。面對極低信噪比環(huán)境,依托驍龍底層異構(gòu)計算平臺,影像架構(gòu)完成從傳統(tǒng)ISP向NPU的深度交接。AI算力前置到RAW域進(jìn)行幀級降噪,手機(jī)終于跨越小尺寸傳感器夜景視頻的進(jìn)光量枷鎖,實現(xiàn)干凈可用的動態(tài)記錄。
每一次前端模組與傳感器的激進(jìn)探索,都在對底層吞吐能力發(fā)出嚴(yán)苛拷問。
如今X300 Ultra上,這場向底層索要寬容度的漫長工程,終于觸碰到工業(yè)級影像標(biāo)準(zhǔn)的邊界。
回頭,移動影像從「拍到」到「拍好」的河道蜿蜒漫長;前眺,從「記錄」邁向「創(chuàng)作」的汪洋近在眼前。
數(shù)據(jù)洪流激蕩交匯,驍龍筑起的河床向?qū)挾小?/p>
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.