智東西(公眾號:zhidxcom
作者?| 云鵬

智東西4月14日報道,剛剛vivo在X系列藍圖影像技術溝通會上提前放出了一系列vivo X200 Ultra即將落地的最新影像技術突破。vivo影像產品高級總監李卓提到,他們從鏡頭設計、畫質提升、專業創作流三個維度對vivo X200 Ultra影像能力進行了重構。

vivo掏出手機端側最大視覺生成模型,再發自研影像芯片,大秀空間視頻能力

vivo X200 Ultra會采用蔡司三大定焦大師鏡頭及自研影像雙芯片,從光學器件到芯片,再到模型算法和體驗,vivo已經構建了一套完整的影像技術方案體系。

在鏡頭配置方面,此次vivo和蔡司聯合研發了14mm鏡頭搭配藍圖×索尼LYT818大底“鷹眼”超廣角、35mm鏡頭搭配藍圖×索尼LYT818,第二代85mm蔡司APO 2億超級長焦,共同組成三攝方案。

vivo掏出手機端側最大視覺生成模型,再發自研影像芯片,大秀空間視頻能力

為了進一步提升35mm鏡頭的畫質,vivo X200 Ultra采用了GLC 2.0低反鍍膜技術,將可見光波段的平均反射率降低至0.1%以下,讓畫面更純凈通透。

vivo X200 Ultra的14mm超廣角實現了進光量的提升,配合CIPA 5.0級防抖,以及藍圖夜景算法矩陣,能在拍攝宏大場景的同時捕捉更豐富的細節,同時可以實現14mm超廣角星空拍攝能力。

vivo X200 Ultra的第二代85mm蔡司APO超級長焦進光量較上一代提升38%,進光量的提升讓vivo X200 Ultra拍攝的長焦微距能呈現出更好的清晰度和更扎實的成像質量。

vivo掏出手機端側最大視覺生成模型,再發自研影像芯片,大秀空間視頻能力

為了人像拍照,vivo借鑒了專業機頂閃光燈的變焦功能,通過不同菲涅爾透鏡方案設計,采用了變焦閃光燈技術,實現了廣角燈加長焦燈的變焦功能。

vivo還研發了閃光人像算法,閃光人像算法采用了總共約6.5T算力的模型,對光影及清晰度等多個維度進行計算復原。數據層面上,除了百萬級別的模擬數據,vivo閃光人像首次采用了10W量級的真實數據進行訓練。

提到算法,這次vivo通過藍圖算法矩陣賦予了10億參數到vivo視覺大模型里面,據稱這是手機端側最大的視覺生成模型,AI的融入可以讓夜景拍照更清晰、紋理更細膩。

依托超過500萬份專業攝影數據集訓練的自研視覺生成大模型,融合2000TFLOPS端云一體算力,vivo還實現了一鍵直出2400萬像素圖像。

vivo整合了自研VS1芯片的算力,并融入了AI大模型能力,基于海量高端審美認知進行引導學習,畫面質感、膚質還原效果都更好。

據了解,VS1芯片讓手機首次具備“預處理”+“后處理”能力。VS1芯片是vivo首款前處理大算力AI ISP影像芯片,采用了雙核異構NPU架構。vivo基于自研算法矩陣和芯片架構協同的設計理念,深度定制了VS1的NPU硬件架構和MAC陣列。

vivo掏出手機端側最大視覺生成模型,再發自研影像芯片,大秀空間視頻能力

VS1芯片實現了16TOPS/W的能效密度,數據能根據計算需求精準且快速地在不同層級緩存間流轉,避免了數據擁堵,提高了數據讀取速度。同時,VS1芯片采用了多級ISP+NPU互聯架構,集成硬件級AI ISP管線,可以實現低延時的內部數據處理。

VS1芯片讓X200 Ultra可以運行更復雜的神經網絡算法,帶來比以往更好的清晰度和噪聲表現,同時達成了性能與功耗的平衡。

視頻方面,全焦段4K 60fps 10bit Log視頻提升了畫面的色彩和細節表現,支持最高14EV動態范圍。

vivo掏出手機端側最大視覺生成模型,再發自研影像芯片,大秀空間視頻能力

此次vivo重點提到了空間視頻。在今年3月的博鰲論壇上,vivo首次展示了vivo Vision混合現實頭顯設備,vivo稱其為X200 Ultra空間影像的最佳觀看設備。

據稱vivo實現了手機行業唯一的60fps空間視頻拍攝,并顯著減少了畫面拖影和卡頓感。

可以看到,vivo在影像方面一直堅持自研與共研并行、軟硬件結合,從硬件創新,到算法優化、用戶體驗,vivo正在用技術創新給移動攝影帶來更多可能性。