C114訊 11月10日消息(林想)本周,以“象由芯生·科技服務人民”為主題的2020紫光展銳市場峰會重磅開啟,廣大生態(tài)合作伙伴共聚一堂,共話數(shù)字世界新未來。
在今天舉辦的“多媒體技術研討會”上,來自紫光展銳產(chǎn)業(yè)鏈的合作伙伴將分享有關多媒體發(fā)展趨勢、圖像優(yōu)化,手機拍照、AI與多媒體技術融合方面的最新技術及應用。
研討會上,紫光展銳先進多媒體實驗室主任趙磊表示,人工智能幫助我們記錄更美好的瞬間,芯片幫助我們實現(xiàn)夢想,紫光展銳下一步將不斷探索智能影像的其他思路,滿足用戶新需求。
亞里士多德將人體的感官分為5種,即觸覺、嗅覺、味覺、聽覺和視覺。人類感知世界人類感知世界80%以上來自視覺。隨著技術的不斷發(fā)展,相機可以還原人眼,記錄更多的場景。
隨著手機終端的不斷演進,在影響功能變得日漸強大,手機拍照已經(jīng)成為人們記錄生活的最佳方式之一。在手機拍照方面,ISP(圖像信號處理器)是拍照顏值擔當、CPU、GPU是性能擔當、NPU是智慧擔當,Modem則是外交擔當。
“ISP性能會直接影響到手機拍照、攝像水準。”趙磊表示,移動端設備從本世紀初開始逐漸興起,其拍照功能也是愈發(fā)完善。 在 2010 年后,手機拍照迎來了技術發(fā)展的一次爆發(fā)。在這一過程中,智能手機強大的硬件為手機中內(nèi)置的ISP系統(tǒng)提供了巨大支持。
但ISP并不是萬能的,AI技術的迅猛發(fā)展給相機帶來了新的機遇,于是人工智能被廣泛應用到智能影像。從目前來看,AI引入到智能影響可以分為三個階段:
階段一,圖像理解->高層視覺(high level vision),對圖像分析得到場景的語義表示,具有人眼和人腦的能力;階段二,圖像分析->中層視覺(middle level vision),對圖像的內(nèi)容進行分析,提取有意義的特征,便于后續(xù)更高層的處理;階段三:圖像處理->低層視覺(low level vision),對輸入的圖像做某種變換,輸出仍然是圖像,基本不涉及或者很少涉及圖像內(nèi)容的分析。
現(xiàn)在圖像處理技術已經(jīng)全面AI化了。那么手機上又將如何用AI呢?對此,趙磊指出,借助CPU/NPU/DSP/GPU的計算能力,ISP芯片告別裸奔走向組合模式。紫光展銳推出的UNISOC T7520芯片組,在降低功耗的同時實現(xiàn)了優(yōu)化的5G體驗,而且通過大幅增強的AI計算和多媒體成像處理能力,大幅提升用戶的手機拍照體驗。