美攝科技全新發(fā)布汽車圖像與視頻處理方案,締造智能汽車社交新節(jié)點(diǎn)
隨著車輛的普及和硬件的升級,當(dāng)前汽車用戶對車輛的訴求也從基礎(chǔ)的駕駛代步向追求優(yōu)質(zhì)駕乘體驗(yàn)轉(zhuǎn)變,簡單的車內(nèi)娛樂已經(jīng)無法滿足用戶需求,圍繞汽車的生活內(nèi)容分享變得越來越重要。美攝科技近日公開了專為新一代智能網(wǎng)聯(lián)汽車打造的全鏈路車載影像解決方案,從基礎(chǔ)的圖像增強(qiáng)到AI智能化視頻處理等功能均涵蓋其中,以滿足當(dāng)前日益豐富的多維度車載影像處理需求。
將汽車變成行走的攝影機(jī)這個想法聽起來很酷,但為了實(shí)現(xiàn)這一目標(biāo)有幾個問題需要解決。與手機(jī)等設(shè)備相比,車載攝像頭拍攝主要存在以下幾個問題:一、車載攝像頭拍攝出的往往是廣角畫面,在邊緣會產(chǎn)生畸變現(xiàn)象,導(dǎo)致畫面內(nèi)容變形;二、車輛在行駛中難免會產(chǎn)生顛簸,由此帶來的抖動、模糊等問題也極大影響畫面呈現(xiàn)效果;三、由于汽車拍攝到的畫面通常沒有后期處理,畫面效果也往往比較一般。
一、圖像及畫質(zhì)增強(qiáng)
首先針對畫面變形問題,美攝汽車圖像及視頻處理方案直接對攝像頭采集到的畫面進(jìn)行畸變校正處理,在不損失畫質(zhì)的前提下,將圖像恢復(fù)為無畸變的高質(zhì)量拍攝效果。畸變校正可在超低的算力消耗下運(yùn)行,同時兼容不同攝像頭,只需簡單標(biāo)定即可完成適配,為車載攝像頭帶來更接近實(shí)際環(huán)境效果的拍攝效果。
在解決了畫面變形問題后,美攝團(tuán)隊(duì)又在防抖上下足了工夫。通過算法檢測視頻抖動方向以及畫面中物體的運(yùn)行軌跡以實(shí)現(xiàn)畫面穩(wěn)像防抖,同時通過去運(yùn)動模糊算法消除抖動拍攝時產(chǎn)生的模糊和偽影,整個算法可搭配在光學(xué)防抖(OIS)或者非光學(xué)防抖(non-OIS)設(shè)備上。
此外,為了彌補(bǔ)車載攝像頭拍攝色彩的不足,美攝團(tuán)隊(duì)推出了智能校色產(chǎn)品,可以對拍攝圖像進(jìn)行智能分析,動態(tài)找出畫面中存在的過暗、過曝、飽和度不佳、清晰度不足等問題,并自動驅(qū)動美攝自研的數(shù)十項(xiàng)圖像調(diào)節(jié)算法對圖像進(jìn)行實(shí)時調(diào)優(yōu),一鍵達(dá)成專業(yè)校色效果。
如此一來,影響車載攝像頭拍攝畫面質(zhì)量的幾大因素都被一一攻克,使用戶借助汽車也可以拍出近似手機(jī)拍攝效果的畫面。
二、視頻智能創(chuàng)作
單純的拍攝記錄已遠(yuǎn)不能滿足當(dāng)下年輕人樂于社交分享和追求個性表達(dá)的喜好,若是將車載攝像頭拍攝的視頻全部導(dǎo)出再由用戶自己進(jìn)行剪輯包裝,不但耗時耗力,對沒有剪輯基礎(chǔ)的用戶來說也十分不友好。
為了解決這一問題,美攝研發(fā)團(tuán)隊(duì)將自研的AI智能剪輯產(chǎn)品移植到了車機(jī)之上,讓汽車搖身一變成為視頻包裝的載體。汽車智能剪輯是專為汽車內(nèi)容記錄而生的全新方案,在車輛行進(jìn)過程中,車載攝像頭會將實(shí)時視頻流畫面以一定時間間隔傳遞給美攝檢測SDK,由檢測SDK對畫面進(jìn)行分析處理。錄制結(jié)束后,美攝SDK會對保存下來的本地視頻進(jìn)行讀取,并按一定的幀間隔分析處理,分析完畢后自動保存特征文件,提取出其中的精彩片段,智能完成藝術(shù)包裝。期間無需用戶手動操作,即可自動生成高質(zhì)量的汽車路書影片,并支持一鍵分享給社交好友。
對畫面內(nèi)容的精準(zhǔn)識別是實(shí)現(xiàn)智能剪輯的關(guān)鍵因素,美攝龐大的AI標(biāo)簽庫為智能檢測提供了強(qiáng)大助力。2000多項(xiàng)AI標(biāo)簽搭配美攝SDK多維度的圖像檢測能力,讓車機(jī)可以實(shí)現(xiàn)場景識別、人物識別、天空識別、活動檢測、地標(biāo)檢測等多類別識別效果,從而實(shí)現(xiàn)實(shí)時分析畫面內(nèi)容信息,獲取對應(yīng)標(biāo)簽,實(shí)現(xiàn)智能剪輯。
AI標(biāo)簽類型
除了在畫面識別中大顯身手以外,AI檢測與車輛信息相結(jié)合還可以產(chǎn)生更具特色的包裝效果,如虛擬天空。在此基礎(chǔ)上,美攝提供配套手機(jī)端視頻編輯聯(lián)動方案。在美攝SDK底層能力支持下,車機(jī)端可以與其他端實(shí)現(xiàn)視頻制作工程互通。由車機(jī)端智能剪輯輸出的視頻,可以無縫銜接至手機(jī)端、Web端、PC端等,供用戶進(jìn)行深度編輯,滿足用戶個性化出行娛樂及社交分享需求。
三、車內(nèi)互動及娛樂
開車的趣味不止駕駛,基于美攝自研的240點(diǎn)位檢測方案,車機(jī)座艙可以對車內(nèi)拍攝畫面進(jìn)行實(shí)時美顏美型、添加2D/3D人臉道具、變身Animoji等處理,探索車內(nèi)娛樂的更多可能。
伴隨著汽車智能化快速發(fā)展,智能座艙不斷升級,語音交互成為最為便捷自然的互動方式。傳統(tǒng)車載語音系統(tǒng)是通過人機(jī)問答的方式交流,而美攝實(shí)時語音數(shù)字人作為當(dāng)前語音交互系統(tǒng)的延伸,則是通過分析問答系統(tǒng)返回的語音內(nèi)容和情景事件,實(shí)時驅(qū)動數(shù)字人播報,并觸發(fā)特定動作,由此為駕乘者帶來更加真實(shí)、更場景化的語音交互服務(wù)。
美攝科技提供完整的數(shù)字人定制服務(wù),包括形象設(shè)計、動作設(shè)計、動畫創(chuàng)作等全流程,同時支持服飾妝容自定義,為企業(yè)量身打造專屬數(shù)字人形象。企業(yè)也可以通過Unity等三維工具自行設(shè)計人物形象及動作,更具靈活性和自主性。整套方案資源占用極低,可在車機(jī)、大屏、手機(jī)等多類型設(shè)備中運(yùn)行,具有良好的兼容性和穩(wěn)定性。
四、AI識別及處理
作為方案的底層關(guān)鍵技術(shù),多維度的AI圖像檢測能力賦予了車輛更多人性化功能。如車輛可以實(shí)時識別畫面中的多種內(nèi)容信息,進(jìn)而聯(lián)動車機(jī)硬件和圖像引擎完成氛圍燈控制、智能語音提示等各項(xiàng)操作,實(shí)現(xiàn)讓汽車更智能、人車交互更自然的功能進(jìn)化。
基于當(dāng)前的信息安全法規(guī)要求,美攝科技在汽車行業(yè)解決方案中加入了匿名化處理產(chǎn)品。針對拍攝畫面中出現(xiàn)的人臉和車牌,可以通過實(shí)時處理或后處理的方式將其匿名化,最低可以處理占比面積0.0005%的人臉和0.0002%的車牌畫面。匿名化處理具備多種處理形式,包含模糊、同色、馬賽克、效果遮擋等。
自美攝科技推出智能汽車圖像及視頻處理方案以來,已與智己汽車等行業(yè)內(nèi)多家頭部主機(jī)廠商達(dá)成合作,并實(shí)現(xiàn)實(shí)車量產(chǎn)。時至今日,汽車已不再是簡單的交通工具,而是成為了真正意義上的“第三生活空間”。美攝汽車圖像及視頻處理方案,助力車企為用戶帶來更具想象力的玩法和多樣化的服務(wù),創(chuàng)造更具品質(zhì)的駕乘空間。