美攝科技全新發布汽車圖像與視頻處理方案,締造智能汽車社交新節點
隨著車輛的普及和硬件的升級,當前汽車用戶對車輛的訴求也從基礎的駕駛代步向追求優質駕乘體驗轉變,簡單的車內娛樂已經無法滿足用戶需求,圍繞汽車的生活內容分享變得越來越重要。美攝科技近日公開了專為新一代智能網聯汽車打造的全鏈路車載影像解決方案,從基礎的圖像增強到AI智能化視頻處理等功能均涵蓋其中,以滿足當前日益豐富的多維度車載影像處理需求。
將汽車變成行走的攝影機這個想法聽起來很酷,但為了實現這一目標有幾個問題需要解決。與手機等設備相比,車載攝像頭拍攝主要存在以下幾個問題:一、車載攝像頭拍攝出的往往是廣角畫面,在邊緣會產生畸變現象,導致畫面內容變形;二、車輛在行駛中難免會產生顛簸,由此帶來的抖動、模糊等問題也極大影響畫面呈現效果;三、由于汽車拍攝到的畫面通常沒有后期處理,畫面效果也往往比較一般。
一、圖像及畫質增強
首先針對畫面變形問題,美攝汽車圖像及視頻處理方案直接對攝像頭采集到的畫面進行畸變校正處理,在不損失畫質的前提下,將圖像恢復為無畸變的高質量拍攝效果。畸變校正可在超低的算力消耗下運行,同時兼容不同攝像頭,只需簡單標定即可完成適配,為車載攝像頭帶來更接近實際環境效果的拍攝效果。
在解決了畫面變形問題后,美攝團隊又在防抖上下足了工夫。通過算法檢測視頻抖動方向以及畫面中物體的運行軌跡以實現畫面穩像防抖,同時通過去運動模糊算法消除抖動拍攝時產生的模糊和偽影,整個算法可搭配在光學防抖(OIS)或者非光學防抖(non-OIS)設備上。
此外,為了彌補車載攝像頭拍攝色彩的不足,美攝團隊推出了智能校色產品,可以對拍攝圖像進行智能分析,動態找出畫面中存在的過暗、過曝、飽和度不佳、清晰度不足等問題,并自動驅動美攝自研的數十項圖像調節算法對圖像進行實時調優,一鍵達成專業校色效果。
如此一來,影響車載攝像頭拍攝畫面質量的幾大因素都被一一攻克,使用戶借助汽車也可以拍出近似手機拍攝效果的畫面。
二、視頻智能創作
單純的拍攝記錄已遠不能滿足當下年輕人樂于社交分享和追求個性表達的喜好,若是將車載攝像頭拍攝的視頻全部導出再由用戶自己進行剪輯包裝,不但耗時耗力,對沒有剪輯基礎的用戶來說也十分不友好。
為了解決這一問題,美攝研發團隊將自研的AI智能剪輯產品移植到了車機之上,讓汽車搖身一變成為視頻包裝的載體。汽車智能剪輯是專為汽車內容記錄而生的全新方案,在車輛行進過程中,車載攝像頭會將實時視頻流畫面以一定時間間隔傳遞給美攝檢測SDK,由檢測SDK對畫面進行分析處理。錄制結束后,美攝SDK會對保存下來的本地視頻進行讀取,并按一定的幀間隔分析處理,分析完畢后自動保存特征文件,提取出其中的精彩片段,智能完成藝術包裝。期間無需用戶手動操作,即可自動生成高質量的汽車路書影片,并支持一鍵分享給社交好友。
對畫面內容的精準識別是實現智能剪輯的關鍵因素,美攝龐大的AI標簽庫為智能檢測提供了強大助力。2000多項AI標簽搭配美攝SDK多維度的圖像檢測能力,讓車機可以實現場景識別、人物識別、天空識別、活動檢測、地標檢測等多類別識別效果,從而實現實時分析畫面內容信息,獲取對應標簽,實現智能剪輯。
AI標簽類型
除了在畫面識別中大顯身手以外,AI檢測與車輛信息相結合還可以產生更具特色的包裝效果,如虛擬天空。在此基礎上,美攝提供配套手機端視頻編輯聯動方案。在美攝SDK底層能力支持下,車機端可以與其他端實現視頻制作工程互通。由車機端智能剪輯輸出的視頻,可以無縫銜接至手機端、Web端、PC端等,供用戶進行深度編輯,滿足用戶個性化出行娛樂及社交分享需求。
三、車內互動及娛樂
開車的趣味不止駕駛,基于美攝自研的240點位檢測方案,車機座艙可以對車內拍攝畫面進行實時美顏美型、添加2D/3D人臉道具、變身Animoji等處理,探索車內娛樂的更多可能。
伴隨著汽車智能化快速發展,智能座艙不斷升級,語音交互成為最為便捷自然的互動方式。傳統車載語音系統是通過人機問答的方式交流,而美攝實時語音數字人作為當前語音交互系統的延伸,則是通過分析問答系統返回的語音內容和情景事件,實時驅動數字人播報,并觸發特定動作,由此為駕乘者帶來更加真實、更場景化的語音交互服務。
美攝科技提供完整的數字人定制服務,包括形象設計、動作設計、動畫創作等全流程,同時支持服飾妝容自定義,為企業量身打造專屬數字人形象。企業也可以通過Unity等三維工具自行設計人物形象及動作,更具靈活性和自主性。整套方案資源占用極低,可在車機、大屏、手機等多類型設備中運行,具有良好的兼容性和穩定性。
四、AI識別及處理
作為方案的底層關鍵技術,多維度的AI圖像檢測能力賦予了車輛更多人性化功能。如車輛可以實時識別畫面中的多種內容信息,進而聯動車機硬件和圖像引擎完成氛圍燈控制、智能語音提示等各項操作,實現讓汽車更智能、人車交互更自然的功能進化。
基于當前的信息安全法規要求,美攝科技在汽車行業解決方案中加入了匿名化處理產品。針對拍攝畫面中出現的人臉和車牌,可以通過實時處理或后處理的方式將其匿名化,最低可以處理占比面積0.0005%的人臉和0.0002%的車牌畫面。匿名化處理具備多種處理形式,包含模糊、同色、馬賽克、效果遮擋等。
自美攝科技推出智能汽車圖像及視頻處理方案以來,已與智己汽車等行業內多家頭部主機廠商達成合作,并實現實車量產。時至今日,汽車已不再是簡單的交通工具,而是成為了真正意義上的“第三生活空間”。美攝汽車圖像及視頻處理方案,助力車企為用戶帶來更具想象力的玩法和多樣化的服務,創造更具品質的駕乘空間。