Cocos 受邀出席車載抬頭顯示 HUD 高峰論壇，助力座艙智能化升級

　　【太平洋汽車網 行情頻道】

隨著汽車智能化的到來，汽車座艙發展趨向以多個屏幕同時呈現信息，而 AR-HUD 作為 HMI 的窗口之一，以一種更加自然的圖像處理方式呈現在駕駛員的前方，提供更多有用的信息，成為新的趨勢。近期發布的理想 L9，通過超大尺寸的 HUD 抬頭顯示系統以及方向盤上方的安全駕駛交互屏來提供足夠的行車信息，被視為 AR HUD + 小型信息交互屏“代替”傳統液晶儀表的里程碑事件。在新的人車交互方式下，AR-HUD 的成熟以及相關 HMI 設計的升級，有望重塑汽車車內體驗。

近日， Cocos 產品總監郭萌在 2022 年第四屆車載抬頭顯示 HUD 高峰論壇上，進行了以《實時3D渲染引擎助力座艙智能化交互升級》為主題的演講，分享了他對于 AR-HUD 的理解，以及 Cocos 引擎如何幫助主機廠為用戶帶來全新的座艙 HMI 交互體驗。

Cocos 產品總監郭萌

以下內容整理自演講實錄：

Cocos 引擎：不斷拓寬應用場景，提升數字內容行業生產效率

大家好，我是來自 Cocos 的郭萌，很開心有機會能和在座的從業者溝通交流。今天主要分享一下這些年 Cocos 在 3D 渲染引擎的積累，以及我們在車機行業的探索。

Cocos 成立于 2010 年，我們是一家數字內容的生產平臺，旗下的核心產品叫 Cocos 引擎，目前服務了包括汽車、游戲、在線教育、XR 等行業的公司。Cocos 的注冊開發者已經超過了 150 萬，分布在 203 個國家和地區。同時，Cocos 也是一家完全中國自主知識產權的 3D 圖形渲染引擎。

在我們接觸的主機廠中，很多主機廠都在強調要對座艙 HMI 進行升級。希望座艙的視覺表現更加酷炫，基于 PBR 實現更加次時代的效果。

目前越來越多的主機廠也在關注一些 AR-HUD 在智能座艙的運用，包括最近發布的理想 L9，已經取消了儀表屏，取而代之的是用更大尺寸的 HUD 作為信息顯示。

我們認為 AR 在座艙內成為了繼屏幕顯示、語音交互和視覺交互之后的又一大交互方式。通過這種交互方式，Cocos 希望能夠幫助主機廠去創造更多的內容生態，提升 AR-HUD 的使用范疇，將座艙的體驗再升級。

除了車機，我們現在看到的 AR 產品幾乎都是使用很多優秀的游戲引擎開發的，所以我認為后續的主機廠在做 AR 顯示內容的時候，也會基于這些優秀的游戲引擎作為工具進行開發。

Cocos HMI 智能座艙解決方案

Cocos HMI 智能座艙解決方案目前已經涵蓋了車載人機交互界面，自動輔助駕駛可視化，車載虛擬形象，車載游戲，音樂播放器等能力。已經覆蓋到座艙內包括 HUD、儀表、IVI、娛樂副屏在內的多種顯示設備。

在系統支持上，已經做到適配 Android，Linux，QNX，HarmonyOS 等主流車機系統。Metal、Vulkan、WebGl 1.0、WebGl 2.0、GLES2、GLES3 等比較常見的渲染后端也已完整支撐。

3ds Max、Maya、Blender 等 3D DCC Tools 導出的傳統的 3D 格式文件、傳統的多媒體資源，都可直接導入到 Cocos 的開發工具里進行二次開發，再加上 Cocos Creator 自帶的 UI 編輯器、動畫編輯器以及編碼環境，常用的 PBR 材質系統、粒子系統、實時光影等效果，都可以直接使用，便于使用者搭建座艙內的 3D 場景。

此外 Cocos 還支持 Web 系統，也就是說開發階段只需維護一套代碼，就可以支持發布到各個平臺，極大的節省了主機廠的維護成本。

更好玩的 VPA

越來越多的主機廠開始使用 VPA 形象來替換老一代的語音助手形象。基于實時渲染的 3D 形象，在情感交互表現力上會更加的靈活，更強。 Cocos 目前可以提供包括形象設計、形象建模、針對語音場景的動作制作，包括聯動其他 App 的功能在內的一整套框架。

主機廠在做新一代 VPA 的過程中，都希望引入游戲化的元素，做成一個可運營的功能。比如引入一些節日彩蛋，生日彩蛋。國慶中秋的時候，是不是能有一些新的東西能夠實時地下發到用戶的車機端，讓用戶對 3D 形象時刻保持新鮮感。

Cocos 引擎作為游戲開發引擎，本身擁有熱更新框架，可以支持整個 VPA 形象從模型、到代碼、到場景、到腳本邏輯的實時更新。

后續由 Cocos 為主機廠搭建后臺服務：資源管理平臺，可獨立于 OTA 提供實時熱更新能力。有了實時熱更新，可以做到每周、每天給 VPA 下發新的服裝、新的動作，讓主機廠不受限于 OTA  的節奏來運營 VPA。

比如短視頻平臺上某一個舞蹈火了，由工程師把舞蹈動作的腳本文件打包上傳到更新后臺。第二天當用戶打開車機的時候，車主的虛擬個人助理形象就可以跳這段舞，這對用戶來說是更有趣的體驗。

讓 ADAS 不再那么“疲憊”

目前越來越多的車型都提供了自動輔助駕駛功能。但之前看到一個調研，許多車主在使用自動輔助駕駛的時候，反而會更累。主要原因是有時候自動輔助駕駛的可視化做得不夠好，車主不知道自己的車下一步是要干什么，這時候他會產生很大的恐慌以及緊張，長時間處在這樣情感下，就會感覺到疲憊。

所以自動駕駛可視化也是自動輔助駕駛功能的一個很重要的部分，Cocos 基于主機廠提供的原始地圖數據，根據相應的 HMI 的視覺風格進行 3D 可視化渲染。用一個符合主機廠要求的視覺方案來進行 3D 還原，從而改善車主使用 ADAS 功能的體驗。

多模態交互車載游戲

游戲是 Cocos 重要的應用場景之一。在車載游戲領域，Cocos 做的更多的是幫助主機廠去建設座艙內的多模態交互游戲。包括基于車內攝像頭的一些體感游戲，結合麥克風的語音類游戲，結合方向盤類的運動類的游戲。以及聯動前后屏、主副駕屏的多屏聯動類游戲。

更具氛圍感的音樂播放器

音樂是座艙內最傳統，也是使用率排在前三的核心功能。目前許多主機廠都有升級音樂播放器來打造差異化的需求，而不是千篇一律地使用某某音樂播放器車機版。基于 3D 渲染引擎能力，Cocos 能夠幫助主機廠重新包裝音樂播放器，通過歌詞、音樂可視化的效果，來提升座艙內音樂的氛圍感。

Cocos Runtime：低延遲、“即點即用”

Cocos Runtime 是 Cocos 開發的一個支持互動內容免安裝即可運行的商業化 SDK，可運行在多種操作系統平臺上，可以理解為一套小程序和小游戲的底層運行框架，支持主流 JavaScript 游戲引擎開發的內容，可以高效地將數字內容的運行效率做到最大化的提升。各種硬件設備、App 集成 Runtime 之后，用戶即可感受數字互動內容“點開即玩”的暢爽體驗，而不是通過傳統的下載的模式。

在座艙內，目前有些 HMI 產品的啟動和加載時間長達數十秒，無疑這會嚴重影響駕乘人員的體驗，再比如 AR-HUD，理想情況應該做到毫秒級的延遲控制，才能將數字虛擬世界與真實世界精確融合，這直接決定了用戶的使用體驗效果。通過引入 Cocos Runtime ，可以提高啟動和加載速度，減少操作延遲。

完善 Cocos 生態鏈，探索技術的更多邊界

開發者生態方面，Cocos 目前累計擁有 150 萬全球注冊開發者。除了國內的一線的互聯網公司，海外的 Facebook、Google、育碧都在和我們進行一些技術上的合作。

Cocos 最近還與任天堂進行了合作共同構建開發者生態，Cocos Creator 即將實現對 Nintendo Switch 的支持，屆時開發者申請成為任天堂認證開發者后，再聯系 Cocos 獲得引擎，即可將游戲一鍵發布到 NS。

在全球最大的開源社區 Github，Cocos 在游戲引擎項目中的 Pull Requests 也位居前列。

Cocos 也在做一系列基于開發者生態的沙龍巡演和線上直播。更多地了解開發者的真實訴求，從而打造更好的內容研發工具。

總的來說，Cocos 將不斷提供更完整的工具鏈和解決方案，基于 3D 應用場景，幫助車企在新一代智能座艙的競爭中占得先機。