在7月7日2023世界人工智能大會(WAIC)上,商湯科技展示了“商湯日日新SenseNova”大模型體系的多方位全面升級,以及在該體系下的一系列大模型產(chǎn)品更新和落地成果。此外,商湯也著重介紹并展示了其大模型技術(shù)自正式發(fā)布以來與產(chǎn)業(yè)各方的應(yīng)用實(shí)踐,包括商湯絕影最新打造的智能座艙產(chǎn)品和車路云協(xié)同交通體系等,以及在金融、醫(yī)療、電商、移動終端、產(chǎn)業(yè)園區(qū)等行業(yè)生產(chǎn)實(shí)踐中的落地應(yīng)用。
大模型是指具有大量參數(shù)和復(fù)雜結(jié)構(gòu)的機(jī)器學(xué)習(xí)模型。這些模型可以應(yīng)用于處理大規(guī)模的數(shù)據(jù)和復(fù)雜的問題。此前火爆的ChatGPT就是自然語言方面的大模型應(yīng)用。
2021年,商湯正式推出“SenseAuto絕影”智能汽車平臺,包含SenseAuto Cabin絕影智能車艙、SenseAuto ADAS絕影量產(chǎn)智能駕駛、SenseAuto V2X絕影車路協(xié)同三個(gè)業(yè)務(wù)板塊。而如今,它們也已在大模型的加持下創(chuàng)新。
(相關(guān)資料圖)
在智能座艙方面,這套系統(tǒng)擁有四層結(jié)構(gòu),包括底層的車端/云端支持、車艙大腦、智能化操作系統(tǒng)和應(yīng)用支持等。通過視覺、聽覺等多模態(tài)融合,全方位感知用戶需求,通過標(biāo)簽化數(shù)據(jù)記錄用戶習(xí)慣和偏好,提供專屬個(gè)性服務(wù)。同時(shí)可支持形象、語音快速定制的數(shù)字人進(jìn)行擬人化交互。商湯在現(xiàn)場展示了健康問診、旅游規(guī)劃、兒童伴讀和AR說明書等智能座艙應(yīng)用。
這套智能座艙量產(chǎn)落地經(jīng)驗(yàn)極其豐富,目前行業(yè)客戶40+,定點(diǎn)車型60+,定點(diǎn)車輛數(shù)量近2500萬。比如東風(fēng)本田e:NS1與廣汽本田e:NP1,就是全系搭載由商湯提供的DMC駕駛員狀態(tài)感知系統(tǒng)。可對駕駛員的表情、視線、姿態(tài)動作進(jìn)行實(shí)時(shí)感知,準(zhǔn)確判定疲勞、分心、危險(xiǎn)動作等危險(xiǎn)駕駛行為,并將結(jié)果快速反饋給DMC駕駛員狀態(tài)感知系統(tǒng),及時(shí)預(yù)警。
在智能駕駛方面, 商湯擁有感知決策一體化的自動駕駛通用大模型UniAD。我們知道,自動駕駛其實(shí)是三個(gè)業(yè)務(wù)——感知、預(yù)測和規(guī)劃,業(yè)界主流的方案是分別采用不同的模塊來處理這些具體任務(wù)。而商湯的UniAD首次將感知、預(yù)測和規(guī)劃等三大類主任務(wù)、六小類子任務(wù)(目標(biāo)檢測、目標(biāo)跟蹤、場景建圖、軌跡預(yù)測、柵格預(yù)測和路徑規(guī)劃)整合到統(tǒng)一的基于transformer的端到端網(wǎng)絡(luò)框架下,實(shí)現(xiàn)了全棧關(guān)鍵任務(wù)駕駛通用模型。據(jù)悉,其多目標(biāo)跟蹤準(zhǔn)確率超越sota 20%,車道線預(yù)測準(zhǔn)確率提升30%,預(yù)測運(yùn)動位移和規(guī)劃的誤差則分別降低了38%和28%。
此外,大模型還會助力車路云的協(xié)同,憑借多模態(tài)多任務(wù)通用大模型開發(fā)路側(cè)視覺感知大模型,結(jié)合瓊宇2.0及格物2.0構(gòu)建智能交通孿生與仿真,并利用商量2.0的感知推理和人機(jī)交互能力推動車路云共同向大模型對話式交互的演進(jìn)。
商湯在多模態(tài)多任務(wù)領(lǐng)域,發(fā)布了擁有30億參數(shù)的通用大模型“書生(INTERN)2.5”。而“商湯日日新SenseNova”大模型則是一個(gè)模型超市,能不斷訓(xùn)練大模型。
大模型必須要大算力來支持,據(jù)悉,商湯的AI大裝置最高可支持萬億參數(shù)超大模型的訓(xùn)練,比特斯拉的DOJO還高。這樣的模型和算力能有效地支持商湯科技在智能領(lǐng)域的發(fā)展。
■ 關(guān)于商湯科技
商湯科技是一家人工智能軟件公司,業(yè)務(wù)涵蓋智慧商業(yè)、智慧城市、智慧生活、智能汽車四大板塊。擁有多模態(tài)、多任務(wù)通用人工智能能力,涵蓋感知智能、自然語言處理、決策智能、智能內(nèi)容生成等關(guān)鍵技術(shù)領(lǐng)域,同時(shí)包含AI芯片、AI傳感器及AI算力基礎(chǔ)設(shè)施在內(nèi)的關(guān)鍵能力。此外,商湯打造新型人工智能基礎(chǔ)設(shè)施——商湯AI大裝置SenseCore,打通算力、算法和平臺,并在此基礎(chǔ)上建立“商湯日日新SenseNova”大模型及研發(fā)體系,能解決通用人工智能任務(wù)的能力,推動高效率、低成本、規(guī)?;腁I創(chuàng)新和落地,進(jìn)而打通商業(yè)價(jià)值閉環(huán),解決長尾應(yīng)用問題,引領(lǐng)人工智能進(jìn)入工業(yè)化發(fā)展階段。(文/汽車之家 邢月陽)
查看同類文章:電動車車聞智能網(wǎng)聯(lián)更多精彩內(nèi)容:投訴/維權(quán)年終紀(jì)事>>汽車之家車聞-快速真實(shí)的報(bào)道 深入犀利的點(diǎn)評<<關(guān)鍵詞: