大模型“天際”實(shí)現(xiàn)100平方公里城市實(shí)景三維建模

在7月6日召開的2023世界人工智能大會(huì)上，上海人工智能實(shí)驗(yàn)室聯(lián)合香港中文大學(xué)、上海市測(cè)繪院發(fā)布城市級(jí)實(shí)景三維大模型“天際”，該大模型能夠?qū)?00平方公里范圍的城市實(shí)景進(jìn)行高精度快速建模。

(資料圖)

圖為天際大模型建模的陸家嘴實(shí)景。（上海人工智能實(shí)驗(yàn)室供圖）

上海人工智能實(shí)驗(yàn)室青年科學(xué)家戴勃介紹，實(shí)景三維是對(duì)一定范圍內(nèi)人類生產(chǎn)、生活和生態(tài)空間進(jìn)行真實(shí)、立體、時(shí)序化反映的數(shù)字空間。天際大模型集算法、算子、計(jì)算系統(tǒng)為一體，在高效訓(xùn)練的同時(shí)，可準(zhǔn)確表征大規(guī)模三維城市場景，并達(dá)到高質(zhì)量的神經(jīng)渲染效果。

此前相關(guān)技術(shù)應(yīng)用于物體或單個(gè)建筑，而天際大模型將范圍擴(kuò)大到城市的方方面面，實(shí)現(xiàn)了百平方公里的三維實(shí)景建模，在真正的城市尺度上驗(yàn)證基于人工智能的三維實(shí)景技術(shù)潛力的新鮮嘗試。

天際大模型可實(shí)現(xiàn)大規(guī)模場景的三維實(shí)景建模。（上海人工智能實(shí)驗(yàn)室供圖）

“無人機(jī)沿著城市飛一圈，天際大模型就能生成整個(gè)城市的實(shí)景三維模型，分辨率精度可達(dá)4K?！贝鞑f。

據(jù)了解，天際大模型支持高精度實(shí)時(shí)渲染，具有城市實(shí)景三維模型編輯和風(fēng)格轉(zhuǎn)換等功能。根據(jù)研發(fā)人員現(xiàn)場演示，觀眾可從任意角度查看城市實(shí)景三維模型，設(shè)置目標(biāo)建筑相關(guān)參數(shù)，即可在三維模型中移除、移動(dòng)或復(fù)制目標(biāo)建筑。

上海人工智能實(shí)驗(yàn)室主任助理喬宇表示，天際大模型是“書生通用大模型體系”中的三大基礎(chǔ)模型之一?！皶弊?021年發(fā)布以來歷經(jīng)數(shù)次升級(jí)，從覆蓋多種視覺任務(wù)的通用大模型，逐步升級(jí)為涵蓋視覺、語言和三維等在內(nèi)的大模型體系。

“大模型體系這次全面升級(jí)，模型家族進(jìn)一步豐富，能力更強(qiáng)、覆蓋模態(tài)和任務(wù)更廣。實(shí)驗(yàn)室還在模型、數(shù)據(jù)、工具和評(píng)測(cè)等層面進(jìn)行全方位開源，推動(dòng)技術(shù)創(chuàng)新與產(chǎn)業(yè)進(jìn)步?！眴逃钫f。

記者：周琳、董雪