400服務電話:400-186-5909(點擊咨詢)
2025年新奧和香港正版資料最新更新六,777778888精準管家婆
2025年新奧和香港正版資料最新更新六,7777888888精準管家婆
2025年新奧和香港正版資料最新更新六,科技賦能未來生活新體驗:(1)400-186-5909(點擊咨詢)(2)400-186-5909(點擊咨詢)
2025年新奧和香港正版資料最新更新六,2025新奧資料正版大全(1)400-186-5909(點擊咨詢)(2)400-186-5909(點擊咨詢)
2025年新奧和香港正版資料最新更新六,新澳門精準免費提供
2025年新奧和香港正版資料最新更新六,新澳2025資料最新大全
我們提供設備軟件升級和固件更新服務,確保設備軟件始終處于最新版本。
維修配件緊急補貨機制:對于庫存不足的配件,我們建立了緊急補貨機制,確保維修進度不受影響。
2025年新奧和香港正版資料最新更新六,新奧精準免費提供澳門
2025年新奧和香港正版資料最新更新六,維修服務電話全國服務區(qū)域:
內蒙古烏海市海南區(qū)、內蒙古呼和浩特市和林格爾縣、臨沂市河東區(qū)、樂東黎族自治縣千家鎮(zhèn)、南通市海門區(qū)、樂山市峨眉山市、阜新市海州區(qū)、臨汾市汾西縣
渭南市富平縣、運城市臨猗縣、廣安市前鋒區(qū)、內蒙古呼和浩特市武川縣、泉州市金門縣、齊齊哈爾市龍江縣
樂東黎族自治縣黃流鎮(zhèn)、溫州市永嘉縣、昌江黎族自治縣叉河鎮(zhèn)、開封市蘭考縣、韶關市新豐縣、肇慶市懷集縣、中山市民眾鎮(zhèn)、臨高縣調樓鎮(zhèn)、東莞市洪梅鎮(zhèn)、內蒙古錫林郭勒盟蘇尼特右旗
蚌埠市龍子湖區(qū)、樂山市峨邊彝族自治縣、文山硯山縣、重慶市銅梁區(qū)、營口市蓋州市
運城市永濟市、徐州市豐縣、南充市營山縣、甘孜道孚縣、中山市沙溪鎮(zhèn)、平?jīng)鍪星f浪縣、呂梁市臨縣、阜新市阜新蒙古族自治縣、新鄉(xiāng)市封丘縣、蘭州市紅古區(qū)
張掖市肅南裕固族自治縣、開封市尉氏縣、甘孜康定市、肇慶市封開縣、銅仁市思南縣、黔南荔波縣、南平市邵武市、內蒙古巴彥淖爾市烏拉特后旗
河源市龍川縣、甘南卓尼縣、德陽市綿竹市、池州市石臺縣、常德市石門縣、商丘市永城市、松原市寧江區(qū)、焦作市修武縣、駐馬店市正陽縣、雅安市天全縣
張掖市山丹縣、銅仁市玉屏侗族自治縣、成都市武侯區(qū)、朔州市右玉縣、菏澤市巨野縣、大同市天鎮(zhèn)縣
三門峽市靈寶市、昭通市鹽津縣、西安市新城區(qū)、昭通市彝良縣、周口市川匯區(qū)、上饒市萬年縣、白山市渾江區(qū)、東莞市長安鎮(zhèn)、保山市騰沖市、甘孜理塘縣
蚌埠市龍子湖區(qū)、儋州市大成鎮(zhèn)、云浮市云城區(qū)、德陽市中江縣、杭州市江干區(qū)、福州市福清市、駐馬店市上蔡縣、眉山市彭山區(qū)、武漢市江岸區(qū)
廣州市白云區(qū)、白沙黎族自治縣打安鎮(zhèn)、宜昌市宜都市、長治市武鄉(xiāng)縣、阜新市彰武縣、汕頭市龍湖區(qū)
晉中市和順縣、內蒙古赤峰市翁牛特旗、長春市雙陽區(qū)、合肥市蜀山區(qū)、德宏傣族景頗族自治州芒市、宜春市萬載縣、德宏傣族景頗族自治州隴川縣、黃岡市紅安縣、內蒙古通遼市科爾沁區(qū)、內蒙古錫林郭勒盟鑲黃旗
寧波市北侖區(qū)、金昌市金川區(qū)、內蒙古赤峰市阿魯科爾沁旗、德州市慶云縣、駐馬店市平輿縣、呂梁市離石區(qū)、信陽市固始縣、東莞市沙田鎮(zhèn)
大興安嶺地區(qū)呼中區(qū)、青島市萊西市、渭南市華陰市、湘潭市雨湖區(qū)、濟南市槐蔭區(qū)、銅仁市江口縣
益陽市安化縣、宿遷市宿城區(qū)、南充市儀隴縣、慶陽市慶城縣、濟南市槐蔭區(qū)、徐州市賈汪區(qū)、黃岡市紅安縣、紅河蒙自市、齊齊哈爾市龍沙區(qū)
泉州市鯉城區(qū)、臨夏臨夏縣、淮南市鳳臺縣、忻州市神池縣、普洱市景東彝族自治縣、湖州市吳興區(qū)、澄邁縣老城鎮(zhèn)、雙鴨山市嶺東區(qū)、汕頭市南澳縣
果洛班瑪縣、三明市將樂縣、廣州市白云區(qū)、青島市平度市、臺州市三門縣
葫蘆島市龍港區(qū)、岳陽市臨湘市、大同市渾源縣、大連市旅順口區(qū)、長治市屯留區(qū)、忻州市保德縣、安順市普定縣、呂梁市臨縣
中山市大涌鎮(zhèn)、運城市永濟市、宿遷市宿城區(qū)、天水市秦州區(qū)、鄭州市新鄭市、廣西崇左市寧明縣、荊門市掇刀區(qū)、鄭州市登封市、三亞市崖州區(qū)、佳木斯市湯原縣
佛山市高明區(qū)、中山市民眾鎮(zhèn)、淮南市謝家集區(qū)、雞西市梨樹區(qū)、廣州市番禺區(qū)、大連市金州區(qū)、麗水市遂昌縣
襄陽市襄城區(qū)、甘孜色達縣、衡陽市蒸湘區(qū)、咸陽市三原縣、平頂山市舞鋼市、西寧市城中區(qū)、雅安市雨城區(qū)、內蒙古錫林郭勒盟蘇尼特右旗、安慶市桐城市
內蒙古錫林郭勒盟鑲黃旗、隨州市曾都區(qū)、寧波市慈溪市、貴陽市白云區(qū)、黔東南黎平縣、九江市彭澤縣、三明市建寧縣
馬鞍山市含山縣、貴陽市息烽縣、昌江黎族自治縣石碌鎮(zhèn)、甘南碌曲縣、淮南市八公山區(qū)、吉安市峽江縣
泉州市金門縣、揭陽市惠來縣、內蒙古阿拉善盟阿拉善左旗、贛州市尋烏縣、濱州市陽信縣、揚州市寶應縣、福州市閩清縣
綏化市海倫市、黑河市孫吳縣、福州市長樂區(qū)、三門峽市澠池縣、馬鞍山市和縣
宜賓市敘州區(qū)、大慶市肇州縣、貴陽市觀山湖區(qū)、曲靖市羅平縣、廣西崇左市憑祥市、鐵嶺市昌圖縣、德宏傣族景頗族自治州隴川縣、徐州市沛縣、上海市嘉定區(qū)、深圳市光明區(qū)
江門市江海區(qū)、晉中市靈石縣、南充市營山縣、朝陽市朝陽縣、鶴壁市??h
400服務電話:400-186-5909(點擊咨詢)
2025年新奧和香港正版資料最新更新六,新時代青年志愿服務精神交流平臺
2025年新奧和香港正版資料最新更新六,2025年澳門天天彩免費記錄
2025年新奧和香港正版資料最新更新六,新澳門今晚一肖中特:(1)400-186-5909(點擊咨詢)(2)400-186-5909(點擊咨詢)
2025年新奧和香港正版資料最新更新六,新型環(huán)保材料助力綠色建筑發(fā)展(1)400-186-5909(點擊咨詢)(2)400-186-5909(點擊咨詢)
2025年新奧和香港正版資料最新更新六,探索未知領域的精彩發(fā)現(xiàn)之旅
2025年新奧和香港正版資料最新更新六,新門內部資料免費提供
維修服務快速響應團隊,全天候待命:組建快速響應團隊,全天候待命,確保在接到客戶報修后能夠迅速響應,及時解決問題。
耐心解答,消除疑慮:對于您的任何疑問或擔憂,我們的客服和技術人員都會耐心解答,用專業(yè)知識消除您的疑慮,讓您更加放心。
2025年新奧和香港正版資料最新更新六,7777788888澳門開獎2025年
2025年新奧和香港正版資料最新更新六,維修服務電話全國服務區(qū)域:
蘇州市常熟市、洛陽市偃師區(qū)、萍鄉(xiāng)市上栗縣、大慶市龍鳳區(qū)、延安市安塞區(qū)
雙鴨山市集賢縣、宜賓市翠屏區(qū)、淄博市淄川區(qū)、臨汾市永和縣、九江市瑞昌市、玉樹曲麻萊縣、六安市金寨縣、無錫市惠山區(qū)、涼山甘洛縣
本溪市桓仁滿族自治縣、揭陽市惠來縣、淮安市金湖縣、重慶市北碚區(qū)、廣西百色市右江區(qū)、眉山市東坡區(qū)、新余市分宜縣、贛州市于都縣、隴南市文縣、揭陽市揭東區(qū)
黔南福泉市、邵陽市武岡市、錦州市北鎮(zhèn)市、青島市即墨區(qū)、黃山市祁門縣、遼陽市遼陽縣、武漢市漢南區(qū)、大慶市紅崗區(qū)
臺州市玉環(huán)市、廣西桂林市疊彩區(qū)、樂山市馬邊彝族自治縣、溫州市蒼南縣、紹興市嵊州市
珠海市香洲區(qū)、澄邁縣中興鎮(zhèn)、衡陽市衡東縣、重慶市北碚區(qū)、長治市沁源縣、漯河市臨潁縣、綏化市慶安縣、九江市廬山市、呂梁市交口縣
榆林市吳堡縣、伊春市湯旺縣、大同市新榮區(qū)、白沙黎族自治縣七坊鎮(zhèn)、廣西南寧市江南區(qū)、五指山市番陽、新鄉(xiāng)市原陽縣
齊齊哈爾市鐵鋒區(qū)、樂山市夾江縣、曲靖市馬龍區(qū)、溫州市龍港市、普洱市景谷傣族彝族自治縣、平頂山市衛(wèi)東區(qū)、寧波市奉化區(qū)
寶雞市千陽縣、西安市周至縣、商丘市柘城縣、馬鞍山市當涂縣、郴州市汝城縣、淄博市桓臺縣、廣元市昭化區(qū)、畢節(jié)市納雍縣、雞西市恒山區(qū)
大理鶴慶縣、楚雄祿豐市、信陽市淮濱縣、攀枝花市西區(qū)、濟寧市泗水縣、綏化市海倫市、湘潭市湘鄉(xiāng)市、晉中市榆社縣、晉城市沁水縣、天水市秦州區(qū)
廣西來賓市興賓區(qū)、臨汾市侯馬市、大同市靈丘縣、六安市葉集區(qū)、廣西桂林市秀峰區(qū)、內蒙古鄂爾多斯市鄂托克旗、樂東黎族自治縣萬沖鎮(zhèn)、廣西梧州市萬秀區(qū)
遵義市習水縣、江門市新會區(qū)、郴州市北湖區(qū)、五指山市通什、衢州市開化縣、白沙黎族自治縣邦溪鎮(zhèn)
宿州市埇橋區(qū)、南昌市西湖區(qū)、德宏傣族景頗族自治州盈江縣、文昌市鋪前鎮(zhèn)、長春市南關區(qū)
開封市龍亭區(qū)、西安市鄠邑區(qū)、紅河金平苗族瑤族傣族自治縣、涼山冕寧縣、綿陽市北川羌族自治縣、安慶市潛山市、重慶市江津區(qū)、衢州市江山市
寶雞市鳳翔區(qū)、駐馬店市西平縣、蕪湖市繁昌區(qū)、梅州市梅縣區(qū)、果洛甘德縣、畢節(jié)市黔西市
湛江市徐聞縣、通化市二道江區(qū)、涼山越西縣、荊州市公安縣、安陽市林州市、黔東南鎮(zhèn)遠縣、遵義市綏陽縣、重慶市墊江縣、渭南市韓城市
阜陽市太和縣、涼山木里藏族自治縣、南京市玄武區(qū)、貴陽市白云區(qū)、攀枝花市米易縣、杭州市桐廬縣、曲靖市馬龍區(qū)、清遠市連南瑤族自治縣、福州市晉安區(qū)
贛州市上猶縣、伊春市嘉蔭縣、保亭黎族苗族自治縣保城鎮(zhèn)、遂寧市大英縣、駐馬店市上蔡縣、臨夏東鄉(xiāng)族自治縣、綿陽市游仙區(qū)
沈陽市康平縣、襄陽市襄州區(qū)、阜新市海州區(qū)、三門峽市澠池縣、韶關市乳源瑤族自治縣、鄭州市上街區(qū)、江門市蓬江區(qū)、鹽城市大豐區(qū)、四平市公主嶺市
平?jīng)鍪袥艽h、南昌市灣里區(qū)、廣西玉林市陸川縣、泰安市岱岳區(qū)、西安市周至縣、臨夏東鄉(xiāng)族自治縣
孝感市大悟縣、荊門市鐘祥市、廣西河池市巴馬瑤族自治縣、吉安市峽江縣、龍巖市新羅區(qū)、貴陽市息烽縣
鎮(zhèn)江市句容市、文昌市錦山鎮(zhèn)、遵義市湄潭縣、朝陽市凌源市、銅仁市思南縣、黔東南麻江縣、海東市互助土族自治縣、懷化市芷江侗族自治縣
漢中市留壩縣、上海市閔行區(qū)、麗江市寧蒗彝族自治縣、金華市金東區(qū)、合肥市蜀山區(qū)、陽泉市平定縣、聊城市高唐縣、滁州市南譙區(qū)
遵義市湄潭縣、澄邁縣瑞溪鎮(zhèn)、樂東黎族自治縣佛羅鎮(zhèn)、常州市新北區(qū)、鞍山市海城市、迪慶維西傈僳族自治縣、吉安市新干縣
金華市蘭溪市、佳木斯市樺川縣、天津市西青區(qū)、淮安市盱眙縣、伊春市南岔縣、陽泉市盂縣、淄博市博山區(qū)、臨滄市云縣、永州市東安縣、屯昌縣屯城鎮(zhèn)
沈陽市法庫縣、淮北市濉溪縣、昆明市宜良縣、蕪湖市鏡湖區(qū)、上饒市婺源縣、徐州市泉山區(qū)、鹽城市大豐區(qū)、舟山市嵊泗縣
紅河蒙自市、廣西賀州市富川瑤族自治縣、汕頭市潮陽區(qū)、中山市板芙鎮(zhèn)、黃岡市羅田縣、洛陽市宜陽縣、三沙市南沙區(qū)、揚州市邗江區(qū)、馬鞍山市花山區(qū)、曲靖市麒麟?yún)^(qū)
對話階躍星辰姜大昕:Sora技術有局限,多模態(tài)理解生成一體化才是未來|界面新聞 · 科技
界面新聞記者 | 伍洋宇
界面新聞編輯 | 文姝琪
不同于兩年前的百模大戰(zhàn)時期誰都可以喊一句“沖擊AGI”,如今創(chuàng)業(yè)公司再堅稱自己以此為目標已經(jīng)不是一種主流行為——但這仍是階躍星辰要在2025年延續(xù)的敘事。
5月8日,階躍星辰創(chuàng)始人兼CEO姜大昕進行了一場技術溝通會,強調公司的技術追求并對未來技術趨勢作出判斷。對于公司從Day 1起便明確的“單模態(tài)—多模態(tài)—多模理解和生成的統(tǒng)一—世界模型—AGI(通用人工智能)”路線圖,他也予以明確了當下時刻的定位。
幾乎以低調貫穿整個成立初期的階躍星辰,從去年下半年起主動對外釋放更多聲量,開始打一場水面之上的仗。
這些聲量大都圍繞模型進展。成立兩年,公司累計發(fā)布22款基座模型,覆蓋文字、語音、圖像、視頻、音樂、推理等系列。其中有16款是多模態(tài)模型,又分屬圖像理解、視頻理解、圖像生成、視頻生成、圖像編輯、音樂生成、多模態(tài)推理等方向。
區(qū)別于行業(yè)更常見的圖像模型、音頻模型、視頻模型等不加區(qū)分的定義和命名方式,階躍星辰格外強調多模態(tài)模型“理解”與“生成”的單一屬性。這與這家公司選擇的AGI路線以及即將要突破的關鍵節(jié)點息息相關。

“從模仿學習走向強化學習,以及從多模態(tài)融合走向多模態(tài)理解與生成一體化,是當下大模型發(fā)展主要呈現(xiàn)的兩個趨勢?!苯箨块_場點明了這一主題。
第一條趨勢行業(yè)并不陌生,這是OpenAI去年9月通過o1-preview掀起的模型訓練范式革命,并且主導了接下來數(shù)月幾乎所有大模型公司的迭代方向。隨著推理模型與后訓練成為業(yè)界共識,文本模型的技術路線相對收斂,這里的格局變換已不如從前那樣日新月異。
另一條趨勢屬于多模態(tài)模型,這是一個最優(yōu)技術路徑尚不明朗的領域,階躍星辰在此押下重注。
“有一句話我在很多場合不停重復——我們認為多模態(tài)是實現(xiàn)AGI的必經(jīng)之路?!苯箨恐赋?,無論是從人類智能的多元化角度(符號智能、視覺智能、空間智能等),還是從垂直領域AI應用需求來說,大模型的多模態(tài)能力都必不可少。
這家公司進一步判斷,在多模態(tài)模型領域,理解與生成統(tǒng)一是其核心問題。
文本大模型的理解與生成已經(jīng)由GPT類模型實現(xiàn)統(tǒng)一,但在視覺領域,內容的理解與生成仍普遍采用不同模型,例如用GPT-4o來理解圖片,但用Flux、Stable Diffusion等來生成圖片。
為什么一定要做多模理解與生成的統(tǒng)一?姜大昕解釋稱,一方面生成的內容需要理解來控制,確保內容具備意義和價值;另一方面,內容的理解需要生成來監(jiān)督,也即“只有能夠生成的時候才意味著真正的理解了”。
從統(tǒng)計學角度看來,相比文本模態(tài)的低維度離散分布,視覺模態(tài)的高維度連續(xù)分布造就了模型學習更高的復雜性。
這使得文本模型的NTP(Next-Token-Prediction)還無法順暢平移為視覺模型的NFP(Next-Frame-Prediction),也意味著屬于視覺模型的可規(guī)模化理解生成一體化架構尚未出現(xiàn)——這正是Transfomer架構之于GPT等文本模型的重大意義。
姜大昕坦言,視覺領域的確處在一個等待“Transformer架構”出現(xiàn)的階段,而行業(yè)也在探索多個不同方向,公司當前的目標是要自己把“Transformer”做出來。
在他看來,擁有了這一架構的視覺模型,可以效仿文本模型的路徑,順利邁入海量圖片和視頻預訓練及指令跟隨的GPT-3階段,并可能加速進入融合了強化學習的視覺時空推理階段,直至誕生世界模型。
這也是為什么他會說,“一旦視覺模型理解與生成一體化的問題被解決,之后的路線會非常順暢”。
.png)
作為該技術目標的最新進展,階躍星辰近期發(fā)布了圖像編輯模型Step1X-Edit,多模態(tài)推理模型Step-R1-V-Mini,以及圖生視頻模型Step-Video-TI2V。姜大昕指出,Step1X-Edit實現(xiàn)了初步的理解與生成統(tǒng)一,但還可以在架構和數(shù)據(jù)上做進一步優(yōu)化和打磨。
技術路線之外,階躍星辰梳理出了一條更明確的商業(yè)化路徑。
除了此前已有的ToC(用戶)產品嘗試和ToB(企業(yè))合作模式,階躍星辰將在應用層重點發(fā)力的方向是AI Agent。不過相較于自己做一款Manus類的產品,公司選擇聚焦智能終端Agent領域,也就是與手機、汽車、機器人等終端廠商合作,以端云結合平臺的角色構建智能終端的Agent生態(tài)。
作為一家已融資數(shù)億美元的B輪創(chuàng)業(yè)公司,這場溝通會沒有大談用戶規(guī)模、商業(yè)模式、盈利能力,更多話題還是圍繞如果要實現(xiàn)AGI,公司要如何翻越既定路線上的某一座山頭。這種氛圍在當前行業(yè)熱議AI應用公司如何火熱、掙錢的喧囂襯托下,頗有一種反差。
此外,姜大昕還接受了界面新聞等媒體采訪,更細致回答了有關多模理解與生成統(tǒng)一技術路徑的相關問題,以及對模型訓練與商業(yè)化的基本判斷。
以下為姜大昕采訪實錄,略作編輯:
媒體:躍問最近改名階躍AI了,原因是什么?公司過去一年發(fā)布過一些C端產品,目前對這個方向有什么經(jīng)驗總結?
姜大昕:去年大模型還沒有出現(xiàn)這么強大的多模態(tài)和推理模型,我們看到的產品就幾類,Chatbot,AI陪伴,還有Runway、Pika這樣一些AIGC應用。那時候大家其實沒有特別明確的方向,只是因為有這樣的模型能力,所以產生了這樣的應用。這是產品探索的早期階段。
今年因為多模態(tài)能力和推理能力的進一步成熟產生了Agent,我們看到非常多像Deep Research或者Manus這樣的新應用。
我們的變化是想聚焦到Agent領域。而之所以改名階躍AI,是因為它要從Chatbot類產品向加入更多Agent能力的產品做轉變。
媒體:階躍的策略是超級模型+超級應用,這也是包括字節(jié)在內很多大廠在做的事情,這種情況下,很多初創(chuàng)公司已經(jīng)放棄通用大模型了,階躍為什么還會堅持?
姜大昕:這里面分幾個層次去講,第一,現(xiàn)在這個行業(yè)趨勢還處于一個技術非常陡峭的區(qū)間。
我會很感慨,AI行業(yè)里面的發(fā)展變化確實是太快了。如果大家回到去年想一想,就覺得GPT-4是多么牛的東西,今天它都要快下架了;去年Sora剛出來的時候給大家多大的震撼,今天回過頭看,都覺得Sora有什么神奇的。而今年無論做出什么很牛的技術,可能明年回頭看會覺得微不足道。
在技術發(fā)展如此快的行業(yè)背景下,階躍肯定不愿意在這個過程中脫離主流,或者說放棄這樣的前進趨勢,還是會堅持做基礎模型的研發(fā)。
第二,從應用的角度來看,我們一直覺得應用和模型是相輔相成,模型可以決定應用的上限,應用給模型提供具體的場景和數(shù)據(jù)也非常重要。所以我們的產品形態(tài)隨著模型的演變動態(tài)發(fā)展,這樣的邏輯關系會一直保持下去。
媒體:在Agent這件事情上,為什么會選擇一個類似供應商的身份,而不是自己下場做一款直接ToC或者ToB的Agent產品?
姜大昕:這個東西很新,我們更好的選擇就是找到頭部企業(yè)合作。它們已經(jīng)有了大量的用戶和場景,我們才能嘗試這個模型究竟怎么做。
如果我們上就來做ToC,第一件事情就得是user grow(用戶增長)。所以我們先和這些企業(yè)一起合作,如果這件事情探索清楚了,至于說將來我們是不是自己做,我覺得都是有可能的。
這里還有一個很誘人的場景,就是現(xiàn)在所有的設備都是孤立的,對于一個用戶來說,他當然希望AI Agent能夠跨設備。那么這件事情應該誰來做,肯定有很多人在思考。
媒體:公司最近在算法層面更加重視理解生成一體化整合,這個想法是基于什么樣的邏輯判斷?
姜大昕:我們覺得以Sora為代表的這一代視頻生成技術,它的上限就在那里了,很難去突破。下一代突破我們認為應該是基于理解生成一體化的。

媒體:多模態(tài)理解與生成一體化架構很重要,那影響它出現(xiàn)最關鍵的因素是算法,更高質量的數(shù)據(jù),還是什么?
姜大昕:兩個都很重要,首先就是架構的突破,因為確實不容易。
多模態(tài)的高維連續(xù)空間,我們很難用一個自回歸架構去模擬,所以大家不得不采用Diffusion。直白的說,Diffusion就是一步弄不成,就多走幾步,因為它太復雜了。
但自回歸架構不讓你走多步,那么這兩個東西怎么能連在一起,需要一個架構性的東西,這是算法層面需要解決的問題。甚至有可能把自回歸和Diffusion結合在一起這個方向也是錯的,這里面有非常多的不確定性。
有了技術以后,第二步就是數(shù)據(jù)。所有的人工智能里面數(shù)據(jù)都非常重要,有了架構但沒有合適的數(shù)據(jù)訓練它,就如同一輛車沒有石油,你還是不能跑。
媒體:你剛剛好像有提到,OpenAI最新的GPT-4o已經(jīng)實現(xiàn)了理解與生成一體化?
姜大昕:我們只是猜測,因為它從不公布技術細節(jié)。它的做法應該是把理解和生成放在了一個模型里面,但這個東西是不是scalable(可規(guī)模化),我們不知道。
媒體:怎么判斷它是不是scalable?
姜大昕:它肯定要做到predict next frame,或者說如果OpenAI有一天推出了一個不叫Sora的視頻模型,很可能就是做通了。
事實上去年Sora出來的時候大家都很興奮,但我們是非常失望的,因為我們覺得它的主線應該是做理解生成一體化。
回過去想也是有道理的。從多模融合一步走到理解生成一體化太難了,所以干脆兩個獨立往前走,互相促進,有點像左腳踩右腳。因為它在Sora里面也說了,它拿著GPT-4o給數(shù)據(jù)打標注。
有了生成以后是不是能夠幫助理解,可能就是需要迭代幾輪以后再到理解生成一體化,但總的方向肯定是能夠predict next frame。這個問題不解決,后面有很多問題都到不了那個程度。
媒體:多模態(tài)理解與生成一體化這個技術方向目前還沒有收斂,對標語言模型的話,它大概處在哪個發(fā)展階段?
姜大昕:應該是在Transformer的階段,Transformer是2017年出來的,GPT-1是2018年,這個架構應該早于“GPT”。
媒體:階躍目前研發(fā)的模型很多,如果下一步理解生成一體化尤為重要的話,為什么我們不把所有的力量都集中去做它?
姜大昕:我們也想這樣做,但不行,因為理解與生成一體化是非常要求綜合素質的一個考驗。首先你要理解,如果語言模型不強就談不上理解。其次你要做推理,視覺推理是視覺理解的升級。再者還有生成端,這也必須得做。
所以不是我們不夠focus(專注),要做這件事,就必須要做到所有條線能力都非常強,組合起來去探索它的路徑。
媒體:解決理解與生成一體化這個問題之后,你認為視覺模型應該達到一個什么樣的狀態(tài)?
姜大昕:你給它一個電影的開頭,它能夠一直往下編,并且大家認為還挺有道理的,連續(xù)、符合邏輯、符合物理規(guī)律。如果它能持續(xù)這樣做下去,這至少可以說明它的預訓練做成了。
相關推薦: