-
騰訊混元文生圖大模型宣布開源,未來還將跟QQ、企微和游戲做聯(lián)動
-
周毅是故意的還是不小心?
文/觀察者網(wǎng) 周毅 編輯 張廣凱
5月14日,騰訊宣布旗下混元文生圖大模型全面升級并對外開源。據(jù)悉,這是業(yè)內(nèi)首個(gè)中文原生的DiT架構(gòu)文生圖開源模型。它支持中英文雙語輸入及理解,參數(shù)量15億。目前,該大模型已在Hugging Face平臺和Github上發(fā)布,包含模型權(quán)重、推理代碼、模型算法等完整模型,可供企業(yè)與個(gè)人開發(fā)者免費(fèi)商用。
不同模型在圖文一致性等方面的表現(xiàn) 圖源Hugging Face
騰訊混元文生圖負(fù)責(zé)人蘆清林對觀察者網(wǎng)表示,提升技術(shù)能力和更廣泛的應(yīng)用,是該大模型未來的兩個(gè)方向。
“從技術(shù)能力的提升來說,如何讓圖片生成的速度更快,生成的質(zhì)量更好,是我們永遠(yuǎn)都會追求的一個(gè)技術(shù)方向,它似乎是沒有止境的?!碧J清林表示,項(xiàng)目團(tuán)隊(duì)也希望該大模型,能在騰訊內(nèi)外更廣泛的業(yè)務(wù)場景應(yīng)用起來。事實(shí)上,從去年開始,騰訊混元文生圖就和騰訊的廣告業(yè)務(wù)進(jìn)行了一些協(xié)作。
“今年會跟社交業(yè)務(wù),包括QQ、企業(yè)微信等很多業(yè)務(wù)場景做聯(lián)動。跟他們合作做一些新的技術(shù)能力。”蘆清林透露,同時(shí),該大模型也會跟騰訊游戲做一些深入的技術(shù)合作,希望能夠在美術(shù)場景中應(yīng)用起來。包括QQ音樂等在內(nèi),也都是該大模型未來將會提供支撐的業(yè)務(wù)場景。
大模型的優(yōu)異表現(xiàn),往往離不開先進(jìn)的技術(shù)架構(gòu)。過去,視覺生成擴(kuò)散模型主要基于U-Net架構(gòu),但隨著參數(shù)量的提升,基于Transformer架構(gòu)的擴(kuò)散模型展現(xiàn)出了更好的擴(kuò)展性,有助于進(jìn)一步提升模型的生成質(zhì)量及效率。升級后的騰訊混元文生圖大模型采用了全新的DiT架構(gòu)(即Diffusion With Transformer),這也是Sora和Stable Diffusion 3的同款架構(gòu)和關(guān)鍵技術(shù),它就是一種基于Transformer架構(gòu)的擴(kuò)散模型。
公開資料顯示,在DiT架構(gòu)的基礎(chǔ)之上,騰訊混元文生圖大模型還在算法層面優(yōu)化了模型的長文本理解能力,能夠支持最多256字符的內(nèi)容輸入,同時(shí)賦予其多輪生圖和對話能力:在一張初始生成圖片的基礎(chǔ)上,用戶通過自然語言描述,即可對其進(jìn)行調(diào)整。
用戶通過“對話”,即可調(diào)整文生圖的具體內(nèi)容 測試截圖
此外,“中文原生”也是騰訊混元文生圖大模型的一大亮點(diǎn),此前,像Stable Diffusion等主流開源模型核心數(shù)據(jù)集以英文為主,對中國的語言、美食、文化、習(xí)俗理解有限。作為首個(gè)中文原生的DiT模型,混元文生圖具備中英文雙語理解及生成能力,在古詩詞、俚語、傳統(tǒng)建筑、中華美食等中國元素的生成上表現(xiàn)出色。
混元文生圖大模型的部分能力展示 圖源Hugging Face
本文系觀察者網(wǎng)獨(dú)家稿件,未經(jīng)授權(quán),不得轉(zhuǎn)載。
- 責(zé)任編輯: 周毅 
-
搭載英特爾處理器,華為再推AI PC等10余款新品
2024-05-15 18:50 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
-
GMV兩位數(shù)增長,淘寶天貓真的在回歸用戶了
2024-05-15 17:59 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
杭州市臨安區(qū):收購一批商品住房用作公共租賃住房
2024-05-15 16:19 觀網(wǎng)財(cái)經(jīng)-房產(chǎn) -
美國征收關(guān)稅翻倍,多家光伏頭部企業(yè):基本沒有影響
2024-05-15 13:31 觀網(wǎng)財(cái)經(jīng)-消費(fèi) -
成都高投集團(tuán)收購鼎橋通信
2024-05-15 08:57 華為 -
深圳建筑設(shè)計(jì)新要求:減少公攤面積
2024-05-14 19:17 觀網(wǎng)財(cái)經(jīng)-房產(chǎn) -
-
手機(jī)巨頭激烈混戰(zhàn),vivo再推6nm芯片加碼影像
2024-05-14 14:49 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
碧桂園楊惠妍:房地產(chǎn)行業(yè)一定會迎來春天
2024-05-13 21:31 觀網(wǎng)財(cái)經(jīng)-房產(chǎn) -
“鲇魚”來襲!特斯拉上海儲能超級工廠獲開工許可
2024-05-13 16:07 觀網(wǎng)ESG -
女子收到7年前1414元滴滴賬單,滴滴致歉
2024-05-12 23:01 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
創(chuàng)始人稱創(chuàng)維汽車能治病延壽?官方回應(yīng):斷章取義
2024-05-11 16:55 觀網(wǎng)財(cái)經(jīng)-汽車 -
最快本月申請?Shein或選擇倫敦上市
2024-05-11 11:40 觀網(wǎng)財(cái)經(jīng)-海外 -
Visa難以進(jìn)入中國市場,是因?yàn)橹袊摹翱萍济褡逯髁x”嗎?
2024-05-11 08:02 -
中芯國際凈利大跌68%,但當(dāng)務(wù)之急并非利潤
2024-05-10 22:30 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
連平:釋放購房需求,接下來應(yīng)從供給端入手
2024-05-10 21:52 觀網(wǎng)財(cái)經(jīng)-房產(chǎn) -
匯率跌至歷史新低,誰背刺了越南?
2024-05-10 21:38 -
-
“百度大廠病問題,管理層也急”
2024-05-10 15:39 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng)
相關(guān)推薦 -
-
卡塔爾送大禮引爭議,特朗普:免費(fèi)的也罵? 評論 160何立峰:中美達(dá)成重要共識 評論 306最新聞 Hot
-
特朗普要“幫忙”,印度拒絕了
-
“他想在大馬士革建特朗普大廈”
-
中美日內(nèi)瓦經(jīng)貿(mào)會談聯(lián)合聲明
-
中方嚴(yán)管稀土出口,印度也“慌了”
-
“他有望在獄中贏得市長選舉”
-
石破茂再強(qiáng)硬表態(tài):美國,還不降
-
美方吹風(fēng)會:中美都不想“脫鉤”,同意稅率下調(diào)115%
-
卡塔爾送大禮引爭議,特朗普:免費(fèi)的也罵?
-
美國小企業(yè)苦苦掙扎:利潤蒸發(fā)甚至變?yōu)樨?fù)數(shù),最糟的時(shí)刻還未到來
-
特朗普施壓后,澤連斯基表態(tài):我去土耳其等普京
-
日車企利潤暴跌超20%,“與中國競爭加劇”
-
中美會談結(jié)束后,美國股指期貨應(yīng)聲上漲
-
“特朗普夜不能寐,搞定全球問題比想象難得多”
-
靠岸中國貨船數(shù)“歸零”,美西港口官員驚到了
-
“出軌女下屬”,英國海軍一把手被免職
-
“聽加州的,否則美國最大經(jīng)濟(jì)體地位不?!?/a>
-