欧美 国产 日本-欧美 国产 日韩 第一页-欧美 日产 国产精品-欧美 日韩 国产 在线-极品福利视频-极品成人

首頁 > 知識技能 > 知識技能 > 微軟將推出自研 5000 億個參數(shù)的大模型:MAI-1

微軟將推出自研 5000 億個參數(shù)的大模型:MAI-1

發(fā)布時間:2024-05-07 22:57:48來源: 15210273549

2024 年 5 月 7 日,《The Information》報道,微軟正在開發(fā)一個擁有大約 5000 億個參數(shù)的大語言模型(LLM)。

 

這標志著微軟自從往 OpenAI 投資逾 100 億美元,以便可以重復使用這家初創(chuàng)公司的 AI 模型以來,首次自行開發(fā)這等規(guī)模的 AI 模型。

該 LLM 在微軟內(nèi)部被稱為 MAI-1,預計最早將于本月首次亮相。

OpenAI 在 2020 年年中推出 GPT-3 時,詳細說明該模型的初始版本有 1750 億個參數(shù)。該公司透露,GPT-4 更龐大,擁有更多的參數(shù),但尚未透露具體數(shù)字。

一些報道顯示,OpenAI 的旗艦 LLM 擁有 1.76 萬億個參數(shù),而谷歌的 Gemini Ultra 據(jù)稱擁有 1.6 萬億個參數(shù),性能與 GPT-4 旗鼓相當。

微軟的 MAI-1 擁有 5000 億個參數(shù),這表明它可能被定位為介于 GPT-3 和 GPT-4 之間的某種中檔模型。這樣的配置將允許模型提供高響應準確度,但耗用的功率比 OpenAI 的旗艦 LLM 低得多。言外之意,這將為微軟帶來更低的推理成本。

開發(fā) MAI-1 的工作由 LLM 開發(fā)商 Inflection AI Inc.的創(chuàng)始人 Mustafa Suleyman 監(jiān)管。

 

Mustafa Suleyman

 

今年 3 月,通過一筆價值 6.25 億美元的交易,Suleyman 和這家初創(chuàng)公司的大多數(shù)員工一起加入了微軟。這位高管早些時候與他人共同創(chuàng)立了谷歌的DeepMind AI 研究部門。

微軟可能使用 Inflection AI 的訓練數(shù)據(jù)及另外某些資產(chǎn)來驅(qū)動 MAI-1。

據(jù)稱,該模型的訓練數(shù)據(jù)集還包含多種類型的信息,包括 GPT-4 和互聯(lián)網(wǎng)內(nèi)容生成的文本。

為《The Information》提供信源的知情人士表示,微軟尚未決定它將如何使用 MAI-1。如果這個模型確實擁有 5000 億個參數(shù),那么它太過復雜了,無法在消費級設(shè)備上運行。這意味著微軟很可能會將 MAI-1 部署在其數(shù)據(jù)中心,那樣 LLM 可以集成到必應和 Azure 之類的服務中。

據(jù)信,微軟可能會在 5 月 16 日召開的 Build 開發(fā)者大會上展示MAI-1,如果到時候該模型的表現(xiàn)足夠令人滿意的話。這暗示該公司預計會在幾周內(nèi)推出該模型的工作原型(如果目前還沒有工作原型的話)。

就在不到兩周前,微軟剛剛開源了一種名為 Pi-3 Mini 的語言模型。據(jù)微軟聲稱,這種模型僅擁有 38 億個參數(shù),但性能卻比參數(shù)多 10 倍的 LLM 更勝一籌。Pi-3 是一個 AI 系列的一部分,該系列還包括另外兩個更龐大的、性能略勝一籌的神經(jīng)網(wǎng)絡(luò)。

開發(fā) MAI-1表明微軟內(nèi)部對 AI采取了雙管齊下的做法,既關(guān)注面向移動設(shè)備的本地運行的小型語言模型,也關(guān)注由云支持的大型先進模型。據(jù)報道,蘋果也在探索類似的做法。這也凸顯了微軟不依賴OpenAI 探索 AI 開發(fā)的意愿,OpenAI的技術(shù)目前支持微軟最雄心勃勃的生成式 AI 功能,包括嵌入到 Windows 中的聊天機器人。

知識技能更多>>

寧德時代參投新公司,哪吒汽車轉(zhuǎn)經(jīng)銷商,極氪007GT等新車型來襲 預計2026年發(fā)布 新款保時捷Cayenne Coupe諜照曝光 豐田皇冠威爾法墨金版上市,91.9萬起售,配置升級能否打動你? 2025款奧迪Q2L降價上市,配置微調(diào),售價17.18-21萬元 智能網(wǎng)聯(lián)與快速充電技術(shù)齊亮相2025武漢新能源汽車技術(shù)及充電樁展會揭示新能源車新趨勢 領(lǐng)克900首發(fā):SPA Evo架構(gòu)旗艦SUV,能否撼動大型SUV市場? 法拉第未來FX首款原型車諜照曝光,網(wǎng)友:魏牌高山換了個模具? 搭載高通驍龍數(shù)字底盤 零跑B10或售13萬起 等等再出手 四款國產(chǎn)SUV來襲 比亞迪唐L、領(lǐng)克900領(lǐng)銜 推薦奢享版 2025款名爵MG7購車指南 大眾牽手小鵬,合力打造超20000個自營充電終端 嵐圖汽車首發(fā)LFC超級后驅(qū)技術(shù),既防眩暈,又抗甩尾! 這三款車企車型為何遇冷? 增長29%!蘇州金龍2024年銷售額超百億 從燃油到新能源,這個品牌為何從沒有能力天花板? 2025誰是下一家盈利的新勢力汽車車企? 730馬力!Brabus爆改AMG CLC 63 SE 零百加速3.3秒 速騰換殼 捷達VA7量產(chǎn)下線 預售12萬元起 22.48萬起 北京BJ40魔核電驅(qū)版開啟預售 配增程系統(tǒng)/綜合續(xù)航1200km 彰顯中國品牌實力 比亞迪海豹拿下日本年度風云車大獎 降價6000美元 2025款美版豐田bZ4X上市 配置小幅升級 有望明年上半年上市 奧迪Q6L e-tron投產(chǎn) A6 e-tron隨后跟進 2.9秒破百 BRABUS爆改AMG GT 63 Coupe 動力大幅升級 最高降價8.5萬元 Jeep牧馬人4xe價格調(diào)整 49.99萬元起 名爵MG ES5昆明亮相,首批車主交車,最低僅售9.99萬元起! 海馬汽車攜多項專利亮相2024海南國際知識產(chǎn)權(quán)交易大會 余承東攜手“四界”領(lǐng)導人亮相央視,揭秘鴻蒙智行背后的故事 當?shù)厥蹆r916.9萬起!極石ROX 01正式亮相俄羅斯市場 Momenta獲德國TÜV萊茵ISO 26262 ASIL D功能安全產(chǎn)品認證 蓋世汽車榮獲“AUTOSAR中國中心年度特別貢獻獎”
主站蜘蛛池模板: 色成网| 亚洲成人手机在线观看 | 亚洲四虎影视 | 99视频久久精品久久 | 在线观看黄免费 | 亚洲国产成人久久综合一 | 在线看片你懂得 | 四虎永久在线视频 | 四虎成人精品在永久在线观看 | 成人污软件 | 99综合之综合久久伊人 | 日韩在线www | 欧美日本在线 | 欧美成人中文字幕在线视频 | 自拍视频网 | 91白丝制服被啪到喷水在线 | 四虎影视紧急入口地址大全 | 日本边添边摸边做边爱边视频 | 亚洲国产日韩在线观频 | 91精品欧美一区二区三区 | 91在线免费公开视频 | 亚洲综合天堂 | 久久免费看视频 | 亚洲免费在线观看视频 | 国产精品亚洲片在线观看不卡 | 四虎最新在线 | 亚洲三页 | 884aa四虎在线| 久久国产精品99精品国产 | 亚洲黄色片视频 | 国产精品久久久久久久久久久搜索 | 4hu44四虎在线观看 | 99热在这里只有免费精品 | 91精品在线免费 | 伊人婷婷色香五月综合缴激情 | 久久蜜桃视频 | 国产精品不卡高清在线观看 | 毛片免费观看网站 | 久久国产精品一区 | 亚洲精品在线免费观看视频 | 黄色免费网站在线播放 |