Meta正式推出AI語(yǔ)言模型LLaMA，是一個(gè)有著650億參數(shù)的大語(yǔ)言模型

2023-02-25 19:16:57 編輯：儲(chǔ)雄雯來(lái)源：

導(dǎo)讀近日Meta正式推出AI語(yǔ)言模型LLaMA，主要是針對(duì)社區(qū)進(jìn)行研究的人工智能，屬于新型大型語(yǔ)言模型，將與微軟、谷歌等公司共同參與人工智能比賽。

近日Meta正式推出AI語(yǔ)言模型LLaMA，主要是針對(duì)社區(qū)進(jìn)行研究的人工智能，屬于新型大型語(yǔ)言模型，將與微軟、谷歌等公司共同參與人工智能比賽。現(xiàn)在Meta推出的AI語(yǔ)言模型LLaMA是可以允許在非商業(yè)許可下給政府或者是社區(qū)甚至學(xué)術(shù)界的研究人員們提供相關(guān)的輔助。根據(jù)公司的詳細(xì)介紹正式推出的AI語(yǔ)言模型LLaMA是一個(gè)有著650億參數(shù)的大型語(yǔ)言模型，經(jīng)歷1萬(wàn)億個(gè)tokens的訓(xùn)練，和其他大型語(yǔ)言模型屬于同一樣的工作原理，將一系列的單詞輸入直接預(yù)測(cè)下一個(gè)單詞生成文本內(nèi)容，擁有20多種語(yǔ)言進(jìn)行選擇，重點(diǎn)的語(yǔ)言是拉丁語(yǔ)和西里爾字母，與此同時(shí)也會(huì)面對(duì)偏見、評(píng)論等相關(guān)的挑戰(zhàn)，目前為止Meta還仍然繼續(xù)進(jìn)行深入的研究，找到對(duì)應(yīng)的解決辦法，將彌補(bǔ)語(yǔ)言模型當(dāng)中的不足之處。