谷歌推出其多語(yǔ)言代碼生成PaLM2語(yǔ)言模型 今亮點(diǎn)

(資料圖片僅供參考)

近年來(lái)，谷歌一直站在科技行業(yè)人工智能突破的前沿，谷歌 DeepMind 副總裁 Zoubin Ghahramani 在一篇博文中宣稱，該公司在基礎(chǔ)模型方面的工作是“該行業(yè)的基石和數(shù)十億人每天使用的人工智能產(chǎn)品。” 周三，Ghahramani 和其他谷歌高管在 Shoreline Amphitheatre 的舞臺(tái)上展示了??其最新和最強(qiáng)大的大型語(yǔ)言模型 PaLM 2，該模型現(xiàn)在有四種尺寸，可以在從移動(dòng)設(shè)備到服務(wù)器場(chǎng)的所有設(shè)備上本地運(yùn)行。

顯然，PaLM 2 是 Google 現(xiàn)有 PaLM 模型的繼承者，該模型直到最近才為其實(shí)驗(yàn)性 Bard AI 提供動(dòng)力。“將 PaLM 視為一個(gè)通用模型，然后可以對(duì)其進(jìn)行微調(diào)以完成特定任務(wù)，”他在本周早些時(shí)候的記者電話中解釋道。“例如：健康研究團(tuán)隊(duì)使用醫(yī)學(xué)知識(shí)對(duì) PaLM 進(jìn)行了微調(diào)，以幫助回答問(wèn)題并從各種密集的醫(yī)學(xué)文本中總結(jié)見(jiàn)解。” Ghahramani 還指出，PaLM 是“第一個(gè)在醫(yī)學(xué)執(zhí)照考試中達(dá)到專家水平的大型語(yǔ)言模型”。

據(jù)該公司稱，Bard 現(xiàn)在在 PaLM 2 上運(yùn)行，它提供改進(jìn)的多語(yǔ)言、推理和編碼功能。與它的前身相比，該語(yǔ)言模型在多語(yǔ)言文本上接受了更多的訓(xùn)練，涵蓋了 100 多種語(yǔ)言，對(duì)文化習(xí)語(yǔ)和短語(yǔ)轉(zhuǎn)換的理解得到了改進(jìn)。

它同樣擅長(zhǎng)用 Python 和 JavaScript 生成編程代碼。據(jù)報(bào)道，由于來(lái)自“包含數(shù)學(xué)表達(dá)式的科學(xué)論文和網(wǎng)頁(yè)”的大量訓(xùn)練數(shù)據(jù)，該模型還展示了“邏輯、常識(shí)推理和數(shù)學(xué)方面的改進(jìn)能力”。

更令人印象深刻的是，谷歌能夠衍生出名為 Gecko、Otter、Bison 和 Unicorn 的基本 PaLM 系統(tǒng)的特定應(yīng)用版本。

“我們將 PaLM 打造得更小、更快、更高效，同時(shí)增強(qiáng)了它的能力，”Ghahramani 說(shuō)。“然后我們將其提煉成一系列尺寸范圍廣泛的模型，這樣最輕的模型就可以作為交互式應(yīng)用程序在最新的三星 Galaxy 移動(dòng)設(shè)備上運(yùn)行。” 總而言之，谷歌在周三的 I/O 活動(dòng)中宣布了超過(guò)兩打?qū)⒕哂?PaLM 功能的產(chǎn)品

關(guān)鍵詞：