2023.07.19 13:05

Meta 發布 Llama 2 新一代大型語言模型,與微軟合作推廣可以給你免費商用

ADVERTISEMENT

Meta今天發表新一代大型語言模型Llama 2,將免費提供研究與商業使用;Meta並宣布與微軟拓展長期合作夥伴關係,微軟成為Meta在Llama 2商用化的特選合作夥伴。

Meta 表示,過去十多年,Meta 將探索性研究、開源、與學術界及業界夥伴的合作作為 AI 發展的核心,並親眼見證開放創新可以如何孵化造福大眾的科技。數十個大型語言模型在發布後,藉由開發者與研究人員的推動下正持續進展,這些模型成為被企業用來催生新一代生成式 AI 體驗的核心。目前申請 Llama 1 的使用已超過 10 萬次,研究人員對 Llama 1 的龐大需求,與大家在 Llama 1 基礎上創造的驚人成就都讓人深感震撼。

Meta 現已完成分享 Llama 2 新版本並開放用於商業用途的相關準備,包括預訓練模型與對話式的微調版本的模型權重與起始代碼。正如微軟執行長 Satya Nadella 在微軟 Inspire 大會上所宣布,Meta 與微軟將進一步提升合作關係,微軟成為 Meta 在 Llama 2 與拓展生成式 AI 成果的首選合作夥伴。從今天起,Llama 2 將在 Azure AI 模型目錄中上線,使開發人員可以運用 Microsoft Azure 構建並利用其雲端原生工具開展內容過濾與安全功能。Llama 2 也針對 Windows 本機執行進行優化,讓開發者在提供生成式 AI 體驗給不同平台客戶時,擁有無縫的工作流程。Llama 2 也將可透過 Amazon Web Services( AWS )、Hugging Face 予其他夥伴取得。

ADVERTISEMENT

大家與企業將從 Microsoft 與 Meta 間的長期合作夥伴關係中受益,兩家公司共同為可互換 AI 框架推出開放生態系統,並為了推動 AI 的發展共同撰寫相關研究論文。此外,雙方的合作也擴大 PyTorch 在 Azure 上的應用。PyTorch 是由 Meta 與 AI 社群創建且領先業界的 AI 框架,Meta 也是 PyTorch 基金會創始成員之一。微軟與 Meta 近期加入許多認同 AI 框架夥伴關係的支持者,一起創建與共享合成媒體內容。合作夥伴關係將拓展至 AI 領域之外,甚至延伸至元宇宙中,為未來的工作及娛樂提供身歷其境的體驗。

聚焦於負責任地開發

開源將促進 Llama 2 的透明度與可獲取性。AI 為社會帶來顯著的進步,但也伴隨著風險,因此 Meta 承諾將負責任地構建並提供大量資源協助使用 Llama 2 的開發者。

ADVERTISEMENT

  • 紅隊演練( Red-Teaming Exercises ):在內部與外部努力下,Meta 的微調模型已通過紅隊演練安全測試。團隊致力於生成對抗式指令( prompts )來進行模型微調。此外,Meta 委託第三方對經過微調的模型進行外部對抗性測試,以類似方式識別性能上的不足。這些安全微調過程是不斷迭代的;Meta 將繼續透過微調與基準測試,投入於安全性的提升,並基於這些努力發布更新的微調模型。
  • 透明度示意圖:解釋對於模型的微調與評估方式,並確認其缺陷。在研究論文中,Meta 的透明度示意圖揭露過去所經歷過的已知挑戰與問題,並提供曾採取的緩解措施,以及未來計畫探索的解決方式。
  • 負責任的使用指南:Meta 建立一套指南,與開發者分享負責任地開發與安全評估的最佳實踐方式。指南概述在業界與 AI 研究社群間,所討論出目前關於負責任生成式 AI 的最佳研究方式。
  • 可接受的使用政策:Meta 制定了禁止某些案例的政策,以確保這些模型得以公平且負責任地被使用。 

Meta 也開展新方式,運用全球各地的個人、研究人員、開發者的洞察力與創造力,收集關於模型表現成效及如何改進的回饋。

  • 開放創新 AI 研究社群:Meta 更為學術研究人員啟動新的合作夥伴計劃,企盼更進一步瞭解大型語言模型的負責任開發與共享。研究人員可以申請加入從業者社群,分享重要主題的相關經驗,社群將制定研究議程來推動未來的發展。
  • Llama 影響力挑戰賽:Meta 期待活絡積極使用 Llama 解決難題的創新社群,Meta 發起挑戰賽,鼓勵各種大眾、非營利組織與營利單位,運用 Llama 2 應對氣候、教育及其他相關議題上面臨的挑戰。挑戰賽的規則將再另行公布。

回顧 Meta 過去發展,在發展非業務相關領域時,開源帶來許多益處。Meta 的工程師開發並分享現已成為業界標準的框架,例如引領業界用於製作網頁與行動應用程式的框架 React ,與領先 AI 業界的框架 PyTorch,這些已成為提供給整個科技業的通用基礎架構。Meta 相信公開共享大型語言模型,也將支援有用且安全的生成式 AI 的開發。

ADVERTISEMENT