sxs112.tw 發表於 2024-10-19 09:12:40

NVIDIA推出業界領先的開源Llama-3.1-Nemotron-70B-Instruct LLM

NVIDIA決定推出業界最大的Llama-3.1-Nemotron-70B-Instruct LLM之一,並超越OpenAI GPT-4o和Anthropic的Claude 3.5 Sonnet。

NVIDIA團隊正在加快步伐以一種被認為不可能的方式創新人工智慧領域,在明顯主導了人工智慧硬體領域之後,該公司現在正尋求在開源LLM模型中展示其魔力,與Meta合作。 NVIDIA最新的Llama-3.1-Nemotron-70B-Instruct LLM尚未獲得太多主流報導,但根據現有的初步資訊和測試,NVIDIA的新LLM可能會成為業界領先的。

NVIDIA表示Llama-3.1-Nemotron-70B-Instruct LLM的設計目的只是為了使AI反應更加具體並符合人類偏好,特別是在事實正確性和連貫性的問題解決方面。據說該模型是採用Meta的Llama-3.1-70B-Instruct Base進行訓練的,這又是Meta為700億個參數而設計的作品。經過NVIDIA的微調Llama-3.1-Nemotron-70B-Instruct專門針對SteerLM回歸獎勵建模。

SteerLM回歸獎勵建模涉及定義獎勵函數,透過使用迴歸模型細化資料集以產生更清晰的反應來指導LLM的學習過程。這使得資料品質和模型複雜性更加精細,最終使NVIDIA能夠產生接近使用者要求的回應。

有趣的是採用HuggingFace上展示的Llama-3.1-Nemotron-70B-Instruct LLM模型卡,該特定模型設法解決了傳統AI模型無法解決的問題,其中涉及計算單字。這不僅僅是唯一的成就,因為即將推出的細節可能會給讀者帶來更多驚喜。 NVIDIA的Llama-3.1-Nemotron-70B-Instruct LLM在眾多測試中都取得了領先的排名,特別是Arena Hard(一種用於指令調整LLM的自動評估工具)。

現在先不談具體數字,但這裡需要注意的關鍵一點是Llama-3.1-Nemotron-70B-Instruct已經成功超越了業界主流的LLM,例如OpenAI的GPT-4o,這是一個考慮到NVIDIA的微調對Llama-3.1-70B-Instruct Base的影響力有多大,這是一個重要的里程碑。我們還沒有看到LLM在特定情況下的表現,例如複雜的編碼任務,甚至以推理為重點的問題,但最初的測試確實表明NVIDIA最新的LLM裝備精良。

如果您渴望訪問Llama-3.1-Nemotron-70B-Instruct LLM,您可以從NVIDIA的NIM平台獲取它,或者在HuggingFace上提供相容版本。整體而言NVIdiA團隊正成為人工智慧產業的主導者,征服主流領域。

消息來源
頁: [1]
查看完整版本: NVIDIA推出業界領先的開源Llama-3.1-Nemotron-70B-Instruct LLM