Meta開源其類似GPT-3的語言模型 - Reddit
Facebook 剛剛釋出了與 GPT-3 相當的語言模型 Open Pretrained Transformer (OPT-175B)。
優點是：模型大小比GPT-3小，只有125M引數的模型，可供任何人使用。
Meta還提供了一個負責任的人工智慧準則，並在訓練模型時尊重該準則。
有這麼一套深入細緻的指南來指定實現這些模型，是相當了不起的。
這才是真正的開源，而不是OpenAI在推出時的做法，OpenAI實際上是一個封閉的盒子，沒有辦法檢查他們提供給我們的資訊。
我的意思是，我認為這仍然是一個有爭議的空間，隨著我們推出越來越多的這些更大、更強大的語言模型，限制它們的毒性和偏見將是一個相當重要的挑戰，但我認為這絕不是不可能。
在這個意義上，OPT文件做得很好，MetaAI公佈了OPT-175的日誌。他們在這個模型構建的許多步驟中都是高度透明的。
。今天，我和我的NLP資料科學家朋友開玩笑說："我們甚至不知道。開放式人工智慧可能會給我們一些手動建立的結果！？沒有辦法仔細檢查。他們只是希望我們相信他們。"當然我是在開玩笑，但我們。
是蛋糕上的冰。
我還沒有變化來測試OPT。我在等待週末的到來。
相關文章
- 歡迎 Llama 3：Meta 的新一代開源大語言模型模型
- GPT-3：一個令人失望的語言模型GPT模型
- Dropbox 開源其 Go 語言庫Go
- Meta將Rust語言納入其伺服器端程式語言Rust伺服器
- 蘋果OpenELM：開源小語言模型蘋果模型
- 《自然》證實：計算機語言更類似人類語言計算機
- e語言 類似eval函式作用的函式
- 類似於C語言的printf函式 (轉)C語言函式
- Vokenization：一種比GPT-3更有常識的視覺語言模型GPT視覺模型
- 開源大語言模型作為 LangChain 智慧體模型LangChain智慧體
- 開源go-zero作者描述自己從Java到Go語言經歷 - RedditGoJava
- Pants：類似Maven但支援多個語言的構建Maven
- Meta AI 開源萬物可分割 AI 模型(SAM)AI模型
- 類似trello的區域網開源的軟體
- 幽默：駭客式程式設計其實類似機器學習！程式設計機器學習
- Java界有沒有類似DotNetNuke的開源專案？Java
- python 是開源語言嗎：Python 是一種開源語言嗎？Python
- nlp中的傳統語言模型與神經語言模型模型
- Go和Rust都是系統語言和通用語言 - RedditGoRust
- Rust語言開發資源Rust
- 誰能提供一個開源的下載庫 類似於FlashGet
- 製作一個類似蘋果VFL的格式化語言來描述UIStackView蘋果UIView
- Meta開源Llama 3釋出
- 如何開始定製你自己的大型語言模型模型
- Elixir語言在Ruby社群很火，語法類似Ruby，本質卻是Erlang！ - preslavR語言
- Rust語言最獨特的特點是什麼？ - RedditRust
- [Hyperf 開源包] 一款類似 Laravel 的 modelFilter 查詢包LaravelFilter
- 激發創新，助力研究：CogVLM，強大且開源的視覺語言模型亮相視覺模型
- 微軟小語言模型Phi-3-Mini-4K-Instructk開源釋出微軟模型Struct
- Go語言一個輕便的實時日誌類似slack收集應用Go
- N元語言模型模型
- srilm建立語言模型模型
- LoRA：語言模型微調的計算資源最佳化策略模型
- 12 種自然語言處理的開源工具自然語言處理開源工具
- 值得學習的C語言開源專案C語言
- Java語言——類Java
- 類似拼多多，多商戶拼團商城(開源),用thinkphp5開發的拼團開源系統PHP
- 一文解碼語言模型：語言模型的原理、實戰與評估模型