Baidu
ERNIE 5.5 Flash Base
ERNIE 5.5 Flash Base 是僅處理文字的稀疏混合專家(MoE)基礎語言模型。百度公開的是預訓練結束、尚未經過中期訓練或後訓練的權重,主要作為進一步訓練與研究的起點。(huggingface.co) 總參數量為 2,800 億,每個 token 啟用 140 億參數;預訓練使用 33.5 兆個 token。 預訓練上下文上限為 131,072 tokens;微調與推論支援 1,048…
了解模型繁體中文
模型發布檔案
彙整模型發布動態,按發布時間瀏覽,探索值得關注的新模型。
ERNIE 5.5 Flash Base 是僅處理文字的稀疏混合專家(MoE)基礎語言模型。百度公開的是預訓練結束、尚未經過中期訓練或後訓練的權重,主要作為進一步訓練與研究的起點。(huggingface.co) 總參數量為 2,800 億,每個 token 啟用 140 億參數;預訓練使用 33.5 兆個 token。 預訓練上下文上限為 131,072 tokens;微調與推論支援 1,048…