Baidu Releases ERNIE 5.5 Flash Base: A 280B MoE Base Model With 14B Active Parameters

Baidu has released ERNIE 5.5 Flash Base, a 280B sparse MoE base model with 14B active parameters, trained on 33.5T tokens and published before any mid- or post-training.

원문의 저작권은 MarkTechPost에 있습니다. 위 발췌는 원문 확인을 돕기 위한 짧은 인용입니다.