- AI
- AI 目前,Cerebras 官方跑的公开模型就只有这两个,其中 GPT OSS 120B 这个模型的激活参数就只有 5.1B。 稠密模型 Qwen 3.8 27B 模型的激活参数也是 27B
- AI所以说 OpenAI 还是离不开英伟达的 GPU。(其实,我挺喜欢 Cerebras 的高速的,Cerebras 的大芯片看起来真漂亮) Cerebras 能够跑出远超 NVIDIA 的芯片的超高速的前提是,模型参数要尽可能全部放到它的片上缓存中,但是它的片上缓存只有 40GB 左右。模型一大,就要把模型分层切开,放在不同芯片上,这就需要芯片间的互联来通信了。 但是芯片间的通信,Cerebras