Meta heeft Muse Spark Open gepresenteerd, een open-weight model dat tekst, afbeeldingen, audio en video als invoer verwerkt en tekst genereert. Het model is volgens de beschrijving gericht op agentische programmeertaken, zoals codebases lezen, code schrijven en debuggen. Het heeft ongeveer 816 miljard parameters, waarvan er per token circa 42 miljard actief zijn, en ondersteunt een contextvenster tot één miljoen tokens.
Muse Spark Open gebruikt 256 experts per mixture-of-experts-laag, waarvan er acht per token worden geselecteerd. Voor gebruik zijn alle experts in het geheugen nodig; de BF16-versie is ongeveer 1,5 terabyte groot. De modelgewichten zijn beschikbaar in BF16 en NVFP4, waarbij die laatste variant bedoeld is voor NVIDIA Blackwell-gpu’s. Hugging Face beschrijft ook ondersteuning voor Transformers, vLLM, SGLang en llama.cpp.