【新智元导读】近日，BitNet系列的原班人马推出了新一代架构：BitNet a4.8，为1 bit大模型启用了4位激活值，支持3 bit KV cache，效率再突破。 量化到1 bit的LLM还能再突破？ 这次，他们对激活值下手了！ 近日，BitNet系列的原班人马推出了新一代架构：BitNet a4.8，为1 bit ...

BitNet a4.8引入4位激活，提高大模型效率。 近日，BitNet系列的原班人马推出了新一代架构：BitNet a4.8，为1 bit大模型启用了4位激活值，支持3 bit KV cache，效率再突破。 量化到1 bit的LLM还能再突破？ 这次，他们对激活值下手了！ 近日，BitNet系列的原班人马推出了新一 ...

Microsoft Releases Largest 1-Bit LLM, Letting Powerful AI Run on Some Older Hardware Your email has been sent Microsoft’s model BitNet b1.58 2B4T is available on Hugging Face but doesn’t run on GPU ...