Transformer升级之路：逆用Leaky ReRoPE解决推理成本问题
在上周的文章《Transformer升级之路：12、…
分类： AI
增大Tokenizer词表：LLM续写任务的新挑战与解决方案
语言模型（LLM）在自然语言处理中的应用越…
Viterbi Sampling算法的改进与完善
在自然语言处理领域，分词是一个至关重要…
探索线性Attention的局限性：从「集中注意力」角度出发
近年来，Transformer架构在自然语言处理领…
深度学习中的状态空间模型（SSM）初探
引言 前几天，笔者看了几篇介绍SSM（State…
DeepSeek-V2 大模型
DeepSeek-V2 是一个强大、经济高效的混合…