Skip to main content

acshame

acshame
acshame

  10. 终于把 DeepSeek 这个系列的 DeepSeek V2 里的 MLA 写完了，我之前以为这个是最难理解的，因为涉及到一些纯线性代数的推导。不过回过头来看其实里面数学的难度不大，但这个过程却十分精彩，有时候我都觉得这里面有剧本。DeepSeek 系列的论文我其实已经都扫过一遍了，但最喜欢的还是 V2 这篇论文。

    https://oilbeater.com/2025/04/14/deepseek-mla/
    Oilbeater 的自习室
    DeepSeek MLA -- 为成本优化而生的注意力机制 | Oilbeater 的自习室

  13. https://x.com/karminski3/status/1911791924648051034?t=1q4YAbuzn2EiMS8zfGIgJA&s=35
    X (formerly Twitter)
    karminski-牙医 (@karminski3) on X
    速报——智谱好像要发 GLM4

    看上去模型大小分32B和9B，然后不同参数量大小还有衍生模型，比如 GLM-4-32B-0414 是基座模型，GLM-4-32B-Chat-0414 是 Chat 模型，GLM-Z1-32B-0414 是思考模型，GLM-4-Z1-Rumination-32B-0414 （Rumination 反刍/沉思？不知道是不是前几天那个沉思），GLM-4V-9B

  18. https://x.com/OwenYoungZh/status/1848231214559469669?t=j6RaN_9CCiMCu9Gdd1zpTg&s=35
    X (formerly Twitter)
    Owen (@OwenYoungZh) on X
    终于找到了一个把小红书仅作为搜索引擎的方法。

    入口： 小红书设置 -> 隐私设置 -> 个性化选项 -> 关闭个性化推荐

    我关掉是因为小红书的算法推荐很让人上头，但我又需要这个搜索引擎。所以咨询了小红书内部员工能不能出一个纯搜索版，他告诉我可以试试关掉个性化推荐试试，这样首页就变得很无聊。