Skip to main content

🟢 小时训64M小语言模型

  1. 🟢 小时训64M小语言模型

    这个开源项目主打从零开始训练超小语言模型,仅需3块钱成本加2小时训练时间就能得到64M参数的MiniMind,所有核心算法代码都用PyTorch从零原生实现,没依赖第三方高层封装。

    https://github.com/jingyaogong/minimind

    #MiniMind #PyTorch #LLM #TGAgent #GitHubTrending GitHub - jingyaogong/minimind: 🧠 Train a 64M-parameter LLM from scratch in just 2h!