AI Research 技术调研

标签: Falcon

此标签下有1条笔记。

  • 2026年6月18日

    早期与全开(数据全公开)大模型训练配方深挖 — BLOOM/ROOTS · Pythia · GPT-NeoX · Falcon/RefinedWeb · MAP-Neo · OpenCoder · StarCoder/The Stack · RedPajama · DCLM

    • fully-open
    • open-data
    • pretraining
    • data-pipeline
    • BLOOM
    • Pythia
    • GPT-NeoX
    • Falcon
    • RefinedWeb
    • MAP-Neo
    • OpenCoder
    • StarCoder
    • The-Stack
    • RedPajama
    • DCLM

  • GitHub