http://t.cn/AXxTdbAm
一个“从零做一个小型语言专属 LLM”的端到端教程。作者用乌尔都语作为示例，从原始语料开始，做数据清洗、训练 tokenizer、预训练 GPT 风格 Transformer、做 SFT 对话微调，最后用 Gradio/Hugging Face Spaces 部署成聊天机器人。
#AI创造营# ​