大模型应用开发这件事,真正卡住人的往往不是「不会调 API」,而是不知道该补哪一块。提示词写得出来,但一上生产就不稳定;RAG 跑通了 demo,召回率一塌糊涂;模型选型只会用默认那个,遇到 MoE、Qwen、ChatGLM 就发懵。这套实战营的内容线索,恰好覆盖了这些具体缺口。

先确认自己缺的是哪一层

大模型开发的能力大致分三层:会用(提示工程、接口调用)、会改(RAG 改进、微调、模型选型)、会拼(多模态、语音、文生图串成完整应用)。多数人停在第一层,能做出能演示的东西,但扛不住真实数据。

这份资料里出现「RAG 的改进方案」「advanced_rag 进阶实战案例」这类内容,说明它没有停在「把文档塞进向量库」这一步。如果你现在的 RAG 只做过最朴素的那一版,召回靠调 top_k,那这部分就是你该盯的地方。反之,如果你连基础的检索链路都还没搭过,直接看进阶案例会很难受,建议先补齐前置。

模型层:别只会用一个默认模型

资料中有专门一节讲 Mistral-7B、MoE、ChatGLM、Qwen。这几个词放在一起不是凑数:Mistral-7B 代表小参数高性价比路线,MoE 是混合专家架构,ChatGLM 和 Qwen 是国内落地时绕不开的两个选项。实际做项目时,「用哪个模型」直接决定成本、延迟和效果上限。

看完这部分,你应该能回答:什么场景下 7B 级别够用、什么情况下必须上更大的模型;MoE 为什么能在推理成本上占便宜;同一个任务换模型后,提示词要不要跟着改。这些问题的答案,比记住几个模型名字重要得多。

多模态与语音:应用形态的扩展

第九周出现了「多模态、文生图、文字转语音」的内容。这块的实战价值在于,它把纯文本的对话应用扩展成了更完整的产品形态——比如图文混合输入、语音播报输出。

需要注意的是,多模态开发的门槛不在模型本身,而在工程串联:图片怎么预处理、生成结果怎么缓存、语音合成的延迟怎么藏。看这部分时,别只关心「能不能生成」,多留意调用链路和异常处理的设计。

配套练习该怎么用

  • RAG 部分:拿自己手头的一份真实文档(不是示例数据)重跑一遍,对比改进前后的召回差异,记录改了什么、效果变了多少。
  • 模型部分:同一个任务分别用两个不同规模的模型跑,把成本、响应时间、输出质量列成表,形成自己的选型直觉。
  • 多模态部分:先跑通单条链路,再考虑做一个小而完整的功能,不要一上来就搭大框架。
  • 助教补充课:这类内容通常补的是正课没展开的坑,建议在正课对应章节之后再看,顺序反了容易抓不住重点。

看完应当能回答的问题

  • 我的 RAG 系统召回不准,可以从哪几个环节下手排查和改进?
  • 面对一个新需求,我怎么判断该用 7B 级模型还是更大规模的模型?
  • MoE 架构在什么情况下比稠密模型更划算,代价是什么?
  • 把一个文本问答应用扩展成支持图片和语音,中间要补哪些工程环节?
  • 提示工程里哪些技巧是通用稳定的,哪些只是针对特定模型的「玄学」?

如果这些问题你现在答不上来,说明有明确的缺口可以补;如果大部分能答,那就挑其中一两个最虚的环节重点过,不必从头刷。资料体量不小,按缺口取用比按顺序硬啃效率更高。

贪心科技-大模型开发应用实战营

大模型开发实战,深度学习应用

编辑点评

实战性强,紧跟行业前沿,适合对大模型应用开发感兴趣的学员。

⭐ 编辑推荐

实战营带你深入探索大模型开发,从基础到进阶,掌握多模态应用、提示工程等核心技能。

课程亮点

• 大模型实战课程
• 多模态应用开发
• 提示工程与微调

课程目录

📁 课件资料
    课件资料.exe  [1.3 GB]
📁 05 第五周
    📁 02 助教补充课-进阶RAG实战案例 2024年2月29日
        📁 01 advanced_rag
            02 advanced_rag02【网盘分享WPFX.LINK】.mp4  [334.4 MB]
            01 advanced_rag01【网盘分享WPFX.LINK】.mp4  [264.8 MB]
    📁 01 第九节 2024年2月27日
        📁 01 RAG的改进方案
            03 RAG的改进方案Query Retriever Ranking RAGAS RAG评估【网盘分享WPFX.LINK】.mp4  [253.2 MB]
            01 RAG回顾以及有可能存在的问题【网盘分享WPFX.LINK】.mp4  [109.8 MB]
            02 RAG的改进方案Query的改造【网盘分享WPFX.LINK】.mp4  [225.8 MB]
📁 09 第九周
    📁 02 第十六节 2024年3月28日
        📁 01 多模态、文生图、文字转语音
            01 多模态、文生图、文字转语音-01【网盘分享WPFX.LINK】.mp4  [459.4 MB]
            02 多模态、文生图、文字转语音-02【网盘分享WPFX.LINK】.mp4  [749.8 MB]
    📁 01 第十五节 2024年3月26日
        📁 01 Mistral-7B、MoE、ChatGLM、Qwen
            01 Mistral-7B、MoE【网盘分享WPFX.LINK】.mp4  [800.9 MB]
            02 ChatGLM、Qwen【网盘分享WPFX.LINK】.mp4  [526.0 MB]
📁 07 第七周
    📁 01 第十二节 2024年3月12日
        📁 01 HuggingGPT、斯坦福小镇
            01 HuggingGPT【网盘分享WPFX.LINK】.mp4  [391.9 MB]
            02 斯坦福小镇【网盘分享WPFX.LINK】.mp4  [645.7 MB]
            03 mock_interview_agent【网盘分享WPFX.LINK】.mp4  [1.0 GB]
    📁 02 第十三节 2024年3月14日
        📁 01 fine tune、Lora的微调
            02 Lora的微调01【网盘分享WPFX.LINK】.mp4  [513.2 MB]
            03 Lora的微调02【网盘分享WPFX.LINK】.mp4  [679.5 MB]
            01 fine tune【网盘分享WPFX.LINK】.mp4  [273.3 MB]
📁 03 第三周
    📁 01 第五节 2024年1月30日
        📁 01 倒排索引、KNN、PQ
            02 倒排索引【网盘分享WPFX.LINK】.mp4  [140.9 MB]
            03 Product Quantization【网盘分享WPFX.LINK】.mp4  [202.4 MB]
            01 从基础RAG到进阶RAG【网盘分享WPFX.LINK】.mp4  [195.9 MB]
    📁 02 第六节 2024年2月1日
        📁 01 NSW与HNSW算法、推荐系统、LLM结合
            01 回顾、NSW与HNSW算法【网盘分享WPFX.LINK】.mp4  [214.9 MB]
            02 推荐系统、LLM结合【网盘分享WPFX.LINK】.mp4  [124.5 MB]
            03 推荐系统案例:代码学习【网盘分享WPFX.LINK】.mp4  [328.0 MB]
📁 04 第四周
    📁 02 第八节 2024年2月22日
        📁 01 -Langchain的应用2
            03 langchain-for-youtube项目讲解【网盘分享WPFX.LINK】.mp4  [242.6 MB]
            02 Langchain的应用2-retrieval、chain组件【网盘分享WPFX.LINK】.mp4  [256.4 MB]
            01 Langchain的应用2-output parser【网盘分享WPFX.LINK】.mp4  [184.3 MB]
    📁 01 第七节 2024年2月20日
        📁 01 Langchain的应用
            02 Langchain的应用-02【网盘分享WPFX.LINK】.mp4  [286.9 MB]
            01 Langchain的应用-01【网盘分享WPFX.LINK】.mp4  [393.0 MB]
📁 02 第二周
    📁 02 助教补充课-Gradio入门 2024年1月24日
        📁 01 gradio入门
            01 gradio入门【网盘分享WPFX.LINK】.mp4  [300.4 MB]
    📁 01 第三节 2024年1月23日
        📁 01 提示工程及案例
            02 案例【网盘分享WPFX.LINK】.mp4  [288.4 MB]
            01 提示工程【网盘分享WPFX.LINK】.mp4  [329.9 MB]
    📁 03 第四节 2024年1月25日
        📁 01 文档分割及相似度分析
            04 文本的向量化【网盘分享WPFX.LINK】.mp4  [172.3 MB]
            03 大模型的hallucination【网盘分享WPFX.LINK】.mp4  [121.7 MB]
            02 基于文档的LLM回复系统搭建【网盘分享WPFX.LINK】.mp4  [93.4 MB]
            01 大模型的商业化落地挑战【网盘分享WPFX.LINK】.mp4  [82.6 MB]
📁 08 第八周
    📁 01 第十四节 2024年3月21日
        📁 01 llama介绍&微调
            02 llama介绍&微调-02【网盘分享WPFX.LINK】.mp4  [183.4 MB]
            01 llama介绍&微调-01【网盘分享WPFX.LINK】.mp4  [598.0 MB]
📁 01 第一周
    📁 02 第二节 2024年1月18日
        📁 01 代码演示
            01 大模型应用场景【网盘分享WPFX.LINK】.mp4  [238.2 MB]
            03 GPTs【网盘分享WPFX.LINK】.mp4  [145.4 MB]
            02 OpenAI API及Gradio【网盘分享WPFX.LINK】.mp4  [448.5 MB]
    📁 01 第一节 2024年1月16日
        📁 01 开营+大模型训练以及应用Case分析
            01 开营+大模型训练以及应用Case分析-01【网盘分享WPFX.LINK】.mp4  [152.8 MB]
            03 开营+大模型训练以及应用Case分析-03【网盘分享WPFX.LINK】.mp4  [143.5 MB]
            04 开营+大模型训练以及应用Case分析-04【网盘分享WPFX.LINK】.mp4  [212.4 MB]
            02 开营+大模型训练以及应用Case分析-02【网盘分享WPFX.LINK】.mp4  [90.7 MB]
📁 10 第十周
    📁 01 第十七节 2024年4月2日
        📁 01 多模态大模型、LLaVA MiniGPT-4
            01 多模态大模型【网盘分享WPFX.LINK】.mp4  [390.1 MB]
            02 LLaVA MiniGPT-4【网盘分享WPFX.LINK】.mp4  [663.1 MB]
📁 06 第六周
    📁 01 第十节 2024年3月5日
        📁 01 Agent
            02 Agent02【网盘分享WPFX.LINK】.mp4  [654.4 MB]
            01 Agent01【网盘分享WPFX.LINK】.mp4  [321.3 MB]
    📁 02 第十一节 2024年3月7日
        📁 01 autogpt_metagpt
            02 metagpt【网盘分享WPFX.LINK】.mp4  [548.6 MB]
            01 autogpt【网盘分享WPFX.LINK】.mp4  [336.5 MB]
人满就闭群免费分享小而美付费资料.jpg  [73.1 KB]

适合人群

  • AI开发者
  • 机器学习爱好者
  • 大模型应用开发者

学习收获

掌握大模型开发流程
精通多模态应用开发
提升AI应用开发能力

祝您学习愉快!

学有所成,前程似锦!