DeepSeekAI大模型本地部署與微調(diào)訓(xùn)戰(zhàn)

培訓(xùn)時(shí)長(zhǎng)：2 天（15 課時(shí)） 

課程介紹： 隨著人工智能技術(shù)的飛速發(fā)展，大模型成為了推動(dòng)自然語(yǔ)言處理、圖像識(shí)別等眾 多領(lǐng)域創(chuàng)新的關(guān)鍵。然而，如何高 效地在本地環(huán)境中部署這些大型模型，并根據(jù) 特定需求對(duì)其進(jìn)行微調(diào)，成為了企業(yè)和研究機(jī)構(gòu)面臨的重要挑戰(zhàn)。 

本課程旨在為學(xué)員提供從理論到實(shí)踐的全 面指導(dǎo)，幫助學(xué)員掌握大模型的本地部 署與微調(diào)技巧，從而能夠?qū)?span id="lpz24dv" class="highlight">先進(jìn)的 AI 技術(shù)應(yīng)用到實(shí)際場(chǎng)景中。

學(xué)員基礎(chǔ)： 

? 具備一定的 Python 編程經(jīng)驗(yàn) 

? 對(duì)機(jī)器學(xué)習(xí)或深度學(xué)習(xí)有基本了解 

? 了解常見(jiàn)的深度學(xué)習(xí)框架（如 TensorFlow、PyTorch） 

? 已熟悉大模型相關(guān)基本概念 

? 對(duì)云計(jì)算有一定認(rèn)識(shí)，了解虛擬化、容器化等概念 

學(xué)后收獲： 

? 理解大模型的特點(diǎn)及其對(duì)硬件資源的需求 

? 掌握多種大模型如 DeepSeek 的本地部署方法 

? 學(xué)會(huì)使用不同的工具和框架對(duì)大模型進(jìn)行微調(diào) 

? 了解模型壓縮技術(shù)，提高模型效率

?理解大模型的安全治理重要性及其實(shí)現(xiàn)方法

?能夠獨(dú)立完成大模型的部署與微調(diào)項(xiàng)目

課程內(nèi)容：

一、大模型本地部署

1、本地部署基礎(chǔ)認(rèn)知 

? 為什么要進(jìn)行本地部署 

? 模型參數(shù)量與硬件資源 

◆ 模型大小與計(jì)算資源的關(guān)系 

◆ 不同規(guī)模模型的適用場(chǎng)景 

2、環(huán)境準(zhǔn)備 

? 必要的軟件和庫(kù)安裝 

◆ CUDA ◆ Python 虛擬環(huán)境 ◆ Docker ◆ Pytorch ◆ Git 

? 開(kāi)發(fā)環(huán)境配置

3、Ollama 快 速部署大模型 

? Ollama 平臺(tái)介紹 

? 一鍵部署流程 

? 實(shí)戰(zhàn)練習(xí)：使用 Ollama 部署 DeepSeek R1 大模型 

4、vLLM 生產(chǎn)級(jí)部署大模型 

? vLLM 框架概述 

? 部署步驟解析 

? 實(shí)戰(zhàn)練習(xí)：使用 vLLM 部署 DeepSeek R1 大模型 

5、開(kāi)源大模型應(yīng)用開(kāi)發(fā)平臺(tái) Dify 本地部署 

? Dify 平臺(tái)特性 

? Dify 適用場(chǎng)景 

? 實(shí)戰(zhàn)練習(xí)：基于 Dify 集成 DeepSeek、

二、大模型微調(diào)

1、大模型訓(xùn)練流程回顧

2、什么是模型微調(diào)

? 微調(diào)的基本概念

? 微調(diào)的重要性

3、微調(diào)方法論

? 全參微調(diào)適用場(chǎng)景與風(fēng)險(xiǎn)控制

? 主流 PEFT 技術(shù)對(duì)比（LoRA/QLoRA/Adapter/P-Tuning）

4、微調(diào)工具

? 流行的微調(diào)工具介紹

◆ Transformers

◆ MS-Swift

◆ Deep-Speed

◆ LLaMA-Factory

? 工具的選擇與使用

5、數(shù)據(jù)工程體系

6、模型壓縮（量化）

7、模型蒸餾

? 模型蒸餾的基本原理

? 模型蒸餾的應(yīng)用場(chǎng)景

? DeepSeek 模型蒸餾的實(shí)現(xiàn)過(guò)程解析

? 實(shí)戰(zhàn)：DeepSeek 模型蒸餾實(shí)踐

8、大模型安全治理

? 為什么要進(jìn)行安全治理

? RLHF 技術(shù)全景（PPO/DPO/CPO）

9、微調(diào)模型評(píng)估

10、實(shí)戰(zhàn)

? 基于 Llama Factory 微調(diào)一個(gè)法律大模型

? 基于 DeepSpeed 大模型并行訓(xùn)練框架 LoRA 微調(diào)實(shí)踐

? 基于 ms-swift LoRA 微調(diào) Qwen2.5-1.5B 實(shí)踐

課后贈(zèng)送拓展課程（錄播）

? 《Linux 快 速入門(mén)》

? 《Docker 快 速入門(mén)》

? 《基于 ComfyUI 本地部署 DeepSeek 開(kāi)源多模態(tài)模型 Janus-Pro》