PocketPal AI 常见模型推荐列表
先搞清楚 Instruct vs Base
以下推荐全部是 指令微调版(Instruct / Chat)。基础版(Base)输出质量差、不会按对话格式回应,不适合直接用。
4GB 内存及以下(1~2B 档)
| 模型 | 推荐 GGUF 体积 | 特点 |
|---|
| SmolLM2 1.7B Instruct | Q4 ~ 1GB | 体积最小、推理最快,日常问答够用 |
| Qwen3 1.5B Chat | Q4 ~ 0.9GB | 支持中文较好 |
| Phi-3 Mini 3.8B | Q4 ~ 2.2GB | 微软出品,指令遵循好,但接近 2GB 上限 |
6GB 内存(3B 档)
| 模型 | 推荐 GGUF 体积 | 特点 |
|---|
| Llama 3.2 3B Instruct | Q4_K_M ~ 1.9GB | Meta 出品,英文表现扎实 |
| Gemma 2 2B Instruct | Q4 ~ 1.4GB | Google 出品,风格温和 |
| Qwen2.5 3B Instruct | Q4 ~ 1.8GB | 阿里出品,中文强项 |
8GB 内存(4B 档,甜点区)
| 模型 | 推荐 GGUF 体积 | 特点 |
|---|
| Gemma 3 4B Instruct | Q4_K_M ~ 2.5GB | Google 新架构,推理质量上了个台阶 |
| Qwen3 4B Instruct | Q4_K_M ~ 2.5GB | 阿里出品,中文效果突出 |
| Phi-4 Mini | Q4_K_M ~ 2.3GB | 微软出品,代码能力强 |
| DeepSeek R1 Distill Qwen2.5 1.5B | Q4 ~ 1GB | 蒸馏自推理模型,会输出思考链 |
12GB 内存及以上(7B 档)
| 模型 | 推荐 GGUF 体积 | 特点 |
|---|
| Llama 3.1 7B Instruct | Q4_K_M ~ 4.7GB | 综合能力最均衡的老牌模型 |
| Qwen2.5 7B Instruct | Q4_K_M ~ 4.7GB | 中文 + 代码双强项 |
| DeepSeek V3 7B | Q4_K_M ~ 4.8GB | 代码能力出色 |
中文特别提示
如果你的主要使用场景是中文对话,优先选 阿里 Qwen 系列。Gemma、Llama、Phi 系列虽然多语言能力不错,但中文自然度、成语理解、网络热词处理都不如 Qwen 原生中文模型。