MindIE-LLM 支持模型列表¶
图例说明
- ●:充分验证支持
- ●:仅功能支持
- ✅:支持该列的特性
- ❌:不支持该列特性
文本生成模型¶
DeepSeek 系列¶
| 模型 | Support | 最大上下文长度 | W8A8 | W4A8 | W8A16 | LoRA | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| DeepSeek-R1-Distill-Llama-8B | ● | 128k | ✅ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2/4卡(推荐1卡) | README | deepseek-ai/DeepSeek-R1-Distill-Llama-8B | deepseek-ai/DeepSeek-R1-Distill-Llama-8B |
| DeepSeek-R1-Distill-Llama-70B | ● | 128k | ✅ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:8卡 Atlas 800I A3:4卡 | README | deepseek-ai/DeepSeek-R1-Distill-Llama-70B | deepseek-ai/DeepSeek-R1-Distill-Llama-70B |
| DeepSeek-R1-Distill-Qwen-1.5B | ● | 128k | ✅ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4卡(推荐2卡) Atlas 800I A3:1/2卡(推荐1卡) Atlas 300I Duo:1/2卡(推荐1卡) | README | deepseek-ai/DeepSeek-R1-Distill-Qwen-1.5B | deepseek-ai/DeepSeek-R1-Distill-Qwen-1.5B |
| DeepSeek-R1-Distill-Qwen-7B | ● | 128k | ✅ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4卡(推荐2卡) Atlas 800I A3:1/2卡(推荐1卡) Atlas 300I Duo:1/2卡(推荐1卡) | README | deepseek-ai/DeepSeek-R1-Distill-Qwen-7B | deepseek-ai/DeepSeek-R1-Distill-Qwen-7B |
| DeepSeek-R1-Distill-Qwen-14B | ● | 128k | ✅ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐4卡) Atlas 800I A3:1/2/4卡(推荐2卡) Atlas 300I Duo:2/4卡(推荐2卡) | README | deepseek-ai/DeepSeek-R1-Distill-Qwen-14B | deepseek-ai/DeepSeek-R1-Distill-Qwen-14B |
| DeepSeek-R1-Distill-Qwen-32B | ● | 128k | ✅ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐4卡) Atlas 800I A3:1/2/4卡(推荐2卡) Atlas 300I Duo:1/2/4卡(推荐2卡) | README | deepseek-ai/DeepSeek-R1-Distill-Qwen-32B | deepseek-ai/DeepSeek-R1-Distill-Qwen-32B |
| DeepSeek-MoE-16B-Chat | ● | 4k | ❌ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:4/8卡(推荐4卡) Atlas 800I A3:不支持 Atlas 300I Duo:不支持 | README | deepseek-ai/deepseek-moe-16b-chat | deepseek-ai/deepseek-moe-16b-chat |
| DeepSeek-V2-Chat-236B | ● | 128k | ✅ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:16卡 Atlas 800I A3:8卡 Atlas 300I Duo:不支持 | README | deepseek-ai/DeepSeek-V2-Chat | deepseek-ai/DeepSeek-V2-Chat |
| DeepSeek-V3-0324 | ● | 128k | ✅ | ✅ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:16卡 Atlas 800I A3:8卡 Atlas 300I Duo:不支持 | README | deepseek-ai/DeepSeek-V3-0324 | deepseek-ai/DeepSeek-V3-0324 |
| DeepSeek-R1-0528 | ● | 128k | ✅ | ✅ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:16卡 Atlas 800I A3:8卡 Atlas 300I Duo:不支持 | README | deepseek-ai/DeepSeek-R1-0528 | deepseek-ai/DeepSeek-R1-0528 |
| DeepSeek-V3.1 | ● | 128k | ✅ | ✅ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:16卡 Atlas 800I A3:8卡 Atlas 300I Duo:不支持 | README | deepseek-ai/DeepSeek-V3.1 | deepseek-ai/DeepSeek-V3.1 |
| DeepSeek-V3.1-Terminus | ● | 128k | ✅ | ✅ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:16卡 Atlas 800I A3:8卡 Atlas 300I Duo:不支持 | README | deepseek-ai/DeepSeek-V3.1-Terminus | deepseek-ai/DeepSeek-V3.1-Terminus |
| DeepSeek-V3.2 | ● | 64k | ✅ | ❌ | ❌ | ❌ | ❌ | ✅ | Atlas 800I A2:32卡 Atlas 800I A3:16卡 Atlas 300I Duo:不支持 | README | deepseek-ai/DeepSeek-V3.2 | deepseek-ai/DeepSeek-V3.2 |
Qwen 系列¶
| 模型 | Support | 最大上下文长度 | W8A8 | W4A8 | W8A16 | LoRA | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Qwen2-1.5B | ● | 128k | ❌ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4卡(推荐2卡) Atlas 800I A3:1/2卡(推荐1卡) Atlas 300I Duo:1/2卡(推荐1卡) | README | Qwen/Qwen2-1.5B | Qwen/Qwen2-1.5B |
| Qwen2-7B-Instruct | ● | 128k | ✅ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4(推荐2卡) Atlas 800I A3:1/2卡(推荐1卡) Atlas 300I Duo:1/2卡(推荐1卡) | README | Qwen/Qwen2-7B-Instruct | Qwen/Qwen2-7B-Instruct |
| Qwen2-72B-Instruct | ● | 128k | ✅ | ❌ | ✅ | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐8卡) Atlas 800I A3:1/2/4卡(推荐4卡) Atlas 300I Duo:1/2/4卡(推荐4卡) | README | Qwen/Qwen2-72B-Instruct | Qwen/Qwen2-72B-Instruct |
| Qwen2.5-0.5B-Instruct | ● | 128k | ❌ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:1/2卡(推荐2卡) Atlas 800I A3:1卡 Atlas 300I Duo:1卡 | README | Qwen/Qwen2.5-0.5B-Instruct | Qwen/Qwen2.5-0.5B-Instruct |
| Qwen2.5-1.5B-Instruct | ● | 128k | ❌ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4卡(推荐2卡) Atlas 800I A3:1/2卡(推荐1卡) Atlas 300I Duo:1/2卡(推荐1卡) | README | Qwen/Qwen2.5-1.5B-Instruct | Qwen/Qwen2.5-1.5B-Instruct |
| Qwen2.5-3B-Instruct | ● | 128k | ❌ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2/4卡(推荐1卡) | README | Qwen/Qwen2.5-3B-Instruct | Qwen/Qwen2.5-3B-Instruct |
| Qwen2.5-7B-Instruct | ● | 128k | ✅ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4(推荐2卡) Atlas 800I A3:1/2卡(推荐1卡) Atlas 300I Duo:1/2卡(推荐1卡) | README | Qwen/Qwen2.5-7B-Instruct | Qwen/Qwen2.5-7B-Instruct |
| Qwen2.5-14B-Instruct | ● | 128k | ✅ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:2/4/8卡(推荐4卡) Atlas 800I A3:1/2/4卡(推荐2卡) Atlas 300I Duo:1/2/4卡(推荐2卡) | README | Qwen/Qwen2.5-14B-Instruct | Qwen/Qwen2.5-14B-Instruct |
| Qwen2.5-32B-Instruct | ● | 128k | ✅ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:4/8卡(推荐4卡) Atlas 800I A3:2/4卡(推荐2卡) | README | Qwen/Qwen2.5-32B-Instruct | Qwen/Qwen2.5-32B-Instruct |
| Qwen2.5-72B-Instruct | ● | 128k | ❌ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:8卡 Atlas 800I A3:4卡 | README | Qwen/Qwen2.5-72B-Instruct | Qwen/Qwen2.5-72B-Instruct |
| Qwen3-0.6B | ● | 32k | ❌ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:1卡 Atlas 800I A3:1卡 Atlas 300I Duo:1卡 | README | Qwen/Qwen3-0.6B | Qwen/Qwen3-0.6B |
| Qwen3-1.7B | ● | 32k | ❌ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:1卡 Atlas 800I A3:1卡 Atlas 300I Duo:1卡 | README | Qwen/Qwen3-1.7B | Qwen/Qwen3-1.7B |
| Qwen3-4B | ● | 128k | ❌ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 300I Duo:1卡 | README | Qwen/Qwen3-4B | Qwen/Qwen3-4B |
| Qwen3-8B | ● | 128k | ❌ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:1卡 Atlas 800I A3:1卡 Atlas 300I Duo:1卡 | README | Qwen/Qwen3-8B | Qwen/Qwen3-8B |
| Qwen3-14B | ● | 128k | ✅ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:2卡 Atlas 800I A3:1卡 Atlas 300I Duo:1卡 | README | Qwen/Qwen3-14B | Qwen/Qwen3-14B |
| Qwen3-32B | ● | 128k | ✅ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:4卡 Atlas 800I A3:2卡 Atlas 300I Duo:2卡 | README | Qwen/Qwen3-32B | Qwen/Qwen3-32B |
| Qwen3-30B-A3B-Instruct-2507 | ● | 128k | ❌ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:4/8卡(推荐4卡) Atlas 800I A3:2/4卡(推荐2卡) Atlas 300I Duo:2卡 | README | Qwen/Qwen3-30B-A3B-Instruct-2507 | Qwen/Qwen3-30B-A3B-Instruct-2507 |
| Qwen3-235B-A22B-Instruct-2507 | ● | 128k | ✅ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:16卡 Atlas 800I A3:8卡 Atlas 300I Duo:4卡8芯 | README | Qwen/Qwen3-235B-A22B-Instruct-2507 | Qwen/Qwen3-235B-A22B-Instruct-2507 |
| Qwen3-Coder-30B-A3B-Instruct | ● | 128k | ✅ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:16卡 Atlas 800I A3:8卡 Atlas 300I Duo:4卡8芯 | README | Qwen/Qwen3-Coder-30B-A3B-Instruct | Qwen/Qwen3-Coder-30B-A3B-Instruct |
| Qwen3-Coder-480B-A35B-Instruct | ● | 128k | ✅ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:16卡 Atlas 800I A3:8卡 Atlas 300I Duo:4卡8芯 | README | Qwen/Qwen3-Coder-480B-A35B-Instruct | Qwen/Qwen3-Coder-480B-A35B-Instruct |
Llama 系列¶
| 模型 | Support | 最大上下文长度 | W8A8 | W4A8 | W8A16 | LoRA | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Llama3-8B | ● | 8k | ❌ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2/4卡(推荐1卡) | README | meta-llama/Meta-Llama-3-8B | LLM-Research/Meta-Llama-3-8B-Instruct |
| Llama3-70B | ● | 8k | ❌ | ❌ | ✅ | ✅ | ✅ | ❌ | Atlas 800I A2:8卡 Atlas 800I A3:4卡 | README | meta-llama/Meta-Llama-3-70B | LLM-Research/Meta-Llama-3-70B |
| Llama3.1-8B | ● | 128k | ✅ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2/4卡(推荐1卡) | README | meta-llama/Llama-3.1-8B | LLM-Research/Meta-Llama-3.1-8B |
| Llama3.1-70B | ● | 128k | ✅ | ❌ | ❌ | ✅ | ✅ | ❌ | Atlas 800I A2:8卡 Atlas 800I A3:4卡 | README | meta-llama/Llama-3.1-70B | LLM-Research/Meta-Llama-3.1-70B/Meta-Llama-3.1-70B |
| Llama3.1-405B | ● | 128k | ✅ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:16卡 Atlas 800I A3:8卡 | README | meta-llama/Llama-3.1-405B | LLM-Research/Meta-Llama-3.1-405B-Instruct |
ERNIE 系列¶
| 模型 | Support | 最大上下文长度 | W8A8 | W4A8 | W8A16 | LoRA | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| ERNIE-4.5-300B-A47B | ● | 32k | ✅ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:16卡 Atlas 800I A3:8卡 Atlas 300I Duo:不支持 | README | baidu/ERNIE-4.5-300B-A47B-PT | baidu/ERNIE-4.5-300B-A47B |
KIMI 系列¶
| 模型 | Support | 最大上下文长度 | W8A8 | W4A8 | W8A16 | LoRA | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Kimi-K2-Instruct | ● | 32k | ✅ | ✅ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:32卡 Atlas 800I A3:16卡 Atlas 300I Duo:不支持 | README | moonshotai/Kimi-K2-Instruct | ❌ |
| Kimi-K2-Thinking | ● | 32k | ✅ | ✅ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:32卡 Atlas 800I A3:16卡 Atlas 300I Duo:不支持 | README | moonshotai/Kimi-K2-Thinking | ❌ |
GLM 系列¶
| 模型 | Support | 最大上下文长度 | W8A8 | W4A8 | W8A16 | LoRA | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| ChatGLM2-6B | ● | 32k | ✅ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2/4卡(推荐1卡) | README | THUDM/chatglm2-6b | ZhipuAI/chatglm2-6b |
| ChatGLM3-6B | ● | 8k | ✅ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2卡(推荐1卡) | README | THUDM/chatglm3-6b | ZhipuAI/chatglm3-6b |
| ChatGLM3-6B-32K | ● | 32k | ❌ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2/4卡(推荐1卡) | README | THUDM/chatglm3-6b-32k | ZhipuAI/chatglm3-6b-32k |
| GLM4-9B | ● | 128k | ✅ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2卡(推荐1卡) | README | THUDM/glm-4-9b | ZhipuAI/glm-4-9b |
| GLM-4.5 | ● | 32k | ✅ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:16卡 Atlas 800I A3:待测试 Atlas 300I Duo:不支持 | README | zai-org/GLM-4.5 | ❌ |
Bloom¶
| 模型 | Support | 最大上下文长度 | W8A8 | W4A8 | W8A16 | LoRA | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Bloom-7B | ● | 4096 | ❌ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:4卡(推荐1卡) | README | bigscience/bloom-7b1 | bigscience/bloom-7b1 |
Baichuan¶
| 模型 | Support | 最大上下文长度 | W8A8 | W4A8 | W8A16 | LoRA | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| Baichuan2-7B | ● | 4096 | ✅ | ❌ | ❌ | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1卡 | README | baichuan-inc/Baichuan2-7B | baichuan/Baichuan2-7B |
| Baichuan2-13B | ● | 4096 | ✅ | ❌ | ✅ | ❌ | ✅ | ❌ | Atlas 800I A2:2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2卡(推荐1卡) | README | baichuan-inc/Baichuan2-13B | baichuan/Baichuan2-13B |
多模态理解模型¶
Qwen 系列¶
| 模型 | Support | 最大上下文长度 | W8A8 | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|
| Qwen2-VL-2B | ● | 32k | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐1卡) Atlas 800I A3:1/2/4卡(推荐1卡) | README | Qwen/Qwen2-VL-2B-Instruct | Qwen/Qwen2-VL-2B-Instruct |
| Qwen2-VL-7B | ● | 32k | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) | README | Qwen/Qwen2-VL-7B-Instruct | Qwen/Qwen2-VL-7B-Instruct |
| Qwen2-VL-72B | ● | 32k | ✅ | ✅ | ❌ | Atlas 800I A2:4/8卡(推荐8卡) Atlas 800I A3:2/4卡(推荐4卡) | README | Qwen/Qwen2-VL-72B-Instruct | Qwen/Qwen2-VL-72B-Instruct |
| Qwen2.5-VL-3B | ● | 32k | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐1卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2/4卡(推荐1卡) | README | Qwen/Qwen2.5-VL-3B-Instruct | Qwen/Qwen2.5-VL-3B-Instruct |
| Qwen2.5-VL-7B | ● | 32k | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2/4卡(推荐1卡) | README | Qwen/Qwen2.5-VL-7B-Instruct | Qwen/Qwen2.5-VL-7B-Instruct |
| Qwen2.5-VL-32B | ● | 32k | ✅ | ✅ | ❌ | Atlas 800I A2:4/8卡(推荐4卡) Atlas 800I A3:2/4卡(推荐2卡) Atlas 300I Duo:2/4卡(推荐2卡) | README | Qwen/Qwen2.5-VL-32B-Instruct | Qwen/Qwen2.5-VL-32B-Instruct |
| Qwen2.5-VL-72B | ● | 32k | ✅ | ✅ | ❌ | Atlas 800I A2:4/8卡(推荐8卡) Atlas 800I A3:2/4卡(推荐4卡) Atlas 300I Duo:2/4卡(推荐4卡) | README | Qwen/Qwen2.5-VL-72B-Instruct | Qwen/Qwen2.5-VL-72B-Instruct |
| QVQ-72B-Preview | ● | 32k | ❌ | ✅ | ❌ | Atlas 800I A2:4/8卡(推荐8卡) Atlas 800I A3:2/4卡(推荐4卡) | README | Qwen/QVQ-72B-Preview | Qwen/QVQ-72B-Preview |
| Qwen2-Audio-7B | ● | 32k | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) | README | Qwen/Qwen2-Audio-7B-Instruct | Qwen/Qwen2-Audio-7B-Instruct |
| Qwen3-VL-2B | ● | 256K | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐1卡) Atlas 300I Duo:1/2/4/8卡(推荐1卡) | README | Qwen/Qwen3-VL-2B-Instruct | Qwen/Qwen3-VL-2B-Instruct |
| Qwen3-VL-4B | ● | 256K | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐1卡) Atlas 300I Duo:1/2/4/8卡(推荐1卡) | README | Qwen/Qwen3-VL-4B-Instruct | Qwen/Qwen3-VL-4B-Instruct |
| Qwen3-VL-8B | ● | 256K | ✅ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 300I Duo:1/2/4/8卡(推荐2卡) | README | Qwen/Qwen3-VL-8B-Instruct | Qwen/Qwen3-VL-8B-Instruct |
| Qwen3-VL-32B | ● | 256K | ✅ | ✅ | ❌ | Atlas 800I A2:2/4/8卡(推荐4卡) Atlas 300I Duo:2/4/8卡(推荐4卡) | README | Qwen/Qwen3-VL-32B-Instruct | Qwen/Qwen3-VL-32B-Instruct |
| Qwen3-VL-30B-A3B | ● | 256k | ✅ | ✅ | ❌ | Atlas 800I A2:2/4卡(推荐2卡) Atlas 300I Duo:2/4卡(推荐2卡) | README | Qwen/Qwen3-VL-30B-A3B-Instruct | Qwen/Qwen3-VL-30B-A3B-Instruct |
InternVL 系列¶
| 模型 | Support | 最大上下文长度 | W8A8 | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|
| InternVL2-8B | ● | 8k | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) | README | OpenGVLab/InternVL2-8B | OpenGVLab/InternVL2-8B |
| InternVL2-40B | ● | 8k | ❌ | ✅ | ❌ | Atlas 800I A2:2/4/8卡(推荐4卡) Atlas 800I A3:1/2/4卡(推荐2卡) | README | OpenGVLab/InternVL2-40B | OpenGVLab/InternVL2-40B |
| InternVL2.5-8B | ● | 32k | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) | README | OpenGVLab/InternVL2_5-8B | OpenGVLab/InternVL2_5-8B |
| InternVL2.5-78B | ● | 32k | ❌ | ✅ | ❌ | Atlas 800I A2:8卡 Atlas 800I A3:4卡 | README | OpenGVLab/InternVL2_5-78B | OpenGVLab/InternVL2_5-78B |
GLM 系列¶
| 模型 | Support | 最大上下文长度 | W8A8 | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|
| GLM-4V-9B | ● | 128k | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) | README | zai-org/glm-4v-9b | ZhipuAI/glm-4v-9b |
| GLM-4.1V-9B-Thinking | ● | 64k | ✅ | ✅ | ❌ | Atlas 800I A2:1/2卡(推荐2卡) Atlas 800I A3:1卡 Atlas 300I Duo:1卡 | README | zai-org/GLM-4.1V-9B-Thinking | ZhipuAI/GLM-4.1V-9B-Thinking |
MiniCPM-V¶
| 模型 | Support | 最大上下文长度 | W8A8 | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|
| MiniCPM-V 2.6 | ● | 32k | ❌ | ✅ | ❌ | Atlas 800I A2:1/2卡(推荐2卡) Atlas 800I A3:1卡 Atlas 300I Duo:1卡 | README | openbmb/MiniCPM-V-2_6 | OpenBMB/MiniCPM-V-2_6 |
VITA¶
| 模型 | Support | 最大上下文长度 | W8A8 | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|
| VITA-1.5 | ● | 32k | ❌ | ✅ | ❌ | Atlas 800I A2:1卡 Atlas 800I A3:1卡 | README | VITA-MLLM/VITA-1.5 | VITA-MLLM/VITA-1.5 |
LLaVa 系列¶
| 模型 | Support | 最大上下文长度 | W8A8 | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|
| LLaVa-1.5-7B | ● | 4k | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2/4卡(推荐1卡) | README | llava-hf/llava-1.5-7b-hf | llava-hf/llava-1.5-7b-hf |
| LLaVa-1.5-13B | ● | 4k | ❌ | ✅ | ❌ | Atlas 800I A2:2/4/8卡(推荐4卡) Atlas 800I A3:1/2/4卡(推荐2卡) Atlas 300I Duo:2/4卡(推荐2卡) | README | llava-hf/llava-1.5-13b-hf | llava-hf/llava-1.5-7b-hf |
| LLaVa-v1.6-7B | ● | 4k | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2/4卡(推荐1卡) | README | llava-hf/llava-v1.6-vicuna-7b-hf | llava-hf/llava-v1.6-vicuna-7b-hf |
| LLaVa-v1.6-13B | ● | 4k | ❌ | ✅ | ❌ | Atlas 800I A2:2/4/8卡(推荐4卡) Atlas 800I A3:1/2/4卡(推荐2卡) Atlas 300I Duo:1/2/4卡(推荐2卡) | README | llava-hf/llava-v1.6-vicuna-13b-hf | llava-hf/llava-v1.6-vicuna-13b-hf |
| LLaVa-v1.6-34B | ● | 4k | ❌ | ✅ | ❌ | Atlas 800I A2:4/8卡(推荐4卡) Atlas 800I A3:2/4卡(推荐2卡) Atlas 300I Duo:2/4卡(推荐2卡) | README | llava-hf/llava-v1.6-34b-hf | llava-hf/llava-v1.6-34b-hf |
| LLaVa-NeXT-Video-7B | ● | 4k | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2/4卡(推荐1卡) | README | llava-hf/LLaVA-NeXT-Video-7B-hf | llava-hf/LLaVA-NeXT-Video-7B-hf |
| LLaVa-NeXT-Video-34B | ● | 4k | ❌ | ✅ | ❌ | Atlas 800I A2:4/8卡(推荐4卡) Atlas 800I A3:2/4卡(推荐2卡) Atlas 300I Duo:2/4卡(推荐2卡) | README | llava-hf/LLaVA-NeXT-Video-34B-hf | llava-hf/LLaVA-NeXT-Video-34B-hf |
Llama 系列¶
| 模型 | Support | 最大上下文长度 | W8A8 | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|
| Llama 3.2-Vision-11B | ● | 128k | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) | README | meta-llama/Llama-3.2-11B-Vision-Instruct | LLM-Research/Llama-3.2-11B-Vision-Instruct |
| Llama 3.2-Vision-90B | ● | 128k | ❌ | ✅ | ❌ | Atlas 800I A2:4/8卡(推荐8卡) Atlas 800I A3:2/4卡(推荐4卡) | README | meta-llama/Llama-3.2-90B-Vision-Instruct | LLM-Research/Llama-3.2-90B-Vision-Instruct |
Yi-VL 系列¶
| 模型 | Support | 最大上下文长度 | W8A8 | atbgraph | aclgraph | 硬件规格 | README 链接 | Hugging Face 链接 | ModelScope 链接 |
|---|---|---|---|---|---|---|---|---|---|
| Yi-VL-6B | ● | 4k | ❌ | ✅ | ❌ | Atlas 800I A2:1/2/4/8卡(推荐2卡) Atlas 800I A3:1/2/4卡(推荐1卡) Atlas 300I Duo:1/2/4卡(推荐1卡) | README | 01-ai/Yi-VL-6B | 01ai/Yi-VL-6B |
| Yi-VL-34B | ● | 4k | ❌ | ✅ | ❌ | Atlas 800I A2:4/8卡(推荐4卡) Atlas 800I A3:2/4卡(推荐2卡) Atlas 300I Duo:2/4卡(推荐2卡) | README | 01-ai/Yi-VL-34B | 01ai/Yi-VL-34B |