Modelių katalogas
Atvirojo kodo modelių katalogas
Filtruokite atvirus modelius pagal dydį, atminties poreikį ir licenciją — bet kurį iš jų įdiegsime privačiai jūsų įrangoje.
| Modelis | Parametrai | Min. VRAM | Licencija | Geriausia tinka |
|---|---|---|---|---|
| Phi-3.5 mini | 3.8B | 4 GB | MIT | Edge ir įrenginiai |
| Mistral 7B | 7B | 6 GB | Apache 2.0 | Greiti asistentai |
| Llama 3.1 8B | 8B | 8 GB | Llama 3.1 | Kopilotai ir pokalbiai |
| Qwen 2.5 7B | 7B | 8 GB | Apache 2.0 | Daugiakalbiai pokalbiai |
| Gemma 2 9B | 9B | 10 GB | Gemma | Lengvos užduotys |
| Gemma 2 27B | 27B | 20 GB | Gemma | Subalansuota kokybė |
| Qwen 2.5 32B | 32B | 24 GB | Apache 2.0 | Samprotavimas ir analizė |
| Mixtral 8x7B | 47B MoE | 24 GB | Apache 2.0 | Pralaidumas ir RAG |
| Llama 3.3 70B | 70B | 40 GB | Llama 3.3 | Aukštos kokybės samprotavimas |
| Qwen 2.5 72B | 72B | 40 GB | Qwen | Sudėtingos užduotys |
| Mixtral 8x22B | 141B MoE | 80 GB | Apache 2.0 | Įmonės apkrovos |
| Llama 3.1 405B | 405B | Multi-GPU | Llama 3.1 | Didžiausia kokybė |
| DeepSeek R1 | 671B MoE | Multi-GPU | MIT | Pažangiausias samprotavimas |
| Falcon 180B | 180B | Multi-GPU | Falcon | Didelio masto aptarnavimas |
Nė vienas modelis neatitinka filtro.
Orientacinė minimali VRAM kvantuotai inferencijai; tikslią įrangą parenkame pagal konkretų atvejį.