Malliluettelo
Avoimen lähdekoodin mallien luettelo
Suodata avoimia malleja koon, muistitarpeen ja lisenssin mukaan — otamme minkä tahansa niistä käyttöön yksityisesti omalla laitteistollanne.
| Malli | Parametrit | Vähimmäis-VRAM | Lisenssi | Parhaiten sopii |
|---|---|---|---|---|
| Phi-3.5 mini | 3.8B | 4 GB | MIT | Reunalaskenta ja laitteet |
| Mistral 7B | 7B | 6 GB | Apache 2.0 | Nopeat avustajat |
| Llama 3.1 8B | 8B | 8 GB | Llama 3.1 | Kopilotit ja chat |
| Qwen 2.5 7B | 7B | 8 GB | Apache 2.0 | Monikielinen chat |
| Gemma 2 9B | 9B | 10 GB | Gemma | Kevyet tehtävät |
| Gemma 2 27B | 27B | 20 GB | Gemma | Tasapainoinen laatu |
| Qwen 2.5 32B | 32B | 24 GB | Apache 2.0 | Päättely ja analyysi |
| Mixtral 8x7B | 47B MoE | 24 GB | Apache 2.0 | Läpimeno ja RAG |
| Llama 3.3 70B | 70B | 40 GB | Llama 3.3 | Korkealaatuinen päättely |
| Qwen 2.5 72B | 72B | 40 GB | Qwen | Monimutkaiset tehtävät |
| Mixtral 8x22B | 141B MoE | 80 GB | Apache 2.0 | Yrityskuormat |
| Llama 3.1 405B | 405B | Multi-GPU | Llama 3.1 | Paras laatu |
| DeepSeek R1 | 671B MoE | Multi-GPU | MIT | Kärkitason päättely |
| Falcon 180B | 180B | Multi-GPU | Falcon | Laajan mittakaavan käyttö |
Yksikään malli ei vastaa suodatinta.
Suuntaa antava vähimmäis-VRAM kvantisoidulle päättelylle; mitoitamme tarkan laitteiston käyttötapauksen mukaan.