Gli LLM open source hanno democratizzato l'accesso a modelli linguistici capaci che possono essere eseguiti su infrastrutture private senza commissioni API o condivisione di dati. Llama 3 e Gemma 2 di Meta e Google hanno stabilito nuovi parametri di riferimento per le capacità open-weight. Ollama rende l'esecuzione locale di questi modelli semplice quanto un singolo comando, mentre Together AI e Groq forniscono inferenza cloud per i team che necessitano di modelli aperti su larga scala. Hugging Face ospita l'ecosistema dei modelli open source, e vLLM fornisce il motore di servizio ad alta produttività che alimenta molte implementazioni.
1
4.9
2
4.8
3
4.8
4
4.8
5
4.7
6
4.7
7
4.6
8
4.5
9
4.5
10
4.4
11
4.3
12
4.0