Questa categoria comprende il software in esecuzione sulle macchine utilizzate nelle nostre recensioni per utenti finali, con particolare attenzione agli strumenti LLM locali: applicazioni desktop e runtime come Jan, LM Studio e Ollama, che scaricano un modello open-weight e lo eseguono tramite la GPU di un laptop o di una workstation. Ogni test pratico prevede l'installazione dello strumento da zero sull'hardware di laboratorio, il download del modello, l'offload della GPU e la configurazione delle impostazioni più importanti, oltre alla misurazione del throughput di decodifica per consentire il confronto dei risultati tra i diversi strumenti sullo stesso sistema. La categoria include anche le utility per unità disco e le guide per homelab che abbiamo pubblicato nel corso degli anni, da Samsung Magician e il toolkit Solidigm Synergy alle build di Proxmox e pfSense.
Se stai scegliendo uno strumento, inizia dalla nostra classifica dei migliori strumenti LLM locali , che elenca runtime, applicazioni desktop e framework per agenti e fornisce i link a ciascuna guida pratica non appena viene pubblicata. Per quanto riguarda l'hardware, le pagine "Migliori laptop per IA locale" e "Migliori desktop per IA locale" classificano i sistemi in base alle prestazioni misurate del modello, mentre la nostra guida al dimensionamento dell'hardware per l'IA agentiva illustra la quantità di VRAM, RAM e spazio di archiviazione necessari per un determinato modello prima dell'acquisto.