Prompt pronti
Notizie IA

Come installare LM Studio e avviare il primo modello locale

Pubblicazione originale: · Sergey Zhadov

Questo è un articolo d’archivio tradotto. Data e prezzi si riferiscono alla pubblicazione originale, non a un nuovo annuncio di oggi.

LM Studio permette di scaricare un modello linguistico, caricarlo in memoria e usarlo in una normale finestra di chat. Per la prima conversazione non serve il terminale. I miracoli però non esistono: un modello grande divora RAM, memoria video e disco. Controlla il computer, scegli una variante quantizzata compatta e fai una prova breve prima dei mostri.

Avvio di un modello linguistico locale tramite l'interfaccia grafica di LM Studio
L'interfaccia evita i comandi, ma non cancella memoria, dimensione del modello e buon senso.

Che cosa fa LM Studio senza comandi

L'app riunisce ricerca, download, caricamento in memoria, chat e API locale in una finestra. Per iniziare è più facile che gestire a mano file, parametri e comandi. Mostra anche varianti e stato del download.

LM Studio non è una singola rete neurale. È interfaccia e ambiente di esecuzione. La qualità dipende da modello, quantizzazione, contesto, prompt di sistema e computer. Una finestra elegante non trasforma un modello debole in un genio.

Controlla se il computer regge

I requisiti ufficiali consigliano 16 GB di RAM. Su Windows x64 serve una CPU con AVX2 e sono consigliati 4 GB di VRAM dedicata. Su Mac sono supportati Apple Silicon e macOS 14 o successivo, non i Mac Intel.

Il fatto che l'app si installi non significa che ogni modello funzioni. I file occupano gigabyte e richiedono memoria quando vengono caricati. Lascia margine al sistema. Se parte lo swap, le ventole urlano e ogni parola arriva da sola, il computer ti sta dicendo di piantarla con questa merda.

Match model size to memory, graphics memory and storage
Match model size to memory, graphics memory and storage

Scegli il primo modello senza fare il fenomeno

In Discover cerca un modello instruct, preparato per dialogo e istruzioni. La ricerca funziona per nome e accetta anche link a modelli. Lo stesso modello offre spesso file quantizzati indicati con sigle come Q4 o Q8.

La quantizzazione riduce dimensione e memoria sacrificando un po' di precisione. Per iniziare è sensata una variante a 4 bit o migliore che entri nella memoria disponibile. Non scaricare il file più grasso solo perché il numero fa scena. È roba da asilo.

Carica il modello in memoria

Dopo il download vai in Chat, apri il selettore e scegli il file. L'app riserva memoria per pesi e parametri. Se non basta, il caricamento fallisce oppure tutto il computer diventa dolorosamente lento.

Non portare contesto e impostazioni avanzate al massimo alla prima prova. Usa valori ragionevoli, misura la velocità e cambia un parametro alla volta. Altrimenti ottieni una presentazione a scatti e non sai quale dannata manopola l'ha causata.

Choose a useful balance between model size and fidelity
Choose a useful balance between model size and fidelity

Prova il modello con una chat breve

Crea una chat e fai una domanda concreta con risposta verificabile. Poi chiedi una revisione o un formato diverso. Vedrai se il modello segue le istruzioni, mantiene il contesto e risponde abbastanza in fretta sul tuo hardware.

Non partire da documenti riservati e non giudicare da una sola bella risposta. Prova riassunto, struttura, piccolo codice o classificazione. L'esecuzione locale è utile, ma il modello può ancora sparare spazzatura con grande sicurezza.

Capisci che cosa funziona davvero offline

Dopo aver scaricato modello e runtime, chat locale, documenti e server locale possono funzionare senza Internet. I dati della conversazione vengono elaborati sul dispositivo. È utile per test privati e connessioni schifose.

Ricerca e download di nuovi modelli, statistiche, runtime e aggiornamenti richiedono rete. Prepara l'offline in anticipo. Staccare Internet troppo presto e poi imprecare contro la ricerca vuota è un numero piuttosto idiota.

Protect the local API with a closed loop, token and firewall
Protect the local API with a closed loop, token and firewall

Avvia il server dopo aver provato la chat

Nella scheda Developer puoi avviare il server API con un interruttore e senza terminale. Per impostazione predefinita risponde su localhost:1234. La tua applicazione può chiamare il modello tramite REST ed endpoint compatibili.

Lascialo prima su localhost. L'API può essere senza autenticazione di default, ma puoi attivare un token. Prima dell'accesso in rete configura token, firewall e client consentiti. Una porta pubblica senza protezione non è coraggio, è un buco.

Conclusione: interfaccia facile, limiti uguali

LM Studio è un buon ingresso nei modelli locali senza riga di comando. L'ordine sensato è controllare l'hardware, scaricare un instruct adatto, caricarlo, fare una chat breve e solo dopo impostare server o contesto grande.

L'errore comune è credere che l'interfaccia elimini i limiti tecnici. Toglie lavoro, ma non aggiunge memoria. Abbina il modello al computer, tieni chiuso il server e non complicare il primo avvio. Così funziona senza inutili rotture di palle.

Traduzione verificata: