Adattatori LoRA, deletion tuning, modifiche ai pesi basate su energia e analisi PACT indicano aggiornamenti dei modelli senza retraining completo o pesi duplicati. L'approccio modulare riduce la duplicazione e offre agli utenti self-hosted un controllo più fine.
Un nuovo studio mostra che azzerare meno dello 0,05% dei pesi di un LLM pre-addestrato, senza altre modifiche, eguaglia il full fine-tuning in tre regimi post-training: reinforcement learning con reward verificabili, fine-tuning supervisionato e dist...
Un progetto open source mostra come trasferire una nuova competenza nei pesi di Qwen 3.5 0.8B attraverso un modello decisionale basato su energia. L'autore paragona il risultato a LoRA e indica un intervento di 3 millisecondi, senza oblio catastrofic...
La proposta di distribuire adattatori LoRA anziché intere copie di LLM modificati segnala un cambiamento epocale verso la modularità nell'ecosistema dell'intelligenza artificiale. Per le organizzazioni che gestiscono infrastrutture self-hosted, quest...
Una proposta su Reddit suggerisce di distribuire solo i LoRA di abliteration invece di intere versioni uncensored degli LLM, riducendo duplicazione e costi. Il punto tecnico: un adattatore vale per ogni modello della stessa architettura e per ogni qu...
NousResearch ha sottoposto Qwen3.8-27B di Alibaba a un post-training basato solo su supervised fine-tuning, senza RL né modifiche architetturali. Il modello risultante, Arete-27B, riduce le risposte con propaganda dal 22% allo 0,9% e migliora il fact...
PLatour mostra che parte dei guadagni nei sistemi PACT emerge anche con sender non informativi o addestrando solo il ricevitore. PACT-Check misura il contributo reale della comunicazione tra modelli. Per i deployment on-premise, la differenza tra tra...
Un framework open source smonta l'equivoco del PACT: passare rappresentazioni tra modelli può migliorare i benchmark senza che il modello più piccolo riceva informazione utile. PLatour introduce ponti addestrabili e PACT-Check, un metodo per separare...
