📁 Frameworks

La sezione Frameworks osserva il livello software che trasforma i modelli in sistemi operativi: orchestrazione, pipeline RAG, osservabilita, serving ed evaluation. Trovi aggiornamenti su LangChain, tooling vettoriale, runtime di inferenza e pattern di deployment realmente utili per iterare velocemente senza perdere stabilita. Gli articoli sono selezionati per aiutare scelte architetturali concrete, con collegamenti alla pillar frameworks, alla pillar LLM e ai trend.

KVBoost riusa la cache key-value a livello di chunk e riduce il time-to-first-token di 4,49 volte su Qwen2.5-3B, senza perdita di accuratezza. A differenza del prefix caching, non richiede un prefisso iniziale condiviso: un doppio hash separa identità posizionale e contenuto. Quantization asimmetrica int8/int4, riparazione dei confini e budget di memoria fisso lo rendono adatto al deployment self-hosted.

2026-08-25 Fonte

Uno studio su 190 settimane di casi in Ontario mostra che ARIMA reagisce rapidamente ai punti di svolta ma si degrada sugli orizzonti lunghi, mentre random forest e XGBoost offrono più stabilità. L'ensemble MLAMA, con pesi basati sulle prestazioni e variabili per orizzonte, ottiene il più basso errore percentuale medio assoluto normalizzato nella maggior parte degli orizzonti. La scelta del modello deve dipendere dalle condizioni operative.

2026-08-24 Fonte

PrimeAgentOrchestrator prepara nuove istanze di Claude Code con ricordi estratti da due backend separati: un database PostgreSQL entity-observation e un indice di ricerca semantica su Cloudflare Worker. Il progetto, documentato da dicembre 2025 a marzo 2026, mostra tre generazioni di meccanismi di contesto e un'architettura di fusione invece di un database unico. Un segnale per chi vuole memoria persistente senza vincolare i dati a un unico sistema.

2026-08-24 Fonte

La nuova release di llama.cpp, con sorgenti e build precompilate, segna una tappa per l'inference self-hosted. Meno attrito per sviluppatori e aziende che vogliono eseguire LLM in locale, più pressione sui servizi cloud-only.

2026-08-22 Fonte

DeepSeek ha aggiornato il proprio harness alla versione 0.1.1, integrando il modello multimodale DeepSeek-V4-Flash-Vision-Exp e il supporto a richieste native di immagini. Comandi come /goal e /plan accettano testo e immagini; MCP/ACP conservano allegati persistenti. Per chi valuta deployment self-hosted, il rilascio sposta l'attenzione su pipeline multimodali con stato.

2026-08-21 Fonte

Un framework ibrido combina segnali lessicali e semantiche SciBERT per identificare software e database nella letteratura biomedica. Addestrato con una pipeline che unisce estrazione citazionale e distillazione assistita da LLM, supera metodi specializzati e modelli generalisti come ChatGPT, Gemini, Grok e Claude. L'analisi su larga scala rivela preferenze di rivista per sotto-disciplina. Il risultato segnala un pattern: i modelli compatti e specializzati restano competitivi quando il dominio è specifico.

2026-08-21 Fonte

ATHENA, l'assistente virtuale della Society of Petroleum Engineers, ha migliorato produttività e uniformità delle prestazioni per 75 professionisti in compiti di pianificazione dei pozzi rispetto a una baseline RAG. La versione evoluta aggiunge recupero multi-documento, validazione delle risposte e divulgazione proattiva mirata. Ora è integrata nel Portale di Ricerca SPE.

2026-08-21 Fonte

La nuova release del linguaggio introduce metodi algebrici per il calcolo in virgola mobile che richiamano le ottimizzazioni aggressive dei compilatori C/C++. Per chi esegue modelli in locale, il nodo è il compromesso tra prestazioni e riproducibilità numerica.

2026-08-20 Fonte

Microsoft Research ha rilasciato Skala 1.1, funzionale exchange-correlation basato su deep learning. Addestrato su 2,5 volte più dati, riduce l'errore medio pesato a 2,8 kcal/mol su GMTKN55 mantenendo un costo da meta-GGA. L'integrazione nativa in CP2K e i lavori con Psi4, FHI-aims, ORCA e VASP portano il modello nei flussi locali. Un benchmark vivo monitorerà le prestazioni.

2026-08-20 Fonte

Un sistema multi-agente trasforma il processo regolatorio in un grafo aciclico diretto e porta la generazione di dataset clinici CDISC al 100% di corrispondenza strutturale, mentre i tentativi flat e single-agent restano a zero. Il confronto su CDISCPilot01 mostra che la topologia di processo, non la potenza del modello, fa la differenza.

2026-08-19 Fonte

Gli autori originali dei quantizzati GGUF di DFlash hanno pubblicato una seconda versione insieme a una pull request per llama.cpp. Il pacchetto copre Qwen 3.8 27B e Muse Glimmer, segnalando un'integrazione stretta tra ottimizzazioni di modello e runtime locale. Per chi esegue LLM in self-hosted, la co-pubblicazione riduce i tempi di adozione ma impone verifiche di compatibilità e qualità, soprattutto in contesti on-premise dove il controllo del software è parte del TCO.

2026-08-18 Fonte

Gli aggiornamenti Rust per il kernel Linux 7.3 includono le prime correzioni per usare il backend GCC al posto di LLVM nel compilatore rustc. È un passo verso toolchain alternative per build locali, architetture meno coperte e maggiore controllo della supply chain del software.

2026-08-18 Fonte

FPO propone un fine-tuning dei LLM che non propaga errori tra i layer e non costruisce grafi autograd. Il metodo riduce il picco di memoria e accelera il throughput, ma concentra l'adattamento nei layer finali. Per chi gestisce modelli self-hosted, il guadagno operativo è reale: va però verificato con una diagnosi rapida, altrimenti il vantaggio si trasforma in un vincolo architetturale.

2026-08-18 Fonte

Un nuovo paper sull'offloading LLVM verso GPU con Rust discute le prospettive di sfruttare la sicurezza della memoria nei kernel GPU. Rispetto a C++/CUDA/HIP, il modello di Rust può ridurre intere classi di bug critici. Per deploy self-hosted questo ha implicazioni su costo del debug e rischi di sicurezza, ma restano interrogativi su prestazioni e maturità dell'ecosistema.

2026-08-17 Fonte

Il progetto abbandona i numeri di build sequenziali e adotta il versioning semantico. Un cambiamento che pesa soprattutto nei contesti self-hosted e on-premise, dove la prevedibilità delle API e la stabilità delle pipeline di inference contano più delle novità di una singola release.

2026-08-17 Fonte

Il framework per LLM eterogenei KTransformers pubblica la versione 0.7 con supporto AVX-512 esteso, un intervento mirato sui server AMD EPYC. Per chi opera in self-hosted, il messaggio è strutturale: la CPU non è più un ripiego, ma una componente attiva per contenere il TCO e usare meglio l'hardware locale.

2026-08-17 Fonte

Un breve post di ringraziamento riporta l'attenzione su Georgi Gerganov, creatore di llama.cpp. Il progetto open source ha trasformato l'approccio all'esecuzione di Large Language Models su hardware comune, abbattendo barriere per deployment self-hosted e sovranità dei dati. Dietro la gratitudine c'è una lezione strutturale: il valore non nasce solo dai modelli, ma dagli strumenti di inference e dalla loro capacità di ridurre il costo complessivo.

2026-08-16 Fonte

KDE continua a lavorare su Plasma 6.8 e introduce la regolazione granulare della velocità di mouse e touchpad. Un ritocco che conferma la filosofia del desktop environment: controllo locale, riduzione dell'attrito e personalizzazione profonda. Per chi usa workstation Linux in contesti on-premise, anche l'ergonomia dell'interfaccia diventa parte dell'infrastruttura.

2026-08-15 Fonte

AMD rilascia Lemonade SDK 11.6, che integra il LLM Muse-Glimmer da 30 miliardi di parametri e un modulo sperimentale di generazione immagini basato su ROCm, chiamato TheNoise. L'aggiornamento rafforza lo stack open source per eseguire applicazioni AI locali su CPU, GPU e NPU, un segnale concreto per chi valuta deployment on-premise e vuole ridurre la dipendenza dai servizi cloud.

2026-08-14 Fonte