AI & Agenti · dal video
NVIDIA Nemotron-3.5-Rerank-8B-BF16: Il Reranker Multimodale
NVIDIA presenta Nemotron-3.5-Rerank-8B-BF16, un modello di reranking multilingue e multimodale per migliorare la precisione dei sistemi RAG.
Di Manu · Pubblicato il
Introduzione al Nemotron-3.5-Rerank-8B-BF16
Il modello Nemotron-3.5-Rerank-8B-BF16 di NVIDIA è una soluzione all'avanguardia per il reranking, progettata per migliorare l'accuratezza del recupero in sistemi di risposta a domande multilingue e multimodali. Questo modello è ottimizzato per generare un logit che rappresenta la rilevanza di un documento rispetto a una query testuale.
Una delle sue caratteristiche distintive è la capacità di gestire documenti che possono contenere testo, immagini di pagine o entrambi, inclusi grafici, tabelle e infografiche. Questa versatilità lo rende particolarmente adatto per l'integrazione in pipeline RAG (Retrieval Augmented Generation) di visione, sia classiche che basate su agenti.
Per quanto riguarda il recupero testuale, il modello è stato valutato su 34 lingue, tra cui italiano, inglese, arabo, cinese e molte altre. Per il recupero di immagini, la valutazione ha coperto 18 lingue. È importante notare che il modello potrebbe supportare lingue aggiuntive oltre a quelle utilizzate nei set di valutazione.
Il Nemotron-3.5-Rerank-8B-BF16 è disponibile per uso commerciale e non commerciale, con la sua licenza regolata dall'accordo OpenMDW License Agreement, versione 1.1. Il modello base, Ministral-3-8B-Instruct-2512-BF16, è invece sotto licenza Apache License, Versione 2.0.
Cos'è un Reranker e Perché è Importante
Un reranker, come il modello Nemotron-3.5-Rerank-8B-BF16 di NVIDIA, è un componente cruciale nei sistemi di recupero informazioni, specialmente in quelli multimodali come le pipeline RAG (Retrieval Augmented Generation) basate sulla visione. La sua funzione principale è quella di affinare i risultati iniziali ottenuti da un modello di embedding multimodale, che restituisce un insieme di documenti potenzialmente rilevanti in risposta a una query.
Dopo che il modello di embedding ha identificato un primo set di candidati, il reranker interviene per valutare questi documenti in modo più approfondito. Analizza la loro pertinenza rispetto alla query originale, riordinandoli per produrre una classifica finale più accurata. Questo processo di riordinamento è fondamentale perché migliora la precisione dei documenti recuperati, portando a risposte più pertinenti e accurate nei sistemi a valle.
Caratteristiche e Capacità Multimodali
Il modello Nemotron-3.5-Rerank-8B-BF16 di NVIDIA è un reranker di livello mondiale, ottimizzato per produrre un logit che rappresenta la rilevanza di un documento rispetto a una query testuale. È in grado di gestire documenti che contengono testo, immagini di pagina o entrambi, inclusi grafici, tabelle e infografiche. Questa capacità multimodale lo rende ideale per l'integrazione in pipeline RAG (Retrieval Augmented Generation) di visione, sia classiche che agentiche.
Per il recupero testuale, il modello è stato valutato su 34 lingue, tra cui italiano, inglese, arabo, cinese e giapponese. Per il recupero di immagini, è stato valutato su 18 lingue, come inglese, arabo, cinese e giapponese. Il modello potrebbe supportare lingue aggiuntive oltre a questi set di valutazione. La sua architettura include un encoder di visione basato su Pixtral e una torre di modello linguistico bidirezionale Ministral3.
Il modello è stato sviluppato da NVIDIA per il recupero di risposte a domande multilingue e multimodali. È rilasciato con licenza OpenMDW 1.1 e può essere utilizzato per scopi commerciali e non commerciali. La sua base è il modello Ministral-3-8B-Instruct-2512-BF16, che è sotto licenza Apache 2.0.
Fonte: NVIDIA Nemotron-3.5-Rerank-8B-BF16 — Pagina del modello su Hugging Face
Supporto Multilingue Esteso
Il modello Nemotron-3.5-Rerank-8B-BF16 di NVIDIA si distingue per il suo ampio supporto multilingue, particolarmente evidente nel recupero testuale e di immagini. Per il recupero di testo, il modello è stato valutato su 34 lingue, tra cui l'italiano, l'inglese, l'arabo, l'assamese, il bengalese, il bulgaro, il cinese, il danese, l'olandese, il finlandese, il francese, il tedesco, l'hindi, l'hinglish, l'indonesiano, il giapponese, il coreano, il malese, il marathi, il nepalese, il norvegese, il persiano, il portoghese, il rumeno, il russo, lo spagnolo, lo swahili, lo svedese, il tamil, il telugu, il tailandese, l'ucraino, l'urdu e il vietnamita.
Per quanto riguarda il recupero di immagini, il modello è stato testato su 18 lingue, che includono l'arabo, il bengalese, il cinese, l'inglese, il persiano, il finlandese, il francese, il tedesco, l'hindi, l'indonesiano, il giapponese, il coreano, il russo, lo spagnolo, lo swahili, il telugu, il tailandese e lo yoruba. È importante notare che il modello potrebbe supportare lingue aggiuntive oltre a questi set di valutazione.
Architettura e Base del Modello
Il modello Nemotron-3.5-Rerank-8B-BF16 di NVIDIA si basa su un'architettura Transformer. Incorpora un encoder visivo basato su Pixtral e una torre di modello linguistico bidirezionale Ministral3.
Il processo di addestramento si è svolto in due fasi. Inizialmente, un checkpoint di reranker da 8 miliardi di parametri, derivato dal modello base Ministral-3-8B-Instruct-2512-BF16, è stato addestrato su un mix di dataset esclusivamente testuali. Successivamente, questo modello da 8 miliardi di parametri è stato ulteriormente sviluppato.
Fonte: Ministral-3-8B-Instruct-2512-BF16 — Modello base utilizzato per l'addestramento.
Licenza e Disponibilità
Il modello Nemotron-3.5-Rerank-8B-BF16 di NVIDIA è disponibile su Hugging Face ed è rilasciato sotto la licenza OpenMDW-1.1. Questa licenza ne consente l'uso sia per scopi commerciali che non commerciali. Il modello base, Ministral-3-8B-Instruct-2512-BF16, è invece coperto dalla licenza Apache 2.0.
Fonte: OpenMDW License Agreement, version 1.1
Fonte: Apache License, Version 2.0