Vai al contenuto

Obsessive-1.7B arriva in GGUF da circa 1,1 GB: nel test live dell'autore trova 24 risposte corrette su 120. Citare non basta a verificare.

L’ANALISI

Obsessive-1.7B: citazioni vere, risposte da verificare

Obsessive-1.7B arriva in GGUF da circa 1,1 GB: nel test live dell'autore trova 24 risposte corrette su 120. Citare non basta a verificare.

4 min di letturaFatti, limiti e fonti primarie
Scheda Hugging Face di Obsessive-1.7B GGUF con descrizione del modello comunitario per ricerca e citazioni
La scheda pubblica di Obsessive-1.7B su Hugging Face presenta il GGUF e distingue benchmark interno, ricerca live e limitazioni.

In breve: Obsessive-1.7B è disponibile come GGUF comunitario da circa 1,1 GB per risposte fattuali supportate da passaggi e URL. Va valutato come componente da testare, non come ricercatore affidabile già dimostrato: nella prova live dichiarata dall'autore una citazione può essere autentica e sostenere comunque il fatto sbagliato o una domanda vicina. Obsessive-1.7B: scheda, benchmark e limiti alla revisione verificata.

Analisi della scheda, dell'inventario e della licenza pubblicati su Hugging Face, con revisione 65a0f463cd2e69f10bfcbbcd0fc81ac4a22d9eef. Il repository GGUF nasce il 7 novembre alle 11:49:50 ora italiana; l'ultima revisione verificata è delle 12:47:43. Il delta è il pacchetto quantizzato: queste date non stabiliscono la data originaria di lancio del modello base.

Che cosa si può scaricare e che cosa manca?

Il repository contiene Obsessive-1.7B-Q4_K_M.gguf, un file di 1.099.627.040 byte, oltre a esempi e configurazioni d'integrazione. La scheda lo descrive come fine-tuning di LiquidAI/LFM3-1.7B per chiamate di ricerca. Il file dei pesi non esegue da solo ricerche, navigazione o controlli: un harness deve offrirgli il tool e restituirgli i risultati. Tenere l'inferenza sul proprio computer non rende locale un servizio di ricerca esterno.

Obsessive-1.7B: scheda, benchmark e limiti alla revisione verificata · Inventario del GGUF e dei file d'integrazione.

Perché il test con ricerca fissa non basta?

L'autore descrive un test interno con 131 domande e risultati prestabiliti, comprese 29 domande la cui risposta è stata deliberatamente rimossa. Il risultato dichiarato di zero risposte inventate vale per quel disegno sperimentale, non per qualsiasi ricerca. La scheda precisa che non è il punteggio ufficiale SimpleQA. Senza replicare dati, istruzioni, tool e criteri non si può trasformare questa misura in una garanzia generale contro le allucinazioni.

Obsessive-1.7B: scheda, benchmark e limiti alla revisione verificata.

Che cosa emerge quando la ricerca è live?

Su altre 120 domande, il testo dell'autore riporta una risposta corretta da qualche parte nell'output in 24 casi, contro 37 del modello base. Le citazioni sono dichiarate copiate parola per parola, ma nel test con richieste multifatto compaiono tre valori non presenti nei risultati su 52. Sono misure differenti: non dividere questi numeri per lo stesso denominatore e non leggere il completamento di 40 richieste su 40 come accuratezza del 100%. La base produce più spesso testo vuoto, perciò anche il confronto richiede attenzione.

Obsessive-1.7B: scheda, benchmark e limiti alla revisione verificata.

Come controllare pertinenza, astensione e confine dei dati?

Preparare tre gruppi di domande in inglese: risposta presente, risposta assente e fonte che contiene un fatto simile ma non quello chiesto. Per ogni esecuzione conservare domanda, risultati restituiti dal tool, risposta, citazione e URL. Controllare separatamente se il passaggio esiste, se sostiene il valore e se risponde davvero alla domanda. Usare una conversazione nuova per ogni domanda, come richiesto dalla scheda, e dati non riservati. Il protocollo è proposto per una verifica futura, non presentato come prova eseguita.

Obsessive-1.7B: scheda, benchmark e limiti alla revisione verificata.

Si può chiamare open source o pronto per il lavoro?

La distribuzione usa LFM Open License v1.0 e dichiara restrizioni commerciali: pesi scaricabili non significa licenza senza condizioni. Prima di un uso aziendale va letto il testo applicabile, insieme alle condizioni del motore di ricerca scelto. La scheda ammette inoltre che il modello può trasformare una dichiarazione riportata da una fonte in un fatto, fermarsi troppo presto o citare un altro vincitore o anno. È materiale utile per disegnare test, non una base sufficiente per automatizzare decisioni importanti.

Obsessive-1.7B: scheda, benchmark e limiti alla revisione verificata · LFM Open License v1.0 applicata ai pesi.

Condizioni e limitazioni

Risultati dichiarati dall'autore, non replicati. Ricerca fissa e live hanno compiti e denominatori diversi. Inglese soltanto, una domanda per conversazione; modello e ricerca richiedono un harness. Nessun download dei pesi o test di inferenza svolto qui.

Checklist pratica

  • Fissare revisione, quantizzazione e licenza prima di scaricare o integrare il modello.
  • Separare inferenza locale e servizio di ricerca; non inviare dati riservati a provider non valutati.
  • Usare domande in inglese e una nuova conversazione per ciascuna.
  • Includere risposte assenti e fatti simili per misurare astensione e pertinenza.
  • Verificare citazione esatta, supporto del valore e corrispondenza alla domanda come controlli distinti.
  • Registrare errori e denominatori, senza trasformare benchmark interni in risultati indipendenti.

Fonti primarie

Radar AI · a cura di Francesco Gruner

Chiedi al sito.

Assistente OpenAI

Le domande vengono inviate a OpenAI. Non inserire dati personali o riservati. Privacy.

Verifica le risposte nelle fonti. 16 messaggi al giorno per rete.

Cosa cerchi? Ti indico le pagine utili.