Misura
Quanto è affidabile la ricerca
Un sito che chiede conto alle istituzioni deve poter essere messo alla prova. Questa pagina contiene le domande con cui la ricerca viene valutata, scritte in linguaggio comune, e l'articolo che dovrebbe trovare. La misura è pubblica anche quando è brutta.
- 59domande nel corpus
- 49devono trovare un articolo
- 10devono restare senza risposta
Il riconoscimento dell'argomento
L'argomento di una domanda lo riconosce una tabella di pesi ricalcolata ogni notte da 624 frasi d'esempio scritte a mano (doc 32 del progetto). Per misurarla onestamente, ogni frase viene giudicata da una tabella calcolata senza quella frase: è una prova su domande mai viste, anche se scritte dalla stessa mano.
- 71%argomento giusto al primo posto
- 87%giusto fra i primi tre
- 78%domande su cui si dice sicuro
- 81%giuste, quando è sicuro
Tabella n. 36 del 22 ottobre 2026. Prima di questa tabella il sito riconosceva l'argomento cercando parole scritte a mano: sulle stesse frasi, 53% al primo posto e nessun argomento per 174 frasi su 559. Il sito rifà i conti della tabella in un altro linguaggio: sulle 62 frasi di prova i risultati coincidono tutti.
Vocabolario che impara: acceso — parole approvate 0, in attesa di decisione 0. Come funziona e cosa conserva: privacy, punto 4.
Come si legge
Recall a N è la percentuale di domande in cui l'articolo atteso compare entro i primi N risultati. Non misura se la risposta è giusta — quella la dà il testo di legge — ma se la ricerca porta la persona davanti al documento corretto. È il minimo indispensabile perché tutto il resto abbia senso.
Le domande del secondo gruppo servono all'opposto: sono cose che il sito non sa — normativa regionale, giurisprudenza, calcoli individuali, consigli sul caso concreto. Un sistema onesto deve riconoscerle e dirlo, invece di restituire il risultato meno peggio. Il punteggio più alto ottenuto su queste domande dice dove andrebbe messa la soglia sotto la quale rispondere «non lo so».
- Recall a 5
- 100.0%
- Recall a 1
- 44.9%
- Recall a 3
- 85.7%
- Recall a 10
- 100.0%
- Domande valutate
- 49
- Eseguita il
- 22 ottobre 2026
L'esecuzione interroga la ricerca 59 volte e richiede qualche decina di secondi su questo server. Il risultato viene registrato con la sua data.