Mean Reciprocal Rank - Cronologia

Alesaccoia il 16:58, 16 dic 2024

2024-12-16T16:58:13Z

@@ Riga 1: / Riga 1: @@
 La Classificazione Media Reciproca (Mean Reciprocal Rank o MRR) è una misura statistica utilizzata nella valutazione dei sistemi di recupero delle informazioni e dei motori di ricerca. Calcola il reciproco del rango della prima risposta corretta, mediato su tutte le query.
 == Formula ==
 La formula del MRR è:

Alesaccoia: /* Processo di calcolo */

2024-12-10T16:26:37Z

Processo di calcolo

← Versione meno recente		Versione delle 16:26, 10 dic 2024
Riga 27:		Riga 27:

	== Benchmarking dei modelli di [[Embeddings\|embedding]] ==		== Benchmarking dei modelli di [[Embeddings\|embedding]] ==

	~~=== Dataset e preparazione ===~~
	Si parte da un dataset contenente coppie di query e documenti rilevanti (ground truth). Questo dataset serve come riferimento per valutare l'accuratezza del sistema.		Si parte da un dataset contenente coppie di query e documenti rilevanti (ground truth). Questo dataset serve come riferimento per valutare l'accuratezza del sistema.

	=== Processo di calcolo ===		=== Processo di calcolo ===
	# Per ogni query nel dataset di test:		Per ogni query nel dataset di test:
	#* Si ~~utilizzano i modelli~~ di embedding per recuperare i k documenti più rilevanti		* Si utilizza il modelle di embedding per recuperare i k documenti più rilevanti
	#* Si identifica la posizione (rank) del primo documento corretto nella lista dei risultati		* Si identifica la posizione (rank) del primo documento corretto nella lista dei risultati
	#* Si calcola il reciproco di questa posizione (1/rank)		* Si calcola il reciproco di questa posizione (1/rank)
	#* Se il documento corretto non appare tra i primi k risultati, si assegna un punteggio di 0		* Se il documento corretto non appare tra i primi k risultati, si assegna un punteggio di 0

	=== Interpretazione ===		=== Interpretazione ===

Alesaccoia il 16:26, 10 dic 2024

2024-12-10T16:26:00Z

@@ Riga 11: / Riga 11: @@
 == Esempio ==
-Se per tre query diverse, la prima risposta corretta appare rispettivamente in posizione 1, 2 e 4, il MRR sarà:
+Se per tre query diverse, la prima risposta corretta appare rispettivamente in posizione 1, 2 e 4:
 <math>MRR = \frac{1}{3} (1 + \frac{1}{2} + \frac{1}{4}) = 0.583</math>
-Ecco il testo corretto in sintassi MediaWiki:
+== Benchmarking dei modelli di [[Embeddings|embedding]] ==
 === Dataset e preparazione ===
@@ Riga 45: / Riga 42: @@
 * Valori più vicini a 1.0 indicano migliore performance del sistema
 * Il punteggio tiene conto solo della prima risposta corretta per ogni query
 [[Categoria:Concetto]]
 [[Categoria:Metrica]]

Alesaccoia il 16:23, 10 dic 2024

2024-12-10T16:23:39Z

@@ Riga 14: / Riga 14: @@
 <math>MRR = \frac{1}{3} (1 + \frac{1}{2} + \frac{1}{4}) = 0.583</math>
 [[Categoria:Concetto]]
 [[Categoria:Metrica]]

Alesaccoia il 16:04, 10 dic 2024

2024-12-10T16:04:25Z

← Versione meno recente		Versione delle 16:04, 10 dic 2024
Riga 2:		Riga 2:
	== Formula ==		== Formula ==
	La formula del MRR è:		La formula del MRR è:

	<math>MRR = \frac{1}{\|Q\|} \sum_{i=1}^{\|Q\|} \frac{1}{rank_i}</math>		<math>MRR = \frac{1}{\|Q\|} \sum_{i=1}^{\|Q\|} \frac{1}{rank_i}</math>

	Dove:		Dove:

	\|Q\| è il numero totale di query		* \|Q\| è il numero totale di query
	rank<sub>i</sub> è la posizione della prima risposta corretta per la query i-esima		* rank<sub>i</sub> è la posizione della prima risposta corretta per la query i-esima

	== Esempio ==		== Esempio ==
	Se per tre query diverse, la prima risposta corretta appare rispettivamente in posizione 1, 2 e 4, il MRR sarà:		Se per tre query diverse, la prima risposta corretta appare rispettivamente in posizione 1, 2 e 4, il MRR sarà:

	<math>MRR = \frac{1}{3} (1 + \frac{1}{2} + \frac{1}{4}) = 0.583</math>		<math>MRR = \frac{1}{3} (1 + \frac{1}{2} + \frac{1}{4}) = 0.583</math>
			[[Categoria:Concetto]]
			[[Categoria:Metrica]]

Alesaccoia: Creata pagina con "La Classificazione Media Reciproca (Mean Reciprocal Rank o MRR) è una misura statistica utilizzata nella valutazione dei sistemi di recupero delle informazioni e dei motori di ricerca. Calcola il reciproco del rango della prima risposta corretta, mediato su tutte le query. == Formula == La formula del MRR è: $MRR = \frac{1}{|Q|} \sum_{i=1}^{|Q|} \frac{1}{rank_i}$ Dove: |Q| è il numero totale di query rank_i è la posizione della prima risposta co..."

2024-12-10T16:03:31Z

Creata pagina con "La Classificazione Media Reciproca (Mean Reciprocal Rank o MRR) è una misura statistica utilizzata nella valutazione dei sistemi di recupero delle informazioni e dei motori di ricerca. Calcola il reciproco del rango della prima risposta corretta, mediato su tutte le query. == Formula == La formula del MRR è: <math>MRR = \frac{1}{|Q|} \sum_{i=1}^{|Q|} \frac{1}{rank_i}</math> Dove: |Q| è il numero totale di query rank<sub>i</sub> è la posizione della prima risposta co..."

Nuova pagina

La Classificazione Media Reciproca (Mean Reciprocal Rank o MRR) è una misura statistica utilizzata nella valutazione dei sistemi di recupero delle informazioni e dei motori di ricerca. Calcola il reciproco del rango della prima risposta corretta, mediato su tutte le query.
== Formula ==
La formula del MRR è:
<math>MRR = \frac{1}{|Q|} \sum_{i=1}^{|Q|} \frac{1}{rank_i}</math>
Dove:

|Q| è il numero totale di query
rank<sub>i</sub> è la posizione della prima risposta corretta per la query i-esima

== Esempio ==
Se per tre query diverse, la prima risposta corretta appare rispettivamente in posizione 1, 2 e 4, il MRR sarà:
<math>MRR = \frac{1}{3} (1 + \frac{1}{2} + \frac{1}{4}) = 0.583</math>