RAPPORT DE RELEASE · CORE 0.8.5

Mesures
de la version 0.8.5.

Résultats validés pour cette release, avec le commit, le modèle, le corpus, l’hôte et les répétitions consignés dans le rapport.

RAPPORT · 20261005T205045.374829070Z

Que retrouve MIRA,
et en combien de temps ?

Les scores décrivent la qualité du rappel sur un petit corpus contrôlé. Les temps montrent chaque étape sur plusieurs tailles de jeu.

Run
5 octobre 202620261005T205045.374829070Z
Core & stockage
0.8.5 · sqlite 3.53.3Go go1.27.1
Machine
elite · AMD Ryzen 5 7535U with Radeon Graphicslinux amd64
Corpus
mira-synthetic v1.0.020 souvenirs · 6 requêtes
Modèle
sentence-transformers/all-MiniLM-L6-v2révision c21050a7ef692090620a6d037dd736908f9c7cf6

Protocole : 2 échauffements · 5 répétitions · concurrence 1. SHA-256 modèle d3ca8e9a40bf6d71b224b46079c23688e84bb770201d8006892db5835f558f4a.

01 / QUALITÉ DU RAPPEL

Les souvenirs utiles remontent-ils ?

6 requêtes évaluées · 0 échec · 20 souvenirs · 8 jugements. Un score de 1 correspond au meilleur résultat possible sur ce jeu.

Recall@5Recall@5Part des souvenirs jugés pertinents (grade ≥ 1) retrouvés dans les 5 premiers résultats. Le score est calculé par requête et répétition, puis moyenné sur les évaluations réussies.
100.0%score 1.000

Souvenirs pertinents dans les 5 premiers résultats.

Recall@10Recall@10Part des souvenirs jugés pertinents (grade ≥ 1) retrouvés dans les 10 premiers résultats. Le score est calculé par requête et répétition, puis moyenné sur les évaluations réussies.
100.0%score 1.000

Souvenirs pertinents dans les 10 premiers résultats.

Recall@20Recall@20Part des souvenirs jugés pertinents (grade ≥ 1) retrouvés dans les 20 premiers résultats. Le score est calculé par requête et répétition, puis moyenné sur les évaluations réussies.
100.0%score 1.000

Souvenirs pertinents dans les 20 premiers résultats.

MRRMRRRang du premier résultat pertinent converti en 1/rang (1 au premier rang, 0 si aucun résultat pertinent), puis moyenné sur les requêtes et répétitions.
0.750

Rang moyen du premier souvenir pertinent.

nDCG@10nDCG@10Mesure le classement des 10 premiers résultats en tenant compte du degré de pertinence : les grades 0, 1 et 2 valent des gains 0, 1 et 3, diminués selon le rang. Le score est normalisé par le classement idéal, puis moyenné.
0.782

Qualité de l’ordre des 10 premiers résultats.

Test synthétique fixe · graine 42 · SHA-256 du corpus 2202fb02f9154531a811e227773bba5df328b7203700adbb9d7688f795c2d396. Il vérifie le comportement et les régressions ; il ne mesure pas la qualité générale des réponses d’un agent.

02 / TEMPS DE RÉCUPÉRATION

Combien de temps prend chaque étape ?

p50 est la médiane du run. p95 indique le temps sous lequel se trouvent 95 % des mesures. Les deux chiffres décrivent ce run, pas une garantie de délai.

100 souvenirs

jeu de mesure
Étape mesuréep50 / mesurep95 · ≥ 5 mesures
Préparer le jeu SQLitePréparer le jeu SQLiteTemps pour créer et remplir le jeu SQLite isolé de 100 mémoires, avec leurs empreintes et vecteurs. La recherche n'est pas incluse.1 mesure28.075 ms · observation unique— non estimé
Construire l’index HNSWConstruire l’index HNSWTemps pour reconstruire l'index HNSW à partir des 100 vecteurs déjà stockés dans le jeu SQLite.5 mesures14.937 ms15.622 ms
Recherche avec HNSWRecherche avec HNSWTemps d'une recherche des 10 voisins dans l'index HNSW déjà construit, avec le vecteur de requête fixe du protocole. Les échauffements sont exécutés avant les échantillons mesurés.5 mesures0.508 ms0.815 ms
Recherche SQL de secoursRecherche SQL de secoursTemps d'une recherche vectorielle SQL de repli dans le jeu SQLite de 100 mémoires, avec le vecteur fixe et une limite de 10 résultats. Cette mesure n'utilise pas l'index HNSW.5 mesures1.807 ms2.272 ms
Ingérer les souvenirs via MIRAIngérer les souvenirs via MIRATemps d'ingestion de 100 mémoires de test via l'API MIRA Store, dont leur traitement et leur enregistrement. Cette préparation est séparée des mesures de rappel.1 mesure3085.996 ms · observation unique— non estimé
Construire l’index de MIRAConstruire l’index de MIRATemps pour reconstruire l'index HNSW de l'application MIRA après l'ingestion des 100 mémoires.5 mesures40.413 ms41.105 ms
Rappel complet via MIRARappel complet via MIRATemps du rappel complet via l'API MIRA Recall sur le jeu SQLite de 100 mémoires, avec la requête fixe et le modèle déjà préparé. Il couvre le pipeline de rappel, pas seulement la recherche vectorielle.5 mesures15.258 ms16.615 ms

1 000 souvenirs

jeu de mesure
Étape mesuréep50 / mesurep95 · ≥ 5 mesures
Préparer le jeu SQLitePréparer le jeu SQLiteTemps pour créer et remplir le jeu SQLite isolé de 1 000 mémoires, avec leurs empreintes et vecteurs. La recherche n'est pas incluse.1 mesure179.140 ms · observation unique— non estimé
Construire l’index HNSWConstruire l’index HNSWTemps pour reconstruire l'index HNSW à partir des 1 000 vecteurs déjà stockés dans le jeu SQLite.5 mesures246.555 ms257.101 ms
Recherche avec HNSWRecherche avec HNSWTemps d'une recherche des 10 voisins dans l'index HNSW déjà construit, avec le vecteur de requête fixe du protocole. Les échauffements sont exécutés avant les échantillons mesurés.5 mesures0.492 ms0.506 ms
Recherche SQL de secoursRecherche SQL de secoursTemps d'une recherche vectorielle SQL de repli dans le jeu SQLite de 1 000 mémoires, avec le vecteur fixe et une limite de 10 résultats. Cette mesure n'utilise pas l'index HNSW.5 mesures2.024 ms2.729 ms
Ingérer les souvenirs via MIRAIngérer les souvenirs via MIRATemps d'ingestion de 1 000 mémoires de test via l'API MIRA Store, dont leur traitement et leur enregistrement. Cette préparation est séparée des mesures de rappel.1 mesure33498.846 ms · observation unique— non estimé
Construire l’index de MIRAConstruire l’index de MIRATemps pour reconstruire l'index HNSW de l'application MIRA après l'ingestion des 1 000 mémoires.5 mesures841.853 ms884.744 ms
Rappel complet via MIRARappel complet via MIRATemps du rappel complet via l'API MIRA Recall sur le jeu SQLite de 1 000 mémoires, avec la requête fixe et le modèle déjà préparé. Il couvre le pipeline de rappel, pas seulement la recherche vectorielle.5 mesures41.861 ms43.087 ms

10 000 souvenirs

jeu de mesure
Étape mesuréep50 / mesurep95 · ≥ 5 mesures
Préparer le jeu SQLitePréparer le jeu SQLiteTemps pour créer et remplir le jeu SQLite isolé de 10 000 mémoires, avec leurs empreintes et vecteurs. La recherche n'est pas incluse.1 mesure1728.161 ms · observation unique— non estimé
Construire l’index HNSWConstruire l’index HNSWTemps pour reconstruire l'index HNSW à partir des 10 000 vecteurs déjà stockés dans le jeu SQLite.5 mesures3253.840 ms3433.678 ms
Recherche avec HNSWRecherche avec HNSWTemps d'une recherche des 10 voisins dans l'index HNSW déjà construit, avec le vecteur de requête fixe du protocole. Les échauffements sont exécutés avant les échantillons mesurés.5 mesures0.643 ms0.719 ms
Recherche SQL de secoursRecherche SQL de secoursTemps d'une recherche vectorielle SQL de repli dans le jeu SQLite de 10 000 mémoires, avec le vecteur fixe et une limite de 10 résultats. Cette mesure n'utilise pas l'index HNSW.5 mesures1.951 ms2.147 ms
Ingérer les souvenirs via MIRAIngérer les souvenirs via MIRATemps d'ingestion de 10 000 mémoires de test via l'API MIRA Store, dont leur traitement et leur enregistrement. Cette préparation est séparée des mesures de rappel.1 mesure789330.613 ms · observation unique— non estimé
Construire l’index de MIRAConstruire l’index de MIRATemps pour reconstruire l'index HNSW de l'application MIRA après l'ingestion des 10 000 mémoires.5 mesures9950.789 ms10076.729 ms
Rappel complet via MIRARappel complet via MIRATemps du rappel complet via l'API MIRA Recall sur le jeu SQLite de 10 000 mémoires, avec la requête fixe et le modèle déjà préparé. Il couvre le pipeline de rappel, pas seulement la recherche vectorielle.5 mesures76.874 ms77.185 ms

Rappel complet PostgreSQLRappel complet PostgreSQLLe rappel complet avec PostgreSQL et pgvector n'est pas mesuré par le protocole v1. Cette ligne signale cette absence; elle ne contient pas de latence PostgreSQL.Non mesuréPostgreSQL and pgvector are not exercised by benchmark v1; this run uses SQLite only

Les tailles d’essai sont relevées sur SQLite. Les préparations sont affichées comme observations uniques. Les reconstructions HNSW, recherches HNSW, replis SQL et rappels complets via MIRA reposent sur des mesures répétées ; le rapport brut conserve tous les échantillons et percentiles.

Rapport source : empreinte SHA-256 déclarée à l’export e161ccc5ed235f8d3d34b9a63fb4369513e3224dbc1c9d19089f49cc41ab4331 · commit MIRA 5191b7ef26fae34e8e87d391a494f9f1e0692bd2 · 5 répétitions prévues · ouvrir le rapport brut. Le site vérifie le snapshot et le format de l’empreinte ; il ne télécharge pas le rapport brut pour recalculer cette empreinte.