Comparatif des serveurs MCP parfum : un benchmark de 40 questions

Résultats

Bonnes réponses sur 40, latence par question et coût de chaque réponse en appels.

• ¹ Comprend 19 refus immédiats.
• ² Une passe supplémentaire sur les 19 questions sans réponse, espacées de 4 secondes après une pause de 60 secondes.
• ³ 34 sur 40 si un agent traduit ses noms de notes ukrainiens.

Par type de question

Ce qui revient

Mesuré sur les réponses et sur le tools/list de chaque serveur.

• ⁴ Notes principales à plat ; un outil distinct de profil olfactif renvoie tête, cœur et fond, mais il n’a pas été appelé.
• Les nombres de parfums sont ceux que chaque serveur annonce pour lui-même et n’ont pas été comptés de façon indépendante.

Non notés : clé ou connexion requise

Là où 10ML Perfume Finder est en tête

• Précision: 39 sur 40, le meilleur score, avec chaque question sur les parfums connus, les parfums de niche, les notes, les maisons et les autres langues traitée correctement.
• Vitesse: une médiane de 232 ms, environ trois fois plus rapide que le serveur suivant (ScentVerdict, 698 ms).
• Un appel par réponse: 1,00 appel par question, contre 1,85 à 2,60 pour les serveurs qui commencent par chercher.
• Structure: schémas de sortie sur les 15 outils ; une pyramide complète tête, cœur et fond dans 29 des 30 réponses de consultation, avec accords et famille dans les 30.
• Langues: les trois questions hors anglais réussies ; dix langues documentées.
• Pas de clé et pas de compte.

Là où les autres sont en tête

• Étendue: ScentRev annonce 126 000+ parfums (invérifiable, une connexion est requise), ScentVerdict 31 000+ et Perfume Picks 13 000+, contre 5 406 dans le 10ML Fragrance Index. Les questions ont été choisies pour qu’un index courant puisse y répondre : ce benchmark ne dit donc rien des parfums au-delà de ces 5 406. Sur une sélection de parfums rares, les index plus grands l’emporteraient.
• Extras: ScentVerdict renvoie les prix actuels de flacons entiers et un avis rédigé par parfum ; Perfume Picks renvoie les avis de port de la communauté et des alternatives sélectionnées avec un pourcentage de correspondance ; Parfum Bible ajoute des offres de détaillants américains.
• Profondeur des fiches: 4 925 des 5 406 entrées sont des fiches de base, sans tenue, sillage ni parfumeurs ; 481 sont des fiches éditoriales complètes.
• Poids de la liste d’outils: à 60,5 Ko, le tools/list de 10ML est le plus lourd du test (ScentVerdict 39,2 Ko pour 6 outils, Perfume Picks 6,6 Ko pour 8).
• La seule erreur: « similaire à Terre d’Hermès » a renvoyé des voisins plausibles aux notes communes (Swiss Arabian Vetiver and Orange, K by Dolce & Gabbana, Orto Parisi Terroni) qui ne figurent pas sur la liste fixe.

À quoi chaque serveur convient le mieux

10ML Perfume Finder

des réponses rapides et complètes en un seul appel, avec des pyramides complètes, une sortie structurée, dix langues et aucune clé.

ScentVerdict

le plus grand index parmi les serveurs notés (31 000+ annoncés), les prix actuels des flacons et un avis rédigé par parfum ; le plus rapide des autres serveurs, à 698 ms. Aucune des deux questions sur les parfums similaires n’a abouti.

Perfume Picks

13 000+ parfums, des avis de port de la communauté et des alternatives sélectionnées avec un pourcentage de correspondance. La limite documentée est de 60 appels par minute, mais à une requête par seconde il a commencé à refuser à partir de la question 22.

Parfum Bible

des parfums connus avec des pyramides complètes et étagées et des accords, plus des offres de détaillants américains. Il n’a pas d’outil pour les parfums similaires, les notes ou les maisons, et il lui faut environ 2,6 appels par réponse.

Parfica

trouve presque n’importe quel parfum, avec des pyramides étagées, des noms de notes en ukrainien et trois outils.

Méthode

• Date et lieu: mardi 20 octobre 2026, de 06 h 24 à 06 h 32 UTC, depuis une machine sur une connexion résidentielle en Asie du Sud-Est. La latence inclut le trajet jusqu’au point d’accès le plus proche de chaque serveur : un point de mesure, pas un chiffre mondial.
• Client: Node 25.9 avec un simple fetch, MCP Streamable HTTP, protocole 2025-06-18, une connexion par serveur, sans cache ni nouvelle tentative.
• Respect des serveurs: au plus une requête par seconde vers chaque serveur, 10ML compris. Par serveur : un initialize, un tools/list, une question d’échauffement non comptée, puis les 40 questions, une fois chacune. Aucune inscription, aucune clé, aucun identifiant d’aucune sorte.
• Questions: 40 questions fixes, écrites avant le test et non ajustées à un index : 20 parfums connus, 10 parfums de niche ou du Moyen-Orient, 3 questions sur des notes, 2 sur des parfums similaires, 2 sur des maisons et 3 questions en allemand, en français et en espagnol, transmises aux outils telles qu’écrites. Pour ces trois-là, 10ML a aussi reçu son argument locale documenté.
• Appels: chaque serveur a été utilisé comme un agent utiliserait ses propres outils : un appel de détail quand le serveur accepte des noms, une recherche puis un appel de détail quand il exige un identifiant. Quand un serveur n’a pas d’outil pour un type de question, son outil de recherche a été utilisé.
• Notation: une consultation est juste si la réponse contient le nom du parfum, la maison et au moins 2 des notes principales du parfum. Une question sur une note est juste avec au moins 4 entrées qui citent la note, ou 2 parfums connus d’une liste fixe ; les questions sur des parfums similaires et sur des maisons exigent respectivement 1 et 3 parfums de listes fixes. La notation des parfums similaires est la partie la plus fragile : n vaut 2, et des listes ne peuvent pas contenir toutes les réponses défendables.
• Statistiques: la latence est mesurée par question, comme la somme de ses appels, sur les 40 questions ; médiane et 95e centile selon la méthode du rang le plus proche.
• Modifications signalées après la première passe: deux erreurs de notation ont été corrigées pour chaque serveur et toutes les réponses enregistrées ont été renotées (accents échappés dans le JSON ; questions sur des notes d’abord notées seulement sur une liste fixe de parfums). Les résultats de la première passe étaient 10ML 37, ScentVerdict 32, Parfum Bible 33, Perfume Picks 18 et Parfica 2. Parfica a été exécuté deux fois, la seconde avec une nouvelle recherche sur le seul nom ; c’est cette passe qui est rapportée.
• Limites: une passe depuis un seul lieu ; n vaut 40, un écart d’une question est donc dans le bruit. La sélection est volontairement orientée vers les parfums courants. Chaque serveur a été interrogé par un simple script, pas par un modèle de langage ; un modèle qui reformule ou traduit améliorerait Parfica et Perfume Picks et réduirait l’avantage du seul appel de 10ML.

Relancé chaque mois.

Données : CSV · JSON (CC BY 4.0)

Questions