Definicja (kanoniczna)
Confidence Score to syntetyczny wskaźnik poziomu pewności decyzyjnej, jaki system autonomiczny przypisuje danej ofercie na podstawie jakości, spójności i wiarygodności dostępnych danych. Confidence score nie mierzy „atrakcyjności” hotelu, lecz ryzyko rekomendacji związane z jego wyborem.
Rola w architekturze
Confidence score pełni funkcję filtra decyzyjnego w systemach autonomicznych agentów.
Jest wykorzystywany w momencie, gdy:
-
kilka ofert zostało uznanych za porównywalne semantycznie,
-
różnice funkcjonalne są niewielkie,
-
agent musi wybrać jedną rekomendację.
W takiej sytuacji system preferuje ofertę, dla której poziom niepewności decyzyjnej jest najniższy.
Z czego budowany jest confidence score
Confidence score powstaje na podstawie m.in.:
-
spójności danych wewnętrznych (Truth Source),
-
zgodności semantycznej treści z zapytaniem (embeddingi),
-
powtarzalności i wiarygodności potwierdzeń zewnętrznych (opinie, źródła),
-
aktualności informacji (ceny, dostępność, warunki),
-
braku sprzeczności między różnymi fragmentami treści i kanałami.
Nie jest to pojedyncza metryka, lecz wynik agregacji wielu sygnałów zaufania.
Relacja do innych pojęć
Confidence score jest bezpośrednio powiązany z:
-
Embeddingami – określają, czy oferta w ogóle trafia do porównania,
-
Chunkingiem – wpływa na spójność interpretacji danych,
-
Bot-First Content – warunkuje jednoznaczność sygnałów,
-
Truth Source – zapewnia stabilność i kanoniczność danych.