100% accuracy i nadal brak zgody na strojenie. Jak uczciwie kalibrować RAG?
RAG (Retrieval-Augmented Generation) obiecuje odpowiedzi oparte na źródłach. W praktyce mierzenie jakości tych odpowiedzi jest trudniejsze, niż sugerują dashboardy z zielonymi wskaźnikami. Nasz własny system kalibracji osiągnął 100% accuracy na zbiorze kontrolnym – i mimo to nie pozwolił na zmianę progów. Dlaczego? Bo accuracy bez…
