Ostatnia aktualizacja: 2026-11-16
- Logi pokazują, gdzie wyszukiwanie się urywa: przy braku wyników, braku kliknięcia albo wyborze wyniku znajdującego się daleko na liście.
- Test zadaniowy pozwala ocenić, czy znaleziona instrukcja wystarczyła do poprawnego wykonania pracy.
- Dane o rozwiązaniu sprawy opisują efekt operacyjny, ale nie dowodzą samodzielnie, że spowodował go konkretny artykuł.
Pomiar powinien obejmować pytania należące do ustalonego zakresu bazy. Brak odpowiedzi na pytanie, którego baza nie ma obsługiwać, nie jest tym samym problemem co brak potrzebnej instrukcji albo niedziałające wyszukiwanie.
Nie mierz odsłon — mierz drogę od pytania do działania
Sukces oznacza, że pracownik po zadaniu realnego pytania dociera do użytecznej informacji i potrafi na jej podstawie poprawnie wykonać zadanie lub zakończyć sprawę. Liczba odsłon i wyszukiwań jest sygnałem aktywności, ale nie wystarcza do potwierdzenia takiego rezultatu.[1][3][7]
Nie każda dodatkowa odsłona oznacza porażkę. Użytkownik może porównywać źródła albo sprawdzać warunki opisane w kilku artykułach. Z tego samego powodu pojedyncze kliknięcie nie potwierdza, że treść była właściwa, zrozumiała i aktualna.
Kryterium sukcesu trzeba ustalić dla konkretnego procesu. Punktem wyjścia jest pytanie pracownika, a końcem obserwowalny rezultat, na przykład poprawnie wykonana czynność albo rozwiązanie sprawy bez dodatkowej pomocy. Jeżeli system nie rejestruje wyniku końcowego, można zbliżyć się do niego przez test zadaniowy i analizę kolejnych działań użytkownika.
Pomiar warto więc budować w trzech warstwach: logach wyszukiwania, testach realnych zadań oraz potwierdzeniu, czy odpowiedź pozwoliła zakończyć sprawę.[5] Jest to model operacyjny, a nie formalny standard branżowy.
Co pokazują logi wyszukiwania, a czego nie potwierdzają
Logi mogą pokazać, czy wyszukiwarka zwróciła wyniki, czy użytkownik je kliknął, na jakiej pozycji znajdował się wybrany rezultat oraz czy zapytanie zakończyło się bez wyniku lub bez kliknięcia.[1][2][3][4] Są to sygnały diagnostyczne. Nie potwierdzają jeszcze, że pracownik poprawnie rozwiązał problem.
| Sygnał | Co może oznaczać | Czego sam nie dowodzi | Co sprawdzić dalej |
|---|---|---|---|
| Wyszukiwanie bez wyników | Brak potrzebnej treści, inne nazewnictwo, problem z indeksowaniem albo zbyt wąskie zapytanie | Że organizacja nie ma potrzebnej wiedzy | Treść zapytania, synonimy używane przez pracowników, zakres bazy i konfigurację wyszukiwania |
| Wyszukiwanie bez kliknięcia | Niedopasowanie wyników, odpowiedź widoczną w podglądzie albo przerwanie sesji | Że użytkownik na pewno nie znalazł odpowiedzi | Liczbę wyników, ich tytuły oraz następne działanie użytkownika |
| Kliknięcie lub wysoki odsetek wyszukiwań z kliknięciem | Zainteresowanie wynikiem i możliwe dopasowanie tytułu do intencji | Że artykuł był poprawny i pozwolił wykonać zadanie | Powrót do wyników, kolejne wyszukiwania i rezultat sprawy |
| Pozycja klikniętego wyniku | Jak daleko na liście trzeba było szukać wybranego artykułu | Że wybrany wynik był odpowiedzią właściwą | Poprawność wykonania zadania i potrzebę dalszej pomocy |
| Zmiana zapytania | Potrzebę doprecyzowania pytania albo użycia innego słownictwa | Że pierwsze wyszukiwanie na pewno zakończyło się porażką | Całą sekwencję zapytań i wynik końcowy |
| Czas do odpowiedzi | Wysiłek potrzebny do znalezienia użytecznej informacji | Że szybka odpowiedź była poprawna | Rezultat zadania i porównywalność scenariuszy |
Zapytania bez wyników: brak artykułu, inne słownictwo czy problem indeksowania?
Wysoki lub rosnący odsetek wyszukiwań bez wyników wskazuje tematy wymagające analizy. Przyczyną może być luka w treści, używanie przez pracowników innych nazw niż te występujące w artykułach, problem z indeksowaniem albo zbyt wąskie sformułowanie zapytania.[1][4]
Zero wyników nie musi zatem oznaczać braku wiedzy w organizacji. Najpierw trzeba ustalić, czy pytanie należy do zakresu bazy, czy istnieje właściwy artykuł i czy wyszukiwarka potrafi zwrócić go dla języka używanego przez pracowników.
Brak kliknięcia i reformulacja zapytania: kiedy są sygnałem problemu
Zapytania bez kliknięcia należy analizować razem z ich treścią, liczbą zwróconych wyników i kolejnym działaniem użytkownika.[2][3] Brak kliknięcia może oznaczać niedopasowanie wyników, ale również sytuację, w której odpowiedź była widoczna bez otwierania artykułu albo była już znana użytkownikowi.
Podobnie działa zmiana zapytania. Czasami ujawnia, że nazewnictwo bazy rozmija się z językiem pracowników. Innym razem jest naturalnym doprecyzowaniem problemu i prowadzi do właściwego rezultatu. Praktycznym rozwiązaniem jest regularne grupowanie takich zapytań według możliwej przyczyny: luka w treści, inne słownictwo, niejasny tytuł, problem indeksowania albo pytanie poza zakresem.
Potwierdź wynik testem na rzeczywistym zadaniu
Test zadaniowy sprawdza to, czego nie widać w samych logach: czy pracownik potrafi samodzielnie znaleźć odpowiedź, zrozumieć instrukcję i poprawnie wykonać pracę. Uczestnik powinien dostać realne pytanie oraz działać bez pomocy autora treści.[6][7]
Przed rozpoczęciem testu trzeba określić obserwowalny wynik. Następnie można zapisać pytanie, użyte frazy, wybrany artykuł, czas od sformułowania problemu do znalezienia użytecznej odpowiedzi, poprawność zadania oraz potrzebę dodatkowej pomocy.
Dla powtarzalnych scenariuszy można mierzyć medianę czasu do użytecznej odpowiedzi.[5] Krótki czas nie potwierdza jednak poprawności: pracownik może szybko trafić na nieaktualną albo niepełną instrukcję. Wynik czasowy trzeba więc czytać razem z oceną wykonania zadania.
Rezultat testu zależy od doboru pytań, uczestników, ich doświadczenia i warunków badania. Scenariusze powinny pochodzić z rzeczywistej pracy, a porównywane zadania muszą mieć wcześniej ustalone kryteria poprawności.
Połącz artykuł z wynikiem sprawy, jeśli dane na to pozwalają
Jeżeli system pozwala powiązać użycie artykułu z dalszym biegiem sprawy, lepszym przybliżeniem efektu jest udział spraw rozwiązanych po użyciu wiedzy niż samo kliknięcie wyniku.[3] Można przy tym obserwować, czy po skorzystaniu z treści sprawa została zamknięta, wróciła jako kolejne pytanie albo wymagała eskalacji.
Taki związek nie dowodzi, że artykuł był jedyną przyczyną rozwiązania. Pracownik mógł równolegle skorzystać z pomocy innej osoby lub innego kanału. Również brak zgłoszenia nie musi oznaczać sukcesu: użytkownik mógł zrezygnować albo przenieść pytanie poza rejestrowany system.
Zmiany liczby zgłoszeń trzeba interpretować razem z wolumenem pracy, sezonowością, zmianami zespołu i dostępnością pozostałych kanałów wsparcia.[7] Bez takiego kontekstu porównanie okresu przed zmianą i po niej daje słabą podstawę do wniosku, że wynik spowodowała baza wiedzy.
Wdrożenie: prosty cykl pomiaru w trzech warstwach
Program pomiaru można rozpocząć od niewielkiej grupy częstych pytań i jednego procesu. Niezależnie od tego, jaki system bazy wiedzy jest używany, trzeba najpierw ustalić, które zdarzenia da się rejestrować i jaki rezultat będzie uznawany za poprawne zakończenie zadania.
- Wybierz pytania należące do zakresu bazy. Powinny pochodzić z powtarzalnych sytuacji w rzeczywistej pracy, a nie z listy haseł przygotowanych przez autora artykułów.
- Zdefiniuj rezultat. Dla każdego pytania określ, po czym będzie można rozpoznać poprawne wykonanie zadania lub rozwiązanie sprawy.
- Zbierz sygnały z logów. Zapisuj brak wyników, brak kliknięcia, wybrane wyniki, ich pozycję oraz kolejne zmiany zapytania.
- Przeprowadź test zadaniowy. Obserwuj samodzielne wyszukiwanie, czas do użytecznej odpowiedzi, rezultat i potrzebę pomocy. Wynik zależy od doboru pytań, uczestników i warunków testu.
- Połącz użycie wiedzy z wynikiem sprawy, jeśli jest to możliwe. Rejestruj rozwiązanie, powrót pytania lub eskalację. Jeżeli takich danych nie ma, pozostań przy logach i testach, wyraźnie zaznaczając ograniczenie pomiaru.
- Przypisz przyczynę i działanie naprawcze. Decyzją może być uzupełnienie treści, zmiana nazewnictwa, poprawa indeksowania, przebudowa artykułu albo oznaczenie pytania jako pozostającego poza zakresem bazy.
- Powtórz pomiar w porównywalnych warunkach. Segmentuj wyniki według procesu, grupy użytkowników lub okresu, o ile wielkość danych na to pozwala.
Połączenie logów, testów i wyniku sprawy jest rekomendowanym modelem operacyjnym, nie uniwersalnym standardem. Nie każda organizacja ma dane ze wszystkich trzech warstw, dlatego zakres wniosków powinien odpowiadać temu, co rzeczywiście zostało zarejestrowane.[1][5][7]
Kiedy metryki mogą wprowadzać w błąd
Znalezienie artykułu nie jest sukcesem, jeśli treść jest nieaktualna, niepełna albo odnosi się do innej wersji procesu. Przy ocenie wyniku trzeba rejestrować właściciela treści, jej wersję i datę ostatniej weryfikacji.[7] Nie istnieje jeden właściwy termin przeglądu dla wszystkich artykułów; częstotliwość zależy od ryzyka i tempa zmian.
- Kliknięcie wyniku
- Wskazuje zainteresowanie artykułem, ale nie potwierdza zrozumienia ani poprawnego wykonania zadania.
- Brak kliknięcia
- Może być porażką, lecz może też oznaczać znalezienie odpowiedzi w podglądzie. Potrzebny jest kontekst sesji i następnego działania.
- Krótki czas wyszukiwania
- Może oznaczać łatwe znalezienie odpowiedzi, ale nie rozstrzyga o jej poprawności i aktualności.
- Brak zgłoszenia po użyciu artykułu
- Może wskazywać samodzielne rozwiązanie, rezygnację albo przejście do innego kanału. Jest to wskaźnik pośredni.
- Spadek liczby pytań
- Wymaga kontroli wolumenu pracy, sezonowości, zmian zespołu i dostępności innych form wsparcia.
- Porównanie przed zmianą i po niej
- Pokazuje współwystępowanie zmiany i wyniku, ale bez odpowiedniego kontekstu nie dowodzi wpływu bazy.
Raport powinien wskazywać nie tylko zmianę metryki, lecz także proces, okres, segment użytkowników, stan treści i możliwe alternatywne wyjaśnienia. Dzięki temu organizacja nie optymalizuje pozornie dobrego wskaźnika kosztem jakości odpowiedzi.
Najczęstsze pytania
Czy wysoki CTR oznacza, że baza wiedzy działa dobrze?
Nie samodzielnie. Odsetek wyszukiwań z kliknięciem pokazuje interakcję z wynikami, ale nie potwierdza poprawności odpowiedzi ani jej wykorzystania. Trzeba zestawić go z testem zadaniowym lub wynikiem sprawy.
Ile zapytań bez wyników jest dopuszczalne?
Nie ma podstaw do przyjęcia uniwersalnego progu bez kontekstu. Należy obserwować trend, wolumen oraz tematy zapytań, a także oddzielać luki w treści od pytań pozostających poza zakresem bazy.
Czy można mierzyć skuteczność, gdy system nie łączy artykułów ze zgłoszeniami?
Tak. Punktem wyjścia mogą być logi wyszukiwania i testy realnych zadań. Brak danych o wyniku sprawy ogranicza ocenę efektu operacyjnego, ale nie uniemożliwia wykrywania problemów z treścią i wyszukiwaniem.
Źródła
- Knowledge article and search term analytics dashboards, Microsoft Learn.
- View search diagnostics in SharePoint Server, Microsoft Learn.
- Metrics and attributes for Zendesk Knowledge, Zendesk.
- Measuring Self-Service Success, ServiceNow.
- Dobre praktyki prostej komunikacji bankowej, Związek Banków Polskich.
- Measurement practices in user experience (UX) research: a systematic quantitative literature review, Frontiers in Computer Science.
- Baza wiedzy firmowej – jak ją stworzyć i rozwijać?, Audyt Kadr.
+Artykuł Sponsorowany+



