Cytaty źródeł w odpowiedzi AI sprawdzaj jako dowody konkretnych zdań, a nie jako ozdobną listę linków. Źródło opisujące dostawę nie potwierdza jeszcze, że dostawa jest bezpłatna, dostępna w danym kraju albo realizowana w określonym terminie. Taki przegląd możesz wykonać bez znajomości działania modelu: potrzebujesz tekstu odpowiedzi i pełnych, wskazanych dokumentów. Wynikiem jest lista twierdzeń potwierdzonych, wymagających zawężenia oraz pozostających bez dowodu.
Rozbij odpowiedź na osobne twierdzenia
Twierdzenie to fragment, który można sprawdzić niezależnie od stylu odpowiedzi. W zdaniu „Pakiet obejmuje konsultację, kosztuje 200 zł i jest dostępny od jutra” znajdują się trzy różne fakty. Zapisz je osobno, ponieważ jeden dokument może potwierdzać zakres, ale nie aktualną cenę ani dostępność. Przy bardzo krótkiej odpowiedzi nie trzeba budować rozbudowanego arkusza; trzy wiersze wystarczą, jeśli zachowują tekst i odpowiadające mu dowody bez gubienia warunków.
Nie traktuj grzecznościowego wstępu jak twierdzenia biznesowego. „Chętnie pomogę” nie wymaga artykułu źródłowego, natomiast „możesz zmienić każdą rezerwację bez opłaty” już tak. Oddziel instrukcję wykonaną przez system od opisu możliwości: zdanie „zmieniłem termin” wymaga potwierdzenia operacji, nie cytatu z FAQ. Ogólne kryteria oceny szkicu obejmuje jakość podpowiedzi Copilota; tutaj pracujesz wyłącznie nad powiązaniem zdania z dowodem.
Zachowaj także przeczenia, wyjątki i określenia czasu. „Nie obejmuje”, „zwykle” i „dla nowych kont” zmieniają znaczenie, chociaż łatwo zgubić je przy skracaniu odpowiedzi. Nie poprawiaj od razu brzmienia zdania, ponieważ wtedy oceniałbyś już swoją wersję, a nie propozycję AI. Najpierw zaznacz problem, później przygotuj korektę i ponownie sprawdź zmienione twierdzenie; to pozwala jasno pokazać, z czego wynikała decyzja operatora.
Otwórz właściwy fragment, nie tylko pasujący dokument
Dowód powinien wskazywać fragment zawierający informację, którą przekazuje odpowiedź. Otwórz pełne źródło i przeczytaj także nagłówek oraz akapit przed i po cytacie. Warunek zastosowania może znajdować się tuż obok tekstu, który model wykorzystał. Nie uznawaj samej nazwy pliku, adresu strony albo zgodnego słowa kluczowego za dowód; dokument zatytułowany „Rezerwacje” może opisywać wyłącznie jeden rodzaj oferty, a odpowiedź mówić o wszystkich.
Sprawdź, czy materiał dotyczy właściwego produktu, witryny i grupy klientów. Instrukcja administratora nie potwierdza, że odwiedzający może wykonać tę samą czynność samodzielnie. Podobnie warunki jednego kraju nie przenoszą się automatycznie na drugi.
Jeśli źródło ma kilka sekcji, zapisz nazwę tej, z której wynika fakt, zamiast cytować cały dokument jako jednolitą regułę. Przy późniejszej korekcie łatwiej wtedy wrócić do konkretnego warunku.
W Meetlead prywatny test może pokazać cytaty faktycznie użytych źródeł, co daje punkt wyjścia do ręcznego porównania. Nie oznacza to obietnicy publicznego wyświetlania cytatów w rozmowie klienta ani automatycznej oceny wszystkich zdań. Przygotowanie materiału opisuje osobno baza wiedzy dla chatbota. W tym zadaniu nie dodajesz nowych dokumentów tylko po to, żeby zwiększyć ich liczbę; sprawdzasz już wskazane źródło i zakres jego informacji.
Porównaj podmiot, warunek, czas i zakres
Zgodne słownictwo nie wystarczy: źródło musi wspierać tę samą relację między rzeczami. Dla twierdzenia o koszcie sprawdź, czego dotyczy kwota, czy obejmuje podatek i czy wymaga określonego wariantu.
Dla terminu sprawdź początek liczenia, dni robocze oraz słowa ograniczające pewność. Dla uprawnienia porównaj rolę osoby. W ten sposób wykryjesz zdania, które brzmią podobnie do źródła, lecz dodają nową, niepotwierdzoną regułę.
Przesuń tabelę w bok, aby zobaczyć wszystkie kolumny.
| Twierdzenie | Treść źródła | Werdykt |
|---|---|---|
| Każdą ofertę można odwołać dzień wcześniej | Oferta A: odwołanie do 24 godzin przed startem | Za szeroki zakres: brak dowodu dla innych ofert |
| Termin to dwa dni robocze | Realizacja zwykle trwa dwa dni robocze | Pominięto zastrzeżenie zwykle |
| Cena obejmuje dostawę | Dostawa jest naliczana osobno | Sprzeczność wymagająca poprawy |
Przykłady w tabeli są fikcyjne i pokazują sposób porównania, a nie warunki konkretnej usługi. Zauważ, że pierwszy wiersz zawiera prawdziwy fakt dla oferty A, ale nie dla całej oferty firmy. Drugi wymaga zachowania słowa „zwykle”, a trzeci zmiany informacji. Dobre sprawdzenie kończy się konkretną decyzją redakcyjną: zawęź do wskazanego wariantu, przywróć warunek albo usuń twierdzenie, którego nie można obronić źródłem.
Jeżeli odpowiedź łączy kilka dokumentów, oceniaj połączenie osobno. Z tekstu „pakiet A ma konsultację” i „usługa B jest dostępna jutro” nie wynika, że konsultacja z pakietu A jest dostępna jutro. Dopisz brakujący dowód albo pozostaw termin nieustalony. Przy wielu prośbach klienta pomaga podział pytań w jednej wiadomości, ale liczba poprawnych części nie rekompensuje jednego fałszywego wniosku, który zmienia decyzję klienta.
Oddziel potwierdzenie zdania od dowodu użycia źródła
Ręczny przegląd pokazuje, czy dokument wspiera treść zdania; nie ujawnia sam w sobie, jak model wybrał tę treść. To dwa różne pytania: „czy fakt jest udokumentowany?” i „czy właśnie ten dokument był podstawą generacji?”. Odpowiedź może przypadkiem zgadzać się ze źródłem, a link zostać przypisany dopiero później. Nie twierdź, że sprawdziłeś mechanizm modelu, jeżeli wykonałeś jedynie porównanie tekstów widocznych dla operatora.
W raporcie użyj prostych statusów: potwierdzone, wymaga warunku, sprzeczne, brak dowodu. Dodaj krótkie uzasadnienie, na przykład „dokument dotyczy administratora, odpowiedź mówi o kliencie”. Nie zastępuj uzasadnienia procentem pewności wymyślonym przez recenzenta. Jeżeli cytat jest niepełny, zaznacz, jakiego fragmentu potrzebujesz do rozstrzygnięcia; brak dostępu do pełnego dokumentu oznacza ograniczenie przeglądu, a nie potwierdzenie poprawności ani automatyczny dowód błędu odpowiedzi.
Do pracy z takim materiałem służą źródła i prywatne propozycje Meet AI, dostępne przy odpowiednich uprawnieniach, planie i aktywnej aplikacji. Zestaw tekst z cytatem, a poprawiony szkic wstaw do edytora dopiero po decyzji operatora. Ręczne zatwierdzanie odpowiedzi AI pozostaje osobnym krokiem; ani obecność linku, ani udany prywatny test nie są poleceniem automatycznego wysłania treści klientowi bez przeczytania.
Badanie Wallata i współautorów rozróżnia zgodność cytatu z twierdzeniem od wierności atrybucji, czyli rzeczywistego oparcia generacji na źródle. Samodzielny przegląd dokumentu nie dowodzi tego drugiego: Correctness is not Faithfulness in RAG Attributions.
Przygotuj poprawkę, która zachowuje udokumentowany sens
Korekta powinna usuwać różnicę między twierdzeniem a źródłem, zamiast jedynie łagodzić ton. Jeśli dokument dotyczy oferty A, napisz „Dla oferty A…”; jeśli termin jest orientacyjny, zachowaj to określenie. W pełnym wzorze możesz użyć: „Dla oferty A odwołanie jest dostępne do 24 godzin przed rozpoczęciem. Nie mam potwierdzonych warunków dla pozostałych ofert; podaj nazwę wybranej usługi”. Czytelnik wie wtedy, jaki fakt jest pewny i czego jeszcze brakuje.
Po poprawce sprawdź, czy nie pojawiło się nowe twierdzenie. Zdanie „podaj nazwę usługi, a od razu ją anuluję” wprowadza obietnicę operacji, której sam dokument informacyjny nie potwierdza. Nie zastępuj nieudokumentowanej reguły inną obietnicą tylko po to, żeby zakończyć tekst miłym akcentem. Dobre zdanie może pozostawić część sprawy otwartą, jeśli wyraźnie mówi, co potrzebne do jej rozwiązania i nie przedstawia ograniczenia wiedzy jako odmowy pomocy.
Zachowaj tabelę wraz z datą przeglądu materiału i nazwą wariantu, którego dotyczyła decyzja. Nie publikuj w niej danych klienta, a pełnej historii rozmowy nie kopiuj, jeśli wystarczy samo sprawdzane zdanie. Gdy źródło później się zmieni, ocena wymaga ponownego spojrzenia na aktualny fragment. Nie traktuj dawnego potwierdzenia jako bezterminowego certyfikatu dla każdej podobnej odpowiedzi; odnosiło się do konkretnego tekstu, materiału i zakresu w momencie sprawdzenia.
Pytania o sprawdzanie cytatów AI
Czy działający link oznacza poprawną odpowiedź? Nie, link dowodzi tylko, że materiał jest dostępny. Musisz sprawdzić, czy wskazany fragment potwierdza to samo twierdzenie, dla tego samego wariantu, osoby i warunków.
Dokument na właściwy temat może nie zawierać potrzebnego faktu albo opisywać wyjątek. Zapisz decyzję dla zdania, zamiast przyznawać całej odpowiedzi status poprawnej na podstawie listy adresów.
Czy każdy fragment odpowiedzi musi mieć osobny cytat? Nie potrzebujesz osobnego linku dla grzecznościowego wstępu ani każdego słowa instrukcji. Potrzebujesz jednak możliwości sprawdzenia faktów, które wpływają na koszt, termin, uprawnienie lub decyzję klienta. Jeden fragment może wspierać kilka twierdzeń, jeśli rzeczywiście obejmuje je wszystkie; nie przenoś jego zakresu na dane, których w nim nie ma.
