AI для викладачів

Jak nauczyć studentów spierać się z AI zamiast zgadzać się z pierwszą odpowiedzią

08 Жовтня, 12:02

7 на хв читання

westudy

Jak uczyć studentów uzasadnionego sprawdzania i kwestionowania odpowiedzi AI: własne stanowisko, twierdzenia, źródła, kontrprzykłady i zmiana wniosku według dowodów.

AI odpowiada szybko, poprawnie językowo i często pewnie. Student może uznać tę formę za wystarczającą podstawę zgody, szczególnie gdy temat jest jeszcze nieznany. Cel edukacyjny nie polega jednak na stałym sprzeciwianiu się systemowi. Trzeba umieć ustalić konkretne twierdzenie, sprawdzić je i zmienić własny wniosek według dowodów. Czasem doprowadzi to do poprawienia AI, czasem — do uzasadnionej zgody, a czasem — do uznania niewystarczalności dostępnych danych do odpowiedzialnej decyzji merytorycznej.

Taka praca wymaga struktury. Apel „myślcie krytycznie” nie wyjaśnia, co student ma robić z długim automatycznym wyjaśnieniem. Poniżej zaproponowano autorski format zajęć, w którym uczestnicy uczą się prowadzić merytoryczną dyskusję z odpowiedzią AI. Przykłady wymyślono do wyjaśnienia edukacyjnego. Nie są wynikami eksperymentu z rzeczywistą grupą i nie dowodzą skuteczności żadnego konkretnego narzędzia. Prowadzący dostosowuje zadanie do dyscypliny, poziomu studentów, dostępnych źródeł i umiejętności weryfikacji, którą trzeba ukształtować na tym etapie kursu.

Sformułuj cel przez czynność opartą na dowodach

Zamiast wymogu „znaleźć błąd AI” podaj efekt: student rozróżnia twierdzenie i podstawę, sprawdza rozstrzygający warunek i wyjaśnia decyzję. Poprawna odpowiedź automatyczna nie niszczy wtedy ćwiczenia. Uczestnik może potwierdzić ją niezależnym sposobem. Jeśli natomiast zadanie zawsze zawiera błąd, studenci szybko uczą się szukać dowolnej sprzeczności, nawet w poprawnym wyjaśnieniu. Taki nawyk może zastąpić weryfikację domyślną nieufnością równie słabo opartą na dowodach merytorycznych jak automatyczna zgoda z pewnym tekstem.

Wybierz niewielki zakres merytoryczny. Początkującemu trudno jednocześnie poznawać nową teorię i oceniać złożoną argumentację bez wsparcia. Do pierwszego ćwiczenia daj pojęcia już omawiane i dostępne źródło weryfikacji. Później można zwiększać niepewność i samodzielność wyszukiwania. Trudność edukacyjna powinna rosnąć w kontrolowany sposób. Jeśli student nie wie, według jakiej cechy rozróżniać twierdzenia prawdziwe i fałszywe, długa rozmowa z modelem może tylko tworzyć wrażenie aktywnej pracy bez faktycznego postępu ku niezależnemu rozumieniu tematu.

Carnegie Mellon proponuje nadawać strukturę nauce krytycznej dyskusji, czyniąc oczekiwane czynności jawnymi. Na tych zajęciach taką czynnością może być sprawdzenie jednego ważnego twierdzenia zamiast abstrakcyjnej oceny całego tekstu. Wyjaśnij, że mocna odpowiedź zawiera konkretną podstawę i granicę wniosku. Nie oceniaj uczestnika według ostrości sformułowań, liczby sprzeciwów lub gotowości do spierania się na głos. Analiza pisemna może równie dobrze pokazywać potrzebne rozumowanie, jeśli sama dyskusja ustna nie jest osobnym celem edukacyjnym.

Przygotuj materiał o znanej podstawie merytorycznej

Prowadzący powinien niezależnie sprawdzić zadanie przed zajęciami. Zachowaj warunki, źródła i możliwe akceptowalne wnioski. Można użyć specjalnie stworzonej odpowiedzi z kontrolowanym błędem, ale oznacz jej pochodzenie po omówieniu. Nie nazywaj wymyślonego przykładu faktyczną awarią określonego produktu. Demonstracja nie potrzebuje przypadkowego rzeczywistego błędu modelu: ważniejsze, by studenci mieli wystarczające dane do weryfikacji, a prowadzący potrafił wyjaśnić, co dokładnie było poprawne, błędne lub niewystarczająco uzasadnione w przygotowanym materiale edukacyjnym.

Uwzględnij różne rodzaje odpowiedzi: poprawną, częściowo poprawną i wymagającą dodatkowego warunku. Nie informuj z góry, która jest przed uczestnikiem, jeśli odpowiada to celowi ćwiczenia. Po wykonaniu wyjaśnij projekt. Student powinien widzieć, że zadanie nie było grą w szukanie obowiązkowej pułapki. Dla każdego przypadku przygotuj omówienie uzależniające decyzję od cechy merytorycznej. Umiejętność przenosi się wtedy na nowy tekst, w którym prowadzący nie ustala już z góry, czy system popełni błąd, czy poda poprawne wyjaśnienie.

Sprawdź dostępność źródeł. Jeśli odsyłacz jest zamknięty, napisany w niedostępnym języku lub zawiera tylko krótką reklamę zamiast potrzebnej informacji, uczestnik nie wykona weryfikacji na jednakowych podstawach. Na pierwsze zajęcia daj krótki pakiet właściwych fragmentów z odsyłaczami. Nie jest to podpowiedź wszystkich odpowiedzi, jeśli student sam musi ustalić związek. Dalej można stopniowo zmniejszać wsparcie. Samodzielność rozwija się nie przez brak jakichkolwiek podstaw, lecz przez przejście od kierowanej kontroli do uzasadnionego wyboru źródła i metody.

Pozwól najpierw sformułować własne stanowisko

Przed pokazaniem odpowiedzi AI poproś o krótkie zapisanie początkowego wniosku i powodu. W trudnym temacie wystarczy nazwać to, co już wiadomo, i potrzebne dane. Daje to podstawę porównania. Student może zobaczyć, co konkretnie zmieniło jego zdanie: nowy argument, źródło czy tylko pewny ton systemu. Nie oceniaj początkowego zapisu jako wiedzy końcowej, jeśli celem etapu jest uwidocznienie rozumowania. Wyjaśnij, że zmiana stanowiska po sprawdzeniu jest normalnym wynikiem pracy edukacyjnej.

Badanie Buçinca i współautorów rozpatruje nadmierne zaufanie do zaleceń AI i sposoby aktywizowania własnego rozumowania w konkretnym eksperymencie. Nie gwarantuje wyniku właśnie tych zajęć. W autorskim projekcie warto nie pokazywać automatycznego wniosku, zanim uczestnik spróbuje określić własne podstawy. Nie zamieniaj jednak początkowej odpowiedzi w zobowiązanie do obrony jej do końca. Celem jest weryfikacja, a nie zachowanie pierwszej myśli wbrew nowym wiarygodnym danym i argumentom merytorycznym.

Po otrzymaniu tekstu AI poproś o oznaczenie miejsc zgodnych z początkowym stanowiskiem i różniących się od niego. Nie trzeba od razu zaczynać czatu. Krótka lektura z oznaczeniami pomaga wybrać przedmiot rozmowy. Inaczej student może zadać ogólne pytanie „masz pewność?” i otrzymać jeszcze dłuższy tekst bez nowych podstaw. Dyskusja staje się przydatna, gdy uczestnik wie, jakie twierdzenie sprawdza i co uzna za wystarczające potwierdzenie lub obalenie w ramach dostępnego zadania i poziomu przygotowania.

Rozłóż odpowiedź na sprawdzalne twierdzenia

Wyróżnij fakty, obliczenia, wnioski przyczynowe, zalecenia i założenia. Każde wymaga własnego sposobu sprawdzania. Datę porównuje się ze źródłem, arytmetykę przelicza, wniosek przyczynowy ocenia według danych i warunków, zalecenie — według celu i ograniczeń. Nie wymagaj jednakowego dowodu dla wszystkich zdań. Ogólny opis może być wstępem, a rozstrzygające twierdzenie — podstawą decyzji. Poproś studenta o wybranie właśnie tego, od czego zależy odpowiedź, aby nie poświęcić całego czasu nieistotnemu drobiazgowi stylistycznemu.

Do każdego wyróżnionego twierdzenia dodaj krótkie pytanie kontrolne. Na przykład: czy znany jest mianownik procentu, czy istnieje wskazany dokument, czy źródło rzeczywiście wspiera związek przyczynowy. Potrzebna jest konkretna wykonalna czynność. Sformułowanie „sprawdzić stronniczość” bez obiektu merytorycznego często pozostaje hasłem. Doprecyzuj, jaką informację pominięto i jak jej obecność mogłaby zmienić wniosek. Student uczy się wtedy czynić krytykę operacyjną, możliwą do sprawdzenia i wyjaśnienia innej osobie.

Nie czyń liczby oznaczonych zdań głównym wskaźnikiem jakości. Jeden poprawnie wybrany rozstrzygający punkt może być przydatniejszy niż dziesięć powierzchownych uwag. Jeśli uczestnik znajduje wiele problemów, poproś o ustalenie priorytetów: co wpływa na decyzję, co tylko wymaga doprecyzowania, a co jest wyborem stylistycznym. Ważne, by rozróżnienie było uzasadnione. Student nie powinien ogłaszać wszystkiego niepotwierdzonego fałszywym. Czasem właściwy status to na razie nieustalone, również wymagający wyjaśnienia konkretnie brakujących danych.

Sięgnij do niezależnej podstawy

Odpowiedź innego modelu może dać nowy kierunek poszukiwań, ale sama nie staje się niezależnym źródłem merytorycznym. Poproś uczestnika o otwarcie dokumentu, powtórzenie obliczenia lub wykonanie kontroli na określonym przykładzie. Jeśli AI podaje odsyłacz, trzeba sprawdzić istnienie strony i odpowiedni fragment. Prawdziwy dokument nie oznacza jeszcze wspierania każdej tezy automatycznego wyjaśnienia. Student musi ustalić właśnie związek źródła z wnioskiem, a nie tylko dodać autorytatywną nazwę do własnej pracy.

Odróżniaj aktualność od pochodzenia. Zmienny produkt wymaga odpowiedniej wersji dokumentacji, teza naukowa — właściwej podstawy merytorycznej. Nie stawiaj przypadkowego nowszego wpisu ponad właściwym źródłem pierwotnym tylko przez datę. Poproś o wyjaśnienie, dlaczego wybrany materiał nadaje się do tego pytania. Jeśli źródła sobie przeczą, ustal ramy: definicje, warunki, okres lub poziom opisu. Część sprzeczności znika po takim doprecyzowaniu, a część pozostaje nierozstrzygnięta i powinna być uczciwie oznaczona w podsumowaniu analizy edukacyjnej.

Na początek można dać krótką kartę dowodu: twierdzenie, weryfikacja, uzyskane dane i wniosek. Nie zamieniaj formy w cel sam w sobie. Służy temu, by uczestnik nie przeskakiwał od sprzeciwu do ostatecznej decyzji bez podstawy. Na następnych zajęciach kartę można skrócić lub usunąć, jeśli umiejętność działa już samodzielnie. Student powinien rozumieć funkcję każdego kroku i potrafić odtworzyć go w nowej sytuacji, zamiast tylko wypełniać potrzebną liczbę komórek według szablonu prowadzącego.

Sprawdź argument na hipotetycznym przykładzie

Załóżmy, że w materiale edukacyjnym napisano: średnia ocena grupy wzrosła, zatem każdy uczestnik poprawił wynik. To logicznie mocniejszy wniosek niż pozwala średnia. Student może zbudować krótki kontrprzykład: wyniki dwóch osób zmieniły się z 4 i 6 na 3 i 9. Średnia wzrosła z 5 do 6, ale pierwszy wynik spadł. Wszystkie liczby są tu hipotetyczne. Przykład demonstruje sprawdzanie ogólnego twierdzenia, a nie faktyczną analizę konkretnego kursu edukacyjnego lub rzeczywistych ocen studentów.

Następnie uczestnik formułuje precyzyjny sprzeciw: wzrost średniej nie dowodzi poprawy każdego osobnego wyniku. Nie trzeba twierdzić, że dane w ogóle niczego nie pokazują. Wspierają bardziej ograniczony wniosek o średniej przy zadanych warunkach. Taka dokładność jest ważna w nauce dyskusji. Słaba krytyka zastępuje jedno nadmierne uogólnienie drugim. Mocna określa granicę dowodu i pozostawia tę część twierdzenia, którą rzeczywiście wspierają dane i przejrzyste obliczenie w ramach konkretnego przykładu.

Na czacie można poprosić AI o ponowne rozpatrzenie właśnie tego wniosku według podanego kontrprzykładu. Następnie student sprawdza poprawioną odpowiedź. Zgoda modelu nie jest zakończeniem: mógł zmienić sformułowanie, ale dodać nowy błąd. Uczestnik musi pokazać zgodność poprawionej tezy z danymi. Dyskusja kończy się wtedy własną decyzją merytoryczną, a nie uzyskaniem potrzebnej frazy od systemu. Nie ocenia się zwycięstwa w dialogu; ocenia się zdolność ustalenia, co dokładnie udowodniono i jakie ograniczenia pozostają po weryfikacji.

Naucz doprecyzowywać bez narzucania odpowiedzi

Przydatne pytanie prosi o wskazanie założenia, pokazanie kroku obliczenia lub fragmentu źródła. Nie powinno sugerować pożądanej odpowiedzi tak, by model po prostu się zgodził. Porównaj prośbę „wyjaśnij podstawę tego wniosku” i twierdzenie „przecież popełniasz błąd, przyznaj”. Drugie może zmienić ton dialogu bez pojawienia się nowego dowodu. Daj uczestnikom kilka funkcji pytań, a nie uniwersalną magiczną frazę. Powinni dobierać doprecyzowanie według niepewności rzeczywiście wymagającej usunięcia do decyzji merytorycznej.

Jeśli AI zmieniło odpowiedź po sprzeciwie bez nowych danych, oznacz to jako zachowanie dialogu, a nie potwierdzenie poprawności nowej wersji. Porównaj oba wyjaśnienia niezależnie. Student powinien widzieć, że upór użytkownika czasem wpływa na sformułowania systemu. Nie zamieniaj ćwiczenia w szukanie sposobu zmuszenia modelu do zgody. Taka aktywność może być widowiskowa, ale nie uczy odróżniania prawdziwego od przekonującego. Aby wrócić do celu, poproś uczestnika o wskazanie nowych podstaw pojawiających się po każdej wymianie wypowiedzi.

Ustal granicę liczby iteracji ćwiczenia edukacyjnego. Jeśli po kilku doprecyzowaniach nie pojawiła się odpowiednia podstawa, przejdź do źródła lub pozostaw pytanie otwarte. Niekończący się czat nie zastępuje weryfikacji. W podsumowaniu można zapisać: system zaproponował dwa niezgodne warianty, a dostępne dane pozwalają ustalić tylko pewną część wniosku. To pełnoprawny wynik, gdy jest uzasadniony. Student uczy się zarządzać niepewnością i czasem, zamiast oczekiwać ostatecznej pewnej odpowiedzi narzędzia na dowolne zadane pytanie.

Daj przypadek, w którym AI ma rację

Po ćwiczeniu z błędem zaproponuj poprawne wyjaśnienie i poproś o sprawdzenie go według tych samych kroków. Student powinien potwierdzić rozstrzygające twierdzenia i wskazać granice zastosowania. Jeśli nadal szuka dowolnego powodu odrzucenia odpowiedzi, omów różnicę między krytycznością a obowiązkową niezgodą. Uzasadniona zgoda również wymaga pracy. Pokazuje, że decyzja zależy od dowodu, a nie tego, kto dokładnie wypowiedział tezę — człowiek, model czy autor materiału edukacyjnego.

W częściowo poprawnej odpowiedzi poproś o zachowanie potwierdzonych elementów i poprawienie tylko problematycznego. Nie przepisuj wszystkiego tylko dlatego, że znaleziono jeden błąd. Taka czynność redakcyjna uczy precyzji: student określa zakres zmiany i nie niszczy poprawnego wyjaśnienia. Po poprawieniu niech sprawdzi nowy tekst według początkowych warunków. Czasem doprecyzowanie dodaje potrzebną granicę, a czasem niepostrzeżenie zmienia samo zadanie. Prowadzący powinien pomóc dostrzec tę różnicę konkretnymi przykładami, a nie tylko ogólnym apelem o uważność.

Nie oceniaj przydatności ćwiczenia liczbą błędów znalezionych w odpowiedzi AI. Taki wskaźnik zależy od przygotowanego materiału i może zachęcać do słabych sprzeciwów. Lepiej sprawdzać, czy uczestnik poprawnie wybrał twierdzenie, zastosował właściwą kontrolę i sformułował proporcjonalny wniosek. W trudnym przypadku dopuszczalna jest uzasadniona niepewność. Ważne, by student wyjaśnił, jakiej informacji brakuje i jaka następna czynność pomoże ją uzyskać, bez wymyślania źródeł lub wyników kontroli dla kompletnego wyglądu pracy.

Zorganizuj wspólną pracę i analizę merytoryczną

W parach można tymczasowo rozdzielić role: jeden uczestnik formułuje argument, drugi sprawdza podstawę i granice. Następnie role się zmieniają. Nie wyznaczaj jednego studenta na stałego krytyka drugiego. Do wspólnej analizy wybieraj treść pracy, a nie cechy osobiste. Jeśli grupa ma różne doświadczenie, daj czas na pisemny zapis początkowy, aby szybka reakcja ustna nie określała całego przebiegu dyskusji. Format powinien ujawniać rozumowanie każdego uczestnika, zamiast tylko wspierać osoby łatwo i szybko mówiące przed publicznością.

Zbierz kilka różnych wniosków i poproś o wyjaśnienie danych, które je wspierają. Jeśli odpowiedzi sobie przeczą, rozpatrz konkretny warunek. Nie licz głosów jako dowodu prawdy merytorycznej. Większość może powtórzyć ten sam automatyczny błąd. Prowadzący przywraca rozmowę do weryfikacji i pokazuje, jak zmiana podstawy zmienia wniosek. Po omówieniu uczestnicy krótko redagują własne stanowisko. Pozwala to zobaczyć ruch edukacyjny bez sprowadzania zajęć do oceny, kto od początku poprawnie odgadł przygotowany klucz.

UNESCO w wytycznych dotyczących generatywnego AI podkreśla udział człowieka i zdolność samodzielnego działania. Na tych zajęciach ważne jest pozostawienie ostatecznego wniosku studentowi. AI może być materiałem do analizy i rozmówcą, ale nie jedynym sędzią jakości jego krytyki. Inaczej uczestnik znów będzie zależeć od aprobaty tego samego systemu. Analiza merytoryczna prowadzącego i dostępne niezależne podstawy pomagają ustalić siłę lub słabość argumentu bez potrzeby uzyskania od modelu pożądanej oceny własnego myślenia.

Sprawdź przeniesienie i utrzymuj materiały

Daj nowy przykład bez znajomych fraz i w miarę możliwości bez natychmiastowego dostępu do czatu. Poproś o ustalenie, co trzeba sprawdzić, i samodzielne wykonanie głównego kroku. Pokazuje to więcej niż powtórzenie znanego dialogu. Jeśli uczestnik odtwarza szablon, ale nie wybiera potrzebnej podstawy, wróć do konkretnego związku twierdzenia z dowodem. Nie deklaruj ukształtowanego krytycznego myślenia po jednych udanych zajęciach. Zachowaj skromny wniosek o obserwowanej czynności i zaplanuj powtórzenie w następnym kontekście merytorycznym.

Profil NIST dotyczący generatywnego AI pomaga uzasadnić potrzebę sprawdzania wyniku, ale nie daje uniwersalnej rubryki Twojego kursu. Opracuj proste kryteria i sprawdź je na przykładach. Jeśli LMS WeStudy służy do nauki, umieść przygotowane materiały i instrukcję sposobem dostępnym w Twojej konfiguracji. Nie zakładaj wbudowanej obsługi dowolnego modelu lub automatycznego sprawdzania argumentów. Najpierw określ ścieżkę pedagogiczną, a potem sprawdź techniczny sposób jej prezentacji i zachowania potrzebnego wyniku pracy studentów.

LMS WeStudy może pomagać organizować kolejność materiałów przy istniejących możliwościach, a oparcie rozumowania w dowodach ustalają uczestnik i prowadzący. Zachowaj źródła, przykłady kontrolne i powody decyzji merytorycznych. Dyskusja edukacyjna z AI kończy się nie ostatnią wypowiedzią czatu, lecz sprawdzonym własnym wnioskiem. Student potrafi zgodzić się, doprecyzować, zaprzeczyć lub odłożyć decyzję zależnie od danych. Właśnie taka elastyczność czyni pracę z automatycznymi odpowiedziami częścią samodzielnej nauki, w której pewna forma nie zastępuje już zrozumiałej podstawy twierdzenia merytorycznego.

Poproś o wskazanie, co mogłoby zmienić wniosek

Po weryfikacji student krótko formułuje warunek, przy którym trzeba byłoby ponownie rozpatrzyć decyzję. Pomaga to odróżniać uzasadnione stanowisko od niezachwianego przekonania. W przykładzie liczbowym mogą to być inne dane wyjściowe, w zaleceniu merytorycznym — inny cel lub ograniczenia. Nie wymagaj bezustannego wątpienia we wszystko. Trzeba pokazać związek wniosku z konkretną podstawą i zrozumieć, co dokładnie czyni go odpowiednim w określonej sytuacji zadania edukacyjnego.

Daj możliwość osobnego oznaczenia własnego błędu i wyjaśnienia poprawki. Jeśli ocenianie nagradza tylko niezmienne pierwsze stanowisko, studentowi nie opłaca się uczciwie zmieniać decyzji po pojawieniu się dowodu. W treningu przydatniej oceniać jakość takiego przeglądu: jaką podstawę sprawdzono i dlaczego zmienił się wniosek. Nowa pewna wypowiedź AI bez dowodów nie jest jednak wystarczającym powodem. Uczestnik musi ustalić, co rzeczywiście przybyło w rozumowaniu, a co tylko zmieniło formę i ton bez merytorycznego postępu ku odpowiedzi.

Źródła

  1. Carnegie Mellon: Supporting Critical Discussion.

  2. Buçinca i współautorzy: To Trust or to Think.

  3. UNESCO: Guidance for generative AI in education and research.

  4. NIST: Generative Artificial Intelligence Profile.

Twój kolejny krok

Wypróbuj Westudy za darmo

Od pierwszego pomysłu do własnej szkoły online. Twórz, ucz i rozwijaj swój projekt z WeStudy.

Rozpocznij za darmo

30dni za darmo

Przez 30 dni korzystaj bezpłatnie ze wszystkich funkcji