205. Podwójne pytania – dlaczego „i” może zepsuć item?
W dobrze zaprojektowanym kwestionariuszu każde pytanie powinno mieć jasno określony przedmiot pomiaru. Respondent powinien wiedzieć, czego dotyczy odpowiedź, a badacz powinien móc zinterpretować ją bez zgadywania, którą część pytania uczestnik miał na myśli. Problem pojawia się wtedy, gdy jeden item zawiera dwa odrębne pytania, ale respondent otrzymuje tylko jedną skalę odpowiedzi. Takie sformułowanie nazywa się pytaniem podwójnym, pytaniem z podwójnym zakończeniem (ang. double-barreled question) albo pytaniem wielowątkowym.
W tej lekcji wyjaśnimy, dlaczego spójnik „i” bywa sygnałem ostrzegawczym, choć sam w sobie nie jest błędem. Pokażemy także, jak rozpoznawać podwójne pytania, jak je rozdzielać oraz kiedy pozornie złożony item może jednak mierzyć jeden szerszy konstrukt. Przykłady będą osadzone przede wszystkim w badaniach medycznych, pielęgniarskich, psychologicznych i zdrowia publicznego. Jest to naturalne rozwinięcie tematów dotyczących budowy kwestionariusza omawianych w publicznym szkoleniu na statystyk.edu.pl.
Czym jest pytanie podwójne?
Pytanie podwójne to takie sformułowanie, w którym respondent ma ocenić co najmniej dwa różne aspekty, cechy, zachowania lub zdarzenia, lecz może udzielić tylko jednej odpowiedzi. Formalnie można zapisać je jako:
Jedna odpowiedź = ocena(A i B)
Jeżeli jednak respondent może mieć różny stosunek do A i B, jedna odpowiedź nie określa, czego faktycznie dotyczy. W praktyce badacz nie wie, czy uczestnik:
- ocenił wyłącznie pierwszy element;
- ocenił wyłącznie drugi element;
- uśrednił obie oceny;
- wybrał odpowiedź odnoszącą się do ważniejszej dla siebie części;
- zgodził się z jedną częścią, ale zignorował drugą;
- zaznaczył odpowiedź przypadkowo, ponieważ nie znalazł odpowiedniej opcji.
To właśnie brak informacji o sposobie interpretacji odpowiedzi jest podstawowym problemem metodologicznym. Pojedynczy wynik nie jest wtedy jednoznacznym pomiarem żadnego z dwóch elementów. Menold (2020), analizując pytania podwójne w badaniach eksperymentalnych, wskazała, że respondenci mogą różnie przetwarzać poszczególne składniki takiego itemu, a różnice między wersją podwójną i rozdzielonymi pytaniami mogą wpływać na trafność, porównywalność i pomiar niezmienniczości.
Dlaczego spójnik „i” może być ostrzeżeniem?
Spójnik „i” często łączy dwa rzeczowniki lub czasowniki, dlatego warto traktować go jako sygnał do kontroli pytania. Nie oznacza to jednak, że każde „i” tworzy pytanie podwójne.
Przykład, w którym „i” nie musi być problemem
Zdanie: „Czy w ciągu ostatnich 7 dni wystąpiły u Pana/Pani nudności i wymioty?” może dotyczyć jednego, zdefiniowanego klinicznie epizodu objawowego, jeżeli celem badania jest ustalenie obecności zespołu objawów. W takim przypadku badacz może świadomie operacjonalizować wspólną kategorię, a nie dwa niezależne objawy. Warunkiem jest jednak jasne określenie, co oznacza odpowiedź „tak”. Czy wystarczyły same nudności? Czy oba objawy musiały wystąpić jednocześnie? Czy jeden objaw bez drugiego oznacza odpowiedź „nie”? Jeśli kwestionariusz tego nie rozstrzyga, sformułowanie staje się niejednoznaczne.
Przykład, w którym „i” tworzy problem
Zdanie: „Jak ocenia Pan/Pani kompetencje i empatię pielęgniarki?” łączy dwa potencjalnie odrębne wymiary oceny. Pacjent może uważać, że pielęgniarka była bardzo kompetentna, ale mało empatyczna. Jedna odpowiedź na skali od „bardzo źle” do „bardzo dobrze” nie pozwala wyrazić tego profilu. Nie wiadomo też, czy końcowa ocena jest oceną kompetencji, empatii czy ich mieszaniny.
Podobny problem występuje w zdaniu: „Czy jest Pan/Pani zadowolony/a z czasu oczekiwania i jakości informacji otrzymanych w izbie przyjęć?”. Osoba badana może być zadowolona z informacji, lecz niezadowolona z oczekiwania. Wartość odpowiedzi „ani zadowolony/a, ani niezadowolony/a” może w takim przypadku oznaczać średnią, niezdecydowanie albo konflikt ocen.
Jak pytanie podwójne wpływa na jakość danych?
Utrata informacji
Najbardziej bezpośrednim skutkiem jest utrata rozróżnienia między dwoma częściami pytania. Jeśli badacz chce wiedzieć, czy pacjenci są zadowoleni z organizacji wizyty oraz z komunikacji personelu, połączenie obu aspektów w jeden item uniemożliwia osobną analizę. Nie można ustalić, który obszar wymaga poprawy.
Nieokreślony błąd pomiaru
Odpowiedź może zależeć od tego, który element respondent uznał za ważniejszy. Dwie osoby zaznaczające „raczej się zgadzam” mogą mieć zupełnie inne opinie: jedna może zgadzać się z pierwszą częścią, a druga z drugą. W konsekwencji zwiększa się błąd pomiaru, ponieważ wynik nie odzwierciedla w sposób stabilny jednej cechy.
Problemy z trafnością konstruktu
Jeżeli skala ma mierzyć satysfakcję pacjenta, a jeden item jednocześnie odnosi się do satysfakcji i zaufania, item może wykraczać poza zdefiniowany konstrukt. Zamiast pomiaru jednego pojęcia otrzymujemy mieszaninę kilku treści. Może to osłabiać trafność treściową, a w skalach wielopozycyjnych prowadzić do niejasnej interpretacji analizy czynnikowej lub rzetelności.
Nie należy automatycznie zakładać, że wysoka alfa Cronbacha rozwiązuje ten problem. Rzetelność opisuje spójność odpowiedzi w określonych warunkach, ale nie gwarantuje, że każdy item mierzy dokładnie to, co planowano. Błędnie skonstruowane, podobne do siebie pytania mogą nawet zwiększać pozorną spójność skali, mimo że jej zakres treściowy jest niejasny.
Ryzyko błędnych decyzji praktycznych
W badaniach zdrowia publicznego konsekwencje mogą być szczególnie ważne. Jeśli pytanie „Czy łatwo uzyskuje Pan/Pani informacje i pomoc w przychodni?” uzyska niskie oceny, nie wiadomo, czy problem dotyczy dostępności informacji, pomocy personelu, czy obu tych obszarów. Interwencja zaprojektowana na podstawie takiego wyniku może być niedopasowana do rzeczywistej potrzeby.
Prosty test wykrywania pytania podwójnego
Przy przeglądzie kwestionariusza można zastosować cztery pytania kontrolne.
- Czy w itemie występują dwa różne obiekty oceny? Na przykład „lekarz i pielęgniarka”, „ból i zmęczenie”, „czas oczekiwania i koszt”.
- Czy można logicznie udzielić różnych odpowiedzi na obie części? Jeśli tak, pytanie wymaga szczególnej ostrożności.
- Czy dla obu części użyto jednej skali odpowiedzi? Jedna odpowiedź dla dwóch treści jest typowym znakiem problemu.
- Czy w analizie chcemy wyciągać osobne wnioski dotyczące każdej części? Jeśli tak, item powinien zwykle zostać rozdzielony.
Przydatny jest także test „odpowiedzi sprzecznych”. Należy wyobrazić sobie osobę, która odpowiada: „zdecydowanie tak” na pierwszą część i „zdecydowanie nie” na drugą. Jeżeli taki profil jest sensowny, a kwestionariusz nie pozwala go zaznaczyć, najprawdopodobniej mamy do czynienia z pytaniem podwójnym.
Jak poprawić podwójny item?
Rozwiązanie 1: rozdziel pytanie na dwa itemy
To najczęściej najlepsza procedura. Zamiast:
„Czy leczenie było skuteczne i dobrze tolerowane?”
należy zapytać osobno:
- „W jakim stopniu leczenie zmniejszyło nasilenie objawów?”
- „W jakim stopniu leczenie było dobrze tolerowane?”
Warto dopasować skalę do treści. Skuteczność może być oceniana od „wcale nie zmniejszyło objawów” do „zmniejszyło objawy całkowicie”, natomiast tolerancja od „bardzo źle tolerowane” do „bardzo dobrze tolerowane”. Identyczna skala dla obu itemów nie zawsze jest najlepszym rozwiązaniem.
Rozwiązanie 2: wybrać ważniejszy aspekt
Jeśli długość kwestionariusza jest ograniczona, nie należy automatycznie łączyć pytań. Lepiej zdecydować, który wymiar odpowiada głównemu celowi badania. W badaniu dotyczącym przestrzegania zaleceń można wybrać pytanie o zrozumienie instrukcji, a nie łączyć je z oceną ich praktycznej wykonalności.
Rozwiązanie 3: zdefiniować jeden nadrzędny konstrukt
Czasami połączenie dwóch elementów jest uzasadnione, ale wymaga wyraźnej definicji. Przykładowo „ogólna jakość opieki” może być szerokim konstruktem obejmującym komunikację, organizację i bezpieczeństwo. Wtedy nie należy udawać, że item mierzy jeden prosty aspekt. Trzeba określić model pomiaru, uzasadnić dobór treści i sprawdzić, czy respondenci rozumieją item zgodnie z założeniem.
W praktyce badawczej ta opcja jest trudniejsza niż zwykłe rozdzielenie pytań. Wymaga dowodów z oceny eksperckiej, wywiadów kognitywnych, pilotażu oraz – w przypadku skali – analizy struktury wewnętrznej. Samo przekonanie autora, że dwa elementy „pasują do siebie”, nie jest wystarczającym uzasadnieniem.
Przykład praktyczny: ankieta satysfakcji pacjentów
Załóżmy, że zespół bada doświadczenia pacjentów po wypisie ze szpitala. W pierwszej wersji kwestionariusza umieszczono item:
„Personel przekazywał jasne informacje i odpowiadał na moje pytania.”
Respondent zaznacza odpowiedź na pięciostopniowej skali zgody. Problem polega na tym, że item obejmuje co najmniej dwa zachowania: jasność przekazywania informacji oraz gotowość do odpowiadania na pytania. Pacjent mógł otrzymać zrozumiałą kartę informacyjną, ale mieć trudność z uzyskaniem odpowiedzi od personelu.
Po rozdzieleniu itemy mogą brzmieć:
- „Informacje dotyczące dalszego postępowania były dla mnie jasne.”
- „Personel odpowiadał na moje pytania dotyczące dalszego postępowania.”
Drugi item wymaga dodatkowo warunku „jeśli zadawał/a Pan/Pani pytania” albo odpowiedzi „nie dotyczyło mnie”. Bez tej opcji osoba, która nie zadawała pytań, może losowo wybrać odpowiedź lub potraktować brak doświadczenia jako ocenę negatywną. To pokazuje, że naprawa pytania podwójnego może ujawnić kolejny problem: niedopasowanie kategorii odpowiedzi do doświadczeń respondentów.
Przykład z psychologii i pielęgniarstwa
Rozważmy item używany w badaniu wypalenia zawodowego pielęgniarek:
„Czuję się emocjonalnie wyczerpany/a i mam trudności z koncentracją podczas pracy.”
Emocjonalne wyczerpanie i trudności z koncentracją mogą współwystępować, ale nie są tym samym objawem. Pierwszy dotyczy przede wszystkim zasobów emocjonalnych, drugi funkcjonowania poznawczego. Osoba badana może odczuwać wyczerpanie bez problemów z koncentracją albo odwrotnie, na przykład z powodu niewyspania, bólu lub działania leków.
Lepsza wersja zawiera dwa itemy:
- „Jak często w ostatnich 2 tygodniach czuł/a się Pan/Pani emocjonalnie wyczerpany/a z powodu pracy?”
- „Jak często w ostatnich 2 tygodniach miał/a Pan/Pani trudności z koncentracją podczas pracy?”
Rozdzielenie pytań poprawia interpretowalność, ale nie rozstrzyga jeszcze, czy oba objawy powinny należeć do jednej skali. To osobna decyzja dotycząca modelu konstruktu i wymaga uzasadnienia teoretycznego oraz empirycznego.
Testowanie poprawionej wersji
Po rozdzieleniu itemu nie należy od razu przechodzić do badania głównego. Warto przeprowadzić krótki pilotaż. Można poprosić kilka osób z populacji docelowej o:
- głośne wyjaśnienie, jak rozumieją pytanie;
- wskazanie, do czego odnosi się wybrana odpowiedź;
- opisanie, czy brakowało im opcji „nie dotyczy”;
- ocenę, czy pytanie jest zrozumiałe i odpowiada ich doświadczeniu.
W badaniu formalnym warto udokumentować wersję pierwotną, powód zmiany, wyniki oceny eksperckiej i pilotażu. Takie informacje zwiększają przejrzystość procesu tworzenia narzędzia. Artino i współautorzy (2014) podkreślają, że rozwój kwestionariusza powinien obejmować nie tylko redagowanie zdań, lecz także określenie celu pomiaru, konstrukcję treści, ocenę zrozumiałości i późniejsze sprawdzanie właściwości pomiarowych.
Najczęstsze błędy
- Mechaniczne usuwanie każdego „i”. Spójnik może łączyć elementy jednego, zdefiniowanego konstruktu. Trzeba oceniać znaczenie, a nie samą gramatykę.
- Łączenie pytań dla skrócenia kwestionariusza. Krótszy instrument nie jest automatycznie lepszy, jeśli pojedyncze odpowiedzi stają się nieinterpretowalne.
- Założenie, że respondent „wie, o co chodziło autorowi”. W badaniu liczy się komunikat przedstawiony uczestnikowi, nie intencja badacza.
- Używanie jednej skali do dwóch różnych treści. Ta sama skala może być wygodna technicznie, lecz nie musi pasować do obu elementów.
- Brak kategorii „nie dotyczy”. Po rozdzieleniu pytania może okazać się, że część respondentów nie miała doświadczenia z daną sytuacją.
- Traktowanie wysokiej rzetelności jako dowodu poprawności itemu. Rzetelność nie zastępuje trafności treściowej i oceny procesu odpowiadania.
- Sumowanie odpowiedzi bez sprawdzenia struktury pomiaru. Dwa odrębne pytania nie muszą tworzyć jednej skali tylko dlatego, że znalazły się w tym samym bloku.
- Brak dokumentacji zmian. W publikacji powinno być jasne, jak generowano itemy, jakie były kryteria ich modyfikacji i czy przeprowadzono pilotaż.
Co warto zapamiętać?
- Pytanie podwójne łączy co najmniej dwa aspekty, ale wymaga jednej odpowiedzi.
- Spójnik „i” jest sygnałem kontrolnym, a nie automatycznym dowodem błędu.
- Najważniejsze pytanie brzmi: czy respondent może mieć różną opinię lub różne doświadczenie dotyczące obu części?
- Jeżeli tak, najczęściej należy rozdzielić item na dwa pytania.
- Jedna odpowiedź na dwa składniki prowadzi do utraty informacji i niejasności interpretacyjnej.
- W badaniach medycznych trzeba dodatkowo uwzględniać odpowiedź „nie dotyczy”, ramę czasową i definicje kliniczne.
- Po poprawie itemu warto wykonać pilotaż lub wywiad kognitywny.
- Nie należy mylić krótkiego kwestionariusza z dobrym kwestionariuszem.
Dobrze zaprojektowany item jest możliwie jednolity treściowo, odpowiada celowi badania i prowadzi respondenta do odpowiedzi, którą badacz potrafi jednoznacznie zinterpretować. Zanim więc zaakceptujesz pytanie zawierające „i”, sprawdź, czy opisuje ono jeden nadrzędny konstrukt, czy tylko ukrywa dwa różne pytania w jednym zdaniu.
Źródła i dalsza lektura
- Menold, N. (2020). Double Barreled Questions: An Analysis of the Similarity of Elements and Effects on Measurement Quality. Journal of Official Statistics, 36(4), 855–886. DOI: 10.2478/jos-2020-0041.
- Hinkin, T. R. (1998). A Brief Tutorial on the Development of Measures for Use in Survey Questionnaires. Organizational Research Methods, 1(1), 104–121. DOI: 10.1177/109442819800100106.
- Artino, A. R., Jr., La Rochelle, J. S., Dezee, K. J., & Gehlbach, H. (2014). Developing questionnaires for educational research: AMEE Guide No. 87. Medical Teacher, 36(6), 463–474. DOI: 10.3109/0142159X.2014.889814.
- European Commission, Eurostat (2005). Handbook of Recommended Practices for Questionnaire Development and Testing in European Statistical Surveys. European Commission, Eurostat. Informacja wydawcy / źródło.
- Government Analysis Function (2022). Questionnaire design guidance. Government Analysis Function, UK Government. Źródło.
- Pasek, J., & Krosnick, J. A. (2010). Optimizing Survey Questionnaire Design in Political Science: Insights from Psychology. The Oxford Handbook of American Elections and Political Behavior, 27–50. DOI: 10.1093/oxfordhb/9780199235476.003.0003.