Provođenje web-upitnika* Internetska istraživanja Izv. Prof. Dr. Sc. Marko Maliković Ak. God. 2018/2019 *Prema Tuten, T. L.: Conducting Online Surveys, In Gosling, S. D., Johnson, J. A. Advanced Methods for Conducting Online Behavioral Research, American Psychological Association, 2010.

Je li web-upitnik pogodan način istraživanja za vas? Ako na slijedeća pitanja odgovorite potvrdno: Da li je potrebno da brzo i učinkovito prikupite podatke? Da li imate velik i geografski raspršen uzorak? Da li trebate koristiti multimedijske elemente? Da li se u vašem upitniku preskaču pitanja ovisno o odgovorima ispitanika? Da li ćete koristiti randomizaciju pitanja ili ponuđenih odgovora? Koristite li pitanja otvorenog tipa? Sadrži li vaš upitnik pitanja osjetljive prirode? Da li tema vašeg istraživanja specifična za internet? Ima li ciljana populacija osiguran pristup internetu? Postoji li popis e-mail adresa ciljane populacije? … tada je web-upitnik pogodan način istraživanja

Koraci provođenja web-upitnika Odrediti problem istraživanja Odrediti pitanja i potrebne podatke Utvrditi da li je web-upitnik prigodan način za provođenje vašeg istraživanja Procijeniti moguće probleme pokrivenosti i uzorkovanja i zaključiti da se web-upitnikom može doprijeti do ciljane populacije Odrediti skale koje će se koristiti Izraditi nacrt upitnika na temelju kojeg će se kreirati web-upitnik Utvrditi raspored provedbe istraživanja -> Vidi slijedeći slajd Odrediti dizajn uzorka Pripremiti poruke za ispitanike Programirati web-upitnik i izvršiti potrebne promjene u dizajnu Predtestirati upitnik i prema potrebi izvršiti ispravke Pokrenuti web-upitnik i kontakte Pratiti provedbu istraživanja Zatvoriti upitnik

Koraci provođenja web-upitnika Faza Zadaci Vrijeme Odrediti dizajn uzorka Odrediti je li nam potreban neprobabilistički ili probabilistički uzorak Odabrati okvir Procijeniti je li nam popis ispitanika dostupan i razmotriti eventualni najam popisa Pripremiti poruke za ispitanike Prethodna obavijest Poziv Podsjetnici Programirati web-upitnik i izvršiti potrebne promjene u dizajnu Predtestirati upitnik i prema potrebi izvršiti ispravke Vrlo pažljivo testirati svaku komponentu upitnika Po potrebi izvršiti izmjene i ponovno testirati Predtestirati upitnik s malim brojem ispitanika iz uzorka Pokrenuti web-upitnik i kontakte Ako direktno komuniciramo s ispitanicima tada početi s slanjem poruka U suprotnom započeti s regrutacijom Pratiti provedbu istraživanja Zatvoriti upitnik Pojedini koraci iz tabele su preciznije opisani na daljnjim slajdovima

Određivanje dizajna uzorka Već smo odredili ciljanu populaciju i utvrdili da li je pokrivenost problem Ako ćemo koristiti neprobabilistički uzorak tada to uključuje: upitnike koje popunjavaju dobrovoljci npr. pozivamo ih banerima na često posjećenim web stranicama (baner je reklamni prostor na nekoj web stranici, istaknut tako da bude uočljiv svim posjetiteljima) neprobabilističke panele dobrovoljaca liste e-mail adresa generirane bez probabilističkog uzorkovanja poželjne jer istraživaču omogućavaju: kontakt s potencijalnim ispitanikom izračunavanje stope odaziva određivanje pogreške neodaziva

Određivanje dizajna uzorka Ako ćemo koristiti probabilistički uzorak tada to uključuje: probabilistički paneli za razliku od dobrovoljnih neprobabilističkih panela ovdje se članovi odabiru metodom statističkog uzorkovanja dodjeljuju im se korisnička imena i lozinke kako bi se izbjegli nepozvani članovi ili višestruko ispunjavanje ankete probabilističke liste e-mail adresa za razliku od neprobabilističkih lista ovdje se potencijalni ispitanici odabiru metodom statističkog uzorkovanja web upitnici s pozivom, presretački upitnici koji također mogu pribaviti probabilistički uzorak izabire se svaki n-ti posjetitelj neke web stranice, a višestruko pozivanje istog posjetitelja izbjegava se softverski (uz pomoć kolačića)

Priprema poruka za ispitanike Potrebno je pripremiti slijedeće poruke: Prethodna obavijest Poziv Podsjetnik za ispitanike koji nisu odgovorili na upitnik Podsjetnik za ispitanike koji su djelomično odgovorili na upitnik Drugi podsjetnik za ispitanike koji nisu odgovorili na upitnik Drugi podsjetnik za ispitanike koji su djelomično odgovorili na upitnik

Priprema poruka za ispitanike - Prethodna obavijest - Služi uvođenju potencijalnih ispitanika u istraživanje i ostvarivanje kontakta s njima Može povećati stopu odaziva (Dillman, 2000) Dillman, D. (2000). Mail and Internet surveys: The tailored design method (2nd ed.). New York: Wiley.

Priprema poruka za ispitanike - Poziv - Upute za pisanje poziva: Adresirati poziv potencijalnom ispitaniku osobno (ako je moguće) Identificirati se kao institucija koja provodi istraživanje (vjerodostojnost) Navesti svrhu i važnost istraživanja Zajamčiti povjerljivost i anonimnost Objasniti kako je potencijalni ispitanik odabran Naglasiti važnost njegovih odgovora za istraživanje Ako nudite neki poticaj tada objasniti uvjete Navesti vremenske okvire istraživanja Navesti do kada bi ispitanik trebao odgovoriti na upitnik ugradite poveznicu (link) na upitnik Navesti kontakt podatke za ispitanike koji se žele raspitati o istraživanju, istraživaču i slično Uključite "Unaprijed hvala" ili sličnu izjavu koja podrazumijeva suradnju ispitanika

Priprema poruka za ispitanike - Podsjetnici - Šalju se ispitanicima koji nisu uopće odgovorili na upitnik i ispitanicima koji nisu do kraja popunili upitnik Šalju se dva različita podsjetnika za gornje dvije grupe Također, uobičajeno je da se podsjetnici šalju u dva navrata Isto tako, u ta dva navrata su podsjetnici različiti Drugi podsjetnici trebaju sadržavati datum završetka istraživanja da bi naglasili hitnoću Svako daljnje podsjećanje ispitanika neće pribaviti mnogo novih ispitanika, a negativno će utjecati na cjelokupnu klimu ovakvog načina istraživanja

Priprema poruka za ispitanike - Podsjetnici - U svim navedenim porukama potrebno je pažljivo razmotriti naslov poruke Također je potrebno ispravno postaviti povratnu adresu (replay-to) Treba biti u skladu s poslužiteljem koji služi za slanje poziva Mnogi davatelji internetskih usluga stavljaju filter za neželjenu poštu na temelju gornje usklađenosti Naslov poruke također može utjecati na isporučivost Potrebno je pratiti (ne)isporučivost poruka i procijeniti da li je potrebno napraviti izmjene u naslovima

Programiranje web-upitnika Potrebno je isprogramirati mnoge elemente i osobine upitnika: Broj pitanja po ekranu Grupiranje pitanja Forme za odgovore Randomizacija pitanja Uvjetni prikaz pitanja …

Programiranje web-upitnika - Neke smjernice prema (Reips, 2010; Dillman, 2000; Tourangeau, Couper, Conrad, 2007) - Kreirajte interaktivni upitnik preko više ekrana kad god je potrebno mjeriti vremena reakcije Smjestite više pitanja na jedan ekran kada su ta pitanja vezana kontekstom Neka dizajn upitnika bude jednostavan Napišite ispitanicima jednostavne upute Umetnite pokazivač napretka ali da po mogućnosti pokazuje vrijeme potrebno za dovršetak Ne nametati ispitanicima obavezu odgovaranja na pitanja (osim ako je to neophodno) Omogućiti ispitanicima da zatvore upitnik i nastave s ispunjavanjem kasnije Omogućiti ispitanicima da prijave bilo koji problem Neka upitnik bude kratak (10 minuta ili manje) Reips, U.-D.: Design and Formatting in Internet-Based Research, In Gosling, S. D., Johnson, J. A. Advanced Methods for Conducting Online Behavioral Research, American Psychological Association, 2010. Dillman, D. (2000). Mail and Internet surveys: The tailored design method (2nd ed.). New York: Wiley. Tourangeau, R., Couper, M., Conrad, F. (2007). Color, labels, and interpretive heuristics for response scales. Public Opinion Quarterly, 71, 91-112.

Predtestiranje upitnika i ispravljanje (po potrebi) Dvije faze: Testiranje dizajna Predtestiranje s malom grupom ljudi koja odražava naš uzorak

Predtestiranje upitnika i ispravljanje (po potrebi) - 1 Predtestiranje upitnika i ispravljanje (po potrebi) - 1. Testiranje dizajna - Pitanja na koja treba odgovoriti: Da li upitnik radi ispravno na svim uređajima (PC, Mac, mobiteli, tableti, …) Da li upitnik radi ispravno u svim web preglednicima (Google Chrome, Mozilla Firefox, Internet Explorer, Safari, Microsoft Edge, Opera, ...) Kako se upitnik ponaša na različitim brzinama internetskog spoja Da li logika upitnika radi dobro (uvjetno pojavljivanje pitanja, randomizacija pitanja, …) Da li forme za odgovore rade ispravno (npr. da li upitnik ispravno po defaultu postavlja odgovore, da li u slučaju jednostrukog odgovora sustav zaista omogućava samo jedan odgovor, itd…) Može li se u tekstualna polja upisati dovoljna količina teksta? …

Predtestiranje upitnika i ispravljanje (po potrebi) - 2 Predtestiranje upitnika i ispravljanje (po potrebi) - 2. Predtestiranje s malom grupom - Predtestiranje s malom grupom ljudi koja odražava naš uzorak: Može se obaviti u laboratoriju ili kod kuće Može sadržavati i intervju da bismo potvrdili da su mjere, oblik pitanja, dizajn, itd pogodni Predtestiranje upitnika treba poslužiti za ispravljanje eventualnih nedostataka upitnika

Pokretanje upitnika i kontakata Za određivanje datuma pokretanja upitnika treba razmotriti i eventualne događaje na taj dan koji mogu utjecati na ispitanike (praznici, ispitni rokovi, …) Prije pokretanja upitnika poslati ispitanicima Prethodnu obavijest Nakon što pokrenemo upitnik šaljemo Poziv ispitanicima Pratiti tempo odgovaranja na upitnik i kada se počne usporavati poslati prvi podsjetnik i za one koji nisu uopće odgovorili i za one koji su započeli ali nisu završili s upitnikom Ponovno pratiti odgovaranje i kada se opet uspori poslati drugi podsjetnik

Pokretanje upitnika i kontakata Ako nemamo listu kontakata ili panel tada treba pokrenuti regrutaciju Možemo koristiti oglase (uključujući bannere) na relevantnim web stranicama i web stranicama s velikim prometom Možemo zamoliti organizaciju da promovira sudjelovanje u upitniku I mi možemo javno oglašavati mogućnost sudjelovanja u upitniku Možemo koristiti i tehniku "snježne grude" (zamolimo one koji sudjeluju u upitniku da podijele to s drugima)

Praćenje provedbe istraživanja Pratiti odgovaranje na upitnik Pratiti elektronsku poštu koja je navedena kao kontakt Ispitanici se mogu obratiti za pomoć vezano za upitnik

Zatvaranje upitnika Određenog datuma ili kada više ne stižu odgovori na upitnik zatvaramo ga