Bullshit detektor u znanosti: ekonomsko zlostavljanje


Jučer sam vodio zanimljivu raspravu o tome jesu li neke studije koje imam na stranici relevantne za nas ili čak u svojim sredinama. U sklopu toga pojavilo se zanimljivo pitanje koje je vrlo važno za sposobnost kritičnog razmišljanja i filtriranja svih informacija koje nam danas dolaze podjednako iz laičkih i znanstvenih izvora: kako odrediti vjerodostojnost studije? Kao primjer kriterija za rasuđivanje, evo dvije analize:

A) Svaku treću ženu u hrvatskoj partner zlostavlja ekonomskiKlasni?, K., Sarnavka S.; Konstrukcija i evaluacija skala namijenjezinih mjerenju prepoznavanja i iskustava ekonomskog nasilja nad ženama u intimnim vezama; FFZG, B.A.B.E.; 2013.

U obranu ovog istraživanja koje je stajalo vrtoglavih 80 000 kn, nisam siguran je li tako ispalo zbog namjere ili razine stručnosti autorica, ili su samo mediji napuhali tvrdnje i time dali pogrešan dojam, no svejedno će poslužiti kao dobar model nekih manjkavosti u znanstvenim radovima u ovom području. Kao prvo, pogledajmo kako je sastavljen upitnik:

…kvalitativnu analizu triju skupina žena pomoću dubinskih intervjua: 1. žena žrtvi obiteljskog nasilja (bivše ili sadašnje ?tišenice sigurnih kuća na području Zagreba), 2. žena u intimnim vezama kod kojih ne postoji službeno evidentirana povijest nasilja od strane intimnog partnera te 3. žena čiji se muževi ili vanbračni partneri liječe od ovisnosti o kockanju (otprilike 10 žena iz svake skupine).

Jednom kada su te tri skupine od po 10 žena navele kakve su oblike nasilja iskusile, po tome je dizajnirana skala po kojoj žene mogu kvantitativno izraziti koliko se koji oblik nasilja odnosi na njih. Do sada sve ok (naravno, ako izuzmemo slona u sobi u obliku ne-uključivanja niti jednog muškarca u intervjue, kao da ta demografska skupina ne može nikada trpiti nasilje).

Ovisno o okolnostima, anketno će istraživanje biti provedeno ili na reprezentativnom uzorku žena Republike Hrvatske (N=600) ili na prigodnom uzroku žena grada Zagreba koje su u intimnim vezama (N=200).

Uzorak je u redu. No problem nastaje u tumačenju rezultata. Recimo, pogledajmo ove rezultate.

A1) Razvodnjavanje i navođenje na odgovor
žene u uzorku iskusile su sljedeće pojave:

– partner višekratno prigovarao načinu na koji partnerica troši vlastiti novac (15,4%)

– dovodio je u situaciju da je morala lagati o cijeni nečega što si je kupila (13,5%) ili je kupljeno morala skrivati (13,1%)
– bez njezina je znanja ili dopuštenja uzimao njezin ili zajednički novac (13,4%)
– donosio važne odluke o ulaganju ili trošenju njezinog ili zajedničkog novca bez dogovora s partnericom (10,6%)
– ponašao se kao da je njegov novac samo njegov, a njezin je novac zajednički (9,8%),
– onemogućavao partnerici da vlastiti novac troši onako kako ona želi (8,9%),
– dovodio je u situaciju da nema novca za osnovne životne potrebe poput hrane, režija, odjeće (8,4%)
– branio joj da troši vlastiti ili zajednički novac (7,7%)
– tajio joj informacije o stanju zajedničkog računa (7,3%)

Kao prvo, nailazimo na problem subjektivnosti, odnosno unošenja ekstremnih vlastitih kriterija u nešto što bi trebalo biti objektivno istraživanje. Naime, “partner višekratno prigovarao načinu na koji partnerica troši vlastiti novac (15,4%)” nije nasilje. Nigdje se na navodi upotreba sile, prijetnje, prijevare ili nečeg sličnog. To vodi do razvodnjavanja pojma “nasilje” do samog besmisla. Ekvivalent bi bilo istraživanje o tome koliko su muškarci imali seksualnih partnera gdje se zaključak donosi na temelju odgovora “koliko ste žena poljubili” u životu. To jednostavno nije ista kategorija. Dapače, uvredljivo je za sve one žene kojima je partner stvarno na silu oduzeo kreditnu karticu i zaprijetio im ako se usude zaposliti.

Isto tako, “bez njezina je znanja ili dopuštenja uzimao njezin ili zajednički novac (13,4%)” je u suprotnosti sa sljedečim indikatorom “branio joj da troši vlastiti ili zajednički novac (7,7%)”. Ukoliko on mora nju pitati za dopuštenje za uzimanje zajedničkog novca, te je nasilje ako ne pita, zašto je onda nasilje ako ona mora tražiti njegovu dozvolu? Ili uzimanje zajedničkog bez pitanja nije nasilje ili jest, odlučite se.

štoviše, sve ovo ispada pogotovo licemjerno kada se jedna od skupina žena koje su sastavljale upitnik sastojala od žena s muževima na liječenju od ovisnosti o kockanju. Izgleda da, ako one prigovore muževima što troše svoj novac na kockanje, to je sve u redu, no ako muškarac prigovori ženi o njezinom novcu iz bilo kojeg razloga, to je nasilje. Isto tako, siguran sam da su muževi kockari vrlo često dovedeni u tobože nasilnu situaciju da su morali “skrivati kupljeno”, no tu se nitko nije bunio.

Iz svega toga izveden je sljedeči zaključak:

Gotovo svaka treća žena u Hrvatskoj (ili 29%) koja živi u intimnoj vezi s partnerom doživjela je ekonomsko nasilje. Novine zatim to dodatno napuhuju na “svaka treća” s ciljem stvaranja moralne panike.

Samo jednu kategoriju nasilja? Možda baš jednu od ove tri s očitim problemima koje sam naveo? Dvije kategorije? Pet? Svih osam? Ne znamo. Uzevši u obzir da je najbenignija i najšira kategorija tek na 15%, nisu velike ćanse da je bila potrebna kombinacija vrsta nasilja da bi se ženu opisalo kao ekonomski zlostavljanu.

Sve ovo nam daje osnovane razloge vjerovati da je studija provedena s nekom skrivenom agendom koja je dovela do formuliranja pitanja kako bi bio potvrđen unaprijed donesen zaključak, a ne utvrđena objektivna istinitost hipoteza istraživanja. Umjesto da se iz podataka izvede zaključak, iz zaključka su prikupljeni podaci. U najgorem slučaju, studija je maliciozna. U najboljem, treba uzeti rezultate s oprezom.

A2) Histeriziranje suprotnih podataka
“Zanimljivi su i podaci koji se odnose na ekonomsko nasilje nakon prekida braka ili veze, jer je … gotovo 8% žena moralo otiči iz partnerova stana ili kuće iako su u tu nekretninu zajednički ulagali.”

čak 8% žena moralo je napustiti partnerovu nekretninu, iako su oboje ulagali u nju! Podatak zvuči šokantno dok se ne uzme u obzir da to mora značiti da, osim ovih 8% koje su doživjele najgore moguće – bile izbašene iz zajedničkog ulaganja – ostaje miks od 92% razvedenih/single žena koje su poslije prekida braka ili veze doživjele nekakav drugi ishod: ili pošten za oboje ili nepoštena prema muškarcima. Razlikujuči to u čijem je vlasništvu nekretnina i, ako je samo nečija a ne zajednička, tko je ulagao u nju tako da stekne neku razinu prava kao da je zajednička, ostali moguči ishodi za žene su:

a) ostale u vlastitoj nekretnini u koju partner nije ulagao (pošteno)
b) ostale u vlastitoj nekretnini, iako je i partner ulagao u nju (nepošteno prema muškarcima)
c) otiči iz njegove nekretnine u koju nisu ulagale (pošteno)
d) ostale u njegovoj nekretnini u koju nisu ulagale (nepošteno prema muškarcima)
e) ostale u zajedničkoj nekretnini zajedno s partnerom (pošteno)
f) ostale u zajedničkoj nekretnini, a partner morao otiči (nepošteno prema muškarcima)

Kolika je ćansa da opcije b, d i f također ne čine barem 8% ishoda razvoda / prekidaš Kolika je ćansa da opcije a, c i e čine svih ostalih 92% slučajeva? Studija ne kaže.

Popis ne sadrži mogućnost “otiči iz vlastite nekretnine u koju partner nije ulagao (nepošteno prema ženama)”)” jer je, sasvim očigledno, ta mogućnost mnogo gora od odlaska iz njegove nekretnine u koju se ulagalo ili zajedničke nekretnine pa bi zasigurno bila navedena da se ikada dogodila ili bi bila ubrojena u spomenutih 8%.
Isto tako studija ne spominje je li tih 8% žena prisiljenih na odlazak iz nekretnine u koju su zajednički ulagali dobilo nekakvu drugu kompenzaciju, kao recimo automobil, drugu nekretninu, uzdržavanje, nadprosječno visoku alimentaciju i sl. Ovaj podatak sam po sebi ne znači apsolutno ništa, kao da sam izbrojao stabla u nekom parku i ostao na tome, ne usporedivši ih ni s čime.

Za usporedbu, pogledajmo drugu studiju jednom citiranu na ovom blogu:

B) Zašto žene stvarno vole narcisoidne psihopate
Ovdje su karakterne osobine mračnog trojstva utvrđene objektivnim, univerzalnim testom MACH-IV koji mjeri sljedeće:

– narcisoidnost – grandiozni pogled na samog sebe, osjećaj zasluživanja, egoizam
– makijavelizam – manipulacija, eksploatacija drugih, upotreba prijevare i cinično odbacivanje moralnosti zbog fokusa na sebe
– psihopatstvo – impulzivna sklonost uzbuđenjima, sebičnost, okrutnost, nesposobnost empatije za druge, odsustvo ćaljenja ili osjećaja krivnje

… i postavljena je hipoteza da ljudi s osobinama mračnog trojstva (izraženim jednim, dvoje ili troje navedenih) imaju više seksualnih partnera i općenito su seksualno privlačniji.

B1) Test ne razvodnjava osobine i ni na koji način ne navodi na odgovore ili zaključke kao što radi prva studija. Ono što je još važnije, ne ovisi o jednostavnom odgovoru da/ne, već je stupnjevit i omogućava praćenje korelacije na više razina.

Ukoliko primjenite ovaj test na bilo koji slučajni uzorak, sigurno je da ćete dobiti normalnu distribuciju osobina – veliku večinu blizu prosjeka, te određen dio znatno ispod i znatno iznad. Onda ih možete sortirati po drugim osobinama koje slijede neku drugu distribuciju i tako uspoređivati. Razlika između dva grafa je korelaciju koju tražite i po kojoj donosite zaključke.

B2) Pitanja za upitnik formulirana na temelju prosjeka populacije, ne ekstrema
Druga pozitivna odlika ovog istraživanja je to što je uzorak slučajan unutar jednog sveučilišta. Istraživaži nisu posjetili zatvor kako bi formirali pitanja za test, već su uzeli populacijske prosjeke. Ali, reči ćete, isto kao i u prošlom istraživanju, samo smo skupili neki uzorak, testirali ih i pitali. Možda su lagali o svojoj seksualnoj prošlosti. Ili možda njihov uspjeh nije rezultat mračnog trojstva, već dobrog izgleda ili nečeg trećeg. Naravno, te druge faktore su provjerile druge studije.

Dating Preferences of University Women: An Analysis of the Nice Guy Stereotype
Young Women’s Dating Behavior: Why/Why Not Date a Nice Guy?

B3) Multifaktorska analiza, više ishoda, ne ovisi isključivo o samo-opisivanju
U ovom slučaju, opet je prikupljen reprezentativan muški uzorak i utvrđena distribucija osobina mračnog trojstva unutar uzorka, kao i broj seksualnih partnerica. Zatim su slike svih subjekata dane grupi žena na ocjenjivanje, te je svaki subjekt dobio i prosječnu ocjenu izgleda od 1 do 10. Time je isključena mogućnost da studenti sami ocjenjuju svoj izgled pa da oni s više mračnog trojstva umišljeno sami sebe opiću ljepšima nego što jesu. Korigirano za razlike u njihovom izgledu, subjekti su opet imali mjerljive razlike u seksualnom uspjehu koje su korelirale s njihovom razinom osobina mračnog trojstva.

čak i ako kažemo da su ova istraživanja reprezentativna samo za svoje sredine (npr. uzorak s američkog kampusa samo za SAD), pa stoga možda ne vrijede za cijeli svijet, moguće je lako provesti meta-analizu nacionalnih studija, iz koje će se pronađi interval pouzdanosti rezultata za ostatak svijeta gdje istraživanja još nisu provedena. Isto je učinio i David Schmitt sa Sveučilišta Bradley u Illionisu, kada je istražio isto na uzorku od 35 000 ljudi iz 57 zemalja i pronašao istu povezanost. “čini se da je ova pravilnost univerzalana diljem svijeta,” rekao je. Sve ovo upučuje na to da se studiju može uzeti kao ispravan izvor podataka.

Zaključak: kada radite ili analizirate studiju, uvijek morate obratiti pozornost na njezine slabe točke – odnos korelacije i uzroka, oslanja li se isključivo na izjave ili mjeri i neke objektivne stvari, navodi li na odgovore, te poklapaju li se zaključci istraživanja sa stvarno prikupljenim podacima. Sve drugo je nepošteno prema vašem čitateljstvu.

Oznake: znanost, mračno trojstvo, zlostavljanje, feminizam

16 misli o “Bullshit detektor u znanosti: ekonomsko zlostavljanje”

  1. Ne, ne svidja mi se slika niti mi se svidja nacin na koji si to prezentirao,za jednu osobu koja voli studije a ne osobe koje to prezentiraju ,cudan ti je post.

    Odgovori
  2. Ovo prvo istrazivanje je smiješno.

    Spominju reprezentativni uzorak a prema ovome “1. žena žrtvi obiteljskog nasilja… , 2. žena u intimnim vezama kod kojih ne postoji službeno evidentirana povijest nasilja … 3. žena čiji se muževi ili vanbračni partneri liječe od ovisnosti o kockanju ” ispada da je 1/3 muskaraca evidentirana kao nasilna, da 1/3 muskaraca ima problem s kockom i ostaje zadnja trecina koja je kao OK.

    Analogno ovome bi bilo uzeti uzorak u kojem je sa 2/3 zastupljena zatvorska populacija i sa 1/3 slobodni gradjani i onda zakljuciti da je 66% ljudi pocinilo kazneno djelo.

    Logicka greska analize nereprezentativnog uzorka. Rezultati dobiveni valjanom analizom nereprezentativnog uzorka su nevaljani, kao i oni dobiveni nevaljanom analizom reprezentativnog uzorka.

    Odgovori
  3. @Princeza: uvijek na usluzi 😉

    @John: u osnovi da, ali nije ono što im zamjeram. Mislim da si malo krivo shvatio što sam htio reči. Te njihove 3 grupe nisu uzorak. Uzorak je uistinu (barem se nadam) 600 reprezentativnih žena s područja Zagreba po slučajnom odabiru i to je ok. 3 grupe su samo služile za sastavljanje upitnika.

    Problem je što su sastavili upitnik po tome, stoga su dobili bizarne kriterije. Recimo, gotovo svaka zlostavljana žena iz te grupe za izradu upitnika je iskusila nekakvo ozbiljno zlostavljanje, plus neku glupost tipa “partner mi je prigovarao o trošenju” koja je benigna i ne znači ništa.
    To im je dalo tobožnji legitimitet da tu benignu pojavu proglase istom kao i teškim zlostavljanjem, i stoga svaku ženu koja je to ikada iskusila opiću kao zlostavljanu. To je moć dimne zavjese. A tek onda slijede druge greške koje se tišu navođenja na odgovore, konfliktnih pitanja, površnosti…

    Da su pogriješili i uzeli nereprezentativan uzorak, to bi ipak bilo ispod čak i razine prve godine fakulteta. Umjesto toga, njihove greške su malo perfidnije i neprofesionalne, ali ipak ne toliko grozne.

    Odgovori
  4. ćim sam vidio tko je autorica ove studije o ekonomskom zlostavljanju (S.Sarnavka – predsjednica feminističke udruge BABE), odmah znam da ne može biti objektivna i znanstveno relevantna…

    Odgovori
  5. @Ronin: ona je samo jedan od mentora ili suradnika u provedbi. Autor je neka druga žena koja je na tu temu radila doktorat. Njoj bravo na uhljebljenju i ćelim joj mnoge godine dobro plaćenog posla u kojemu nama budalama gura ovakve studije 😀 Ne mogu svi bit Erin Pizzey…

    Odgovori
  6. @kazanova: postoje ozbiljne indikacije da je Vitaly taj video u potpunosti režirao, kao možda i neke prošle, tako da ga ne mogu shvatiti ozbiljno ili komentirati sa stajališta igre. Naravno, to ne znači da treba sve njegovo – recimo, neki ljudi su imali uspjeha s onim “daj mi broj” pristupom

    Novi post: što je to muški šovinist?

    Odgovori
  7. @igniss
    Kad su rezultati nečega unaprijed zadani i moraju se ostvariti, metode i ispitanici postaju samo sredstvo kojeg se ne treba držati kao pijan plota 🙂

    Info: prema HR propisima o javnoj nabavi, na narudžbenicu (od bilo koga i bez postupka) se može uzeti do 69999 kn + PDV. Iznad toga mora biti neki od postupaka javne nabave.
    Koja je bila svrha ovog “istraživanja”? Zašto baš ovako zgodna svota (80-tak tis. kn – s PDV-om?) Kakva je struktura troškova (kome je otiči taj novac na što), naročito u kontekstu toga da je u pitanju znanstveni rad čiji su troškovi već pokriveni? Nemam sve informacije na raspolaganju, ali ako nas već kopkaju ovakva pitanja, osjećamo kako nešto ne štima, očigledno ima nečega što bi trebalo pojasniti.
    Naravno, ukoliko to upita?, proglasit će te muškim šovinistom i mizoginikom 🙂

    Odgovori

Komentiraj