Emocionalna zaraza na Facebooku? Više poput loših metoda istraživanja

Nedavno je objavljena studija (Kramer i sur., 2014.) koja je nešto pokazala začuđujući - ljudi su promijenili svoje osjećaje i raspoloženja na temelju prisutnosti ili odsutnosti tuđih pozitivnih (i negativnih) raspoloženja, kako je izraženo u ažuriranjima statusa na Facebooku. Istraživači su taj efekt nazvali "emocionalnom zarazom", jer su navodno pokazali da riječi naših prijatelja na našem Facebook feedu vijesti izravno utječu na naše raspoloženje.

Nema veze što istraživači zapravo nikada nisu mjerili ničije raspoloženje.

I nema veze da studija ima fatalnu manu. Jedno koje su druga istraživanja također previdjela - čineći nalaz svih ovih istraživača pomalo sumnjivim.

Ako se ostavi na stranu smiješni jezik koji se koristi u ovakvim vrstama studija (stvarno, osjećaji se šire poput „zaraze“?), Ove vrste studija često do svojih nalaza dolaze provođenjem analiza jezika na sitnim dijelovima teksta. Na Twitteru su stvarno maleni - manje od 140 znakova. Ažuriranja statusa na Facebooku rijetko su veća od nekoliko rečenica. Istraživači zapravo ne mjere ničije raspoloženje.

Pa, kako provoditi takvu jezičnu analizu, posebno na 689.003 ažuriranja statusa? Mnogi se istraživači za to obraćaju automatiziranom alatu, nečemu što se naziva Linguistic Inquiry and Word Count (LIWC 2007). Autori su ovu softversku aplikaciju opisali kao:

Prva aplikacija LIWC razvijena je kao dio istraživačke studije jezika i otkrivanja (Francis, 1993; Pennebaker, 1993). Kao što je opisano u nastavku, druga verzija, LIWC2007, ažurirana je revizija izvorne aplikacije.

Zabilježite te datume. Mnogo prije osnivanja društvenih mreža, LIWC je stvoren za analizu velikih dijelova teksta - poput knjige, članka, znanstvenog rada, eseja napisanog u eksperimentalnom stanju, članaka na blogu ili prijepisa terapijske sesije. Imajte na umu jedno zajedničko svima njima - dobre su dužine, s najmanje 400 riječi.

Zašto bi istraživači koristili alat koji nije dizajniran za kratke isječke teksta da bi, pa ... analizirali kratke isječke teksta? Nažalost, to je zato što je ovo jedan od rijetkih dostupnih alata koji može prilično brzo obraditi velike količine teksta.

Koga briga koliko dugo tekst treba mjeriti?

Možda sjedite tamo i češkate se po glavi, pitajući se zašto je važno koliko dugo tekst pokušavate analizirati ovim alatom. Jedna rečenica, 140 znakova, 140 stranica ... Zašto bi dužina bila bitna?

Duljina je bitna jer alat zapravo nije baš dobar u analizi teksta na način na koji su mu to postavili istraživači Twittera i Facebooka. Kad od njega zatražite da analizira pozitivne ili negativne osjećaje teksta, on jednostavno broji negativne i pozitivne riječi unutar teksta koji se proučava. Za članak, esej ili unos na blogu ovo je u redu - pružit će vam prilično točnu ukupnu sažetku analize članka, jer većina članaka ima više od 400 ili 500 riječi.

Međutim, za tweet ili ažuriranje statusa ovo je užasan alat za analizu. To je zato što nije dizajniran za razlikovanje - i zapravo, ne mogu razlikovati - negacijska riječ u rečenici.1

Pogledajmo dva hipotetska primjera zašto je to važno. Evo dva uzorka tweetova (ili ažuriranja statusa) koja nisu rijetka:

"Nisam sretan."

"Nemam sjajan dan."

Neovisni ocjenjivač ili sudac ocijenio bi ova dva tweeta negativnim - očito izražavaju negativnu emociju. To bi bilo +2 na negativnoj ljestvici, a 0 na pozitivnoj ljestvici.

Ali alat LIWC 2007 to ne vidi tako. Umjesto toga, ocijenila bi ova dva tweeta ocjenom +2 za pozitivnu (zbog riječi "sjajno" i "sretno") i +2 za negativnu (zbog riječi "ne" u oba teksta).

To je ogromna razlika ako vas zanima nepristrano i precizno prikupljanje i analiza podataka.

A budući da velik dio ljudske komunikacije uključuje suptilnosti poput ove - a da se uopće ne upuštamo u sarkazam, kratice kratica koje djeluju kao negativne riječi, fraze koje negiraju prethodnu rečenicu, emojije, itd. - ne možete ni reći koliko su točne ili netočne rezultirajuća analiza ovih istraživača je. Budući da LIWC 2007 ignorira ove suptilne stvarnosti neformalne ljudske komunikacije, tako i istraživači.2

Možda zato što istraživači nemaju pojma koliko je zapravo loš problem. Jer oni jednostavno šalju sve te "velike podatke" u mehanizam za analizu jezika, a da zapravo ne razumiju kako je mehanizam za analizu manjkav. Je li 10 posto svih tweetova koji uključuju negativnu riječ? Ili 50 posto? Istraživači vam nisu mogli reći.3

Iako su istinite, istraživanje pokazuje male učinke iz stvarnog svijeta

Zbog toga moram reći da, čak i ako vjerujete da je ovo istraživanje nominalno, unatoč ovom ogromnom metodološkom problemu, i dalje vam preostaju istraživanja koja pokazuju smiješno male korelacije koje običnim korisnicima imaju malo ili nimalo značenja.

Na primjer, Kramer i sur. (2014) pronašli 0,07% - to nije 7 posto, to je 1/15 od jednog posto !! - smanjenje negativnih riječi u ažuriranjima statusa ljudi kada se smanjio broj negativnih postova na njihovom feedu vijesti na Facebooku. Znate li koliko biste riječi morali pročitati ili napisati prije nego što napišete jednu negativnu riječ manje zbog ovog učinka? Vjerojatno tisuće.

Ovo nije toliko "efekt" koliko statistički blip koji nema stvarno značenje. To priznaju i sami istraživači, napominjući da su njihove veličine učinaka bile „male (kao male kao d = 0,001). " Dalje sugeriraju da je to još uvijek važno jer "mali učinci mogu imati velike agregirane posljedice" pozivajući se na Facebook-ovu studiju o motivaciji za političko glasanje jednog od istih istraživača i argument star 22 godine iz psihološkog časopisa.4

Ali oni si proturječe u prethodnoj rečenici, sugerirajući da je na emocije „teško utjecati s obzirom na raspon svakodnevnih iskustava koji utječu na raspoloženje“. Koji je? Da li ažuriranja statusa Facebooka značajno utječu na emocije pojedinca ili na emocije ne utječe tako lako jednostavnim čitanjem ažuriranja statusa drugih ??

Unatoč svim tim problemima i ograničenjima, ništa od toga na kraju ne sprječava istraživače da izjave: "Ovi rezultati ukazuju na to da osjećaji koje drugi izražavaju na Facebooku utječu na naše vlastite osjećaje, što predstavlja eksperimentalni dokaz masovne zaraze putem društvenih mreža." 5 Opet, bez obzira što zapravo nisu mjerili emocije ili stanja raspoloženja jedne osobe, već su se umjesto toga oslanjali na pogrešnu mjeru procjene.

Po mom mišljenju, ono što istraživači Facebooka jasno pokazuju jest da previše vjeruju u alate koje koriste bez razumijevanja i rasprave o značajnim ograničenjima alata.6

upućivanje

Kramer, ADI, Guillory, JE, Hancock, JT. (2014). Eksperimentalni dokazi masovne emocionalne zaraze putem društvenih mreža. PNAS. www.pnas.org/cgi/doi/10.1073/pnas.1320040111

fusnote:

1. To je prema upitu programerima LIWC-a koji su odgovorili: „LIWC trenutno ne gleda postoji li negativni pojam u blizini pozitivne ili negativne riječi emocija u njegovom bodovanju i bilo bi teško smisliti učinkovit algoritam za ovo svejedno. " [↩]
2. Nisam mogao spomenuti ograničenja upotrebe LIWC-a kao alata za analizu jezika u svrhe za koje nikada nije bio dizajniran ili namijenjen u ovoj studiji ili drugim studijama koje sam ispitivao. [↩]
3. Pa, mogli bi vam reći jesu li zapravo proveli vrijeme potvrđujući svoju metodu pilot-studijom radi usporedbe s mjerenjem stvarnog raspoloženja ljudi. Ali ovi istraživači to nisu uspjeli. [↩]
4. Postoje ozbiljni problemi s istraživanjem glasovanja na Facebooku, od kojih je najmanje pripisivanje promjena u ponašanju glasanja jednoj korelacijskoj varijabli, s dugim popisom pretpostavki koje su istraživači napravili (i s kojima biste se morali složiti). [↩]
5. Zahtjev za pojašnjenjem i komentarom autora nije vraćen. [↩]
6. Ovo nije iskopavanje LIWC-a 2007, koje može biti izvrstan alat za istraživanje - kada se koristi u prave svrhe i u pravim rukama. [↩]