De av dere som har fulgt bloggen en stund har kanskje fått med dere at jeg har brukt mye tid på å forske på nettdating; se f.eks. denne artikkelen om
hvordan man burde velge ut bilder til datingprofilen sin. I dag tenkte jeg at jeg skulle skrive litt om den siste undersøkelsen min, hvor jeg så på betydningen av profiltekst.
I utgangspunktet så jeg for meg et ganske enkelt forsøk; jeg var bestemt på at jeg ville gjøre det på en norsk datingside ettersom jeg ville være sikker på at resultatene skulle være relevante for nordmenn (det er jo tross alt tekst vi snakker om). Jeg valgte ut Bergen, Trondheim og Tromsø som de tre test-områdene mine, og jeg ville lage en profil for meg selv i hver av byene. Alle tre profilene skulle ha de samme bildene, bilder som jeg vet er bra og som jeg tidligere har brukt i praksis med svært gode resultater. Øvrige innstillinger og fakta måtte også være identiske, det eneste som skulle skille de tre var profiltekstene.
For å få det til trengte jeg altså tre profiltekster: en svært bra, en gjennomsnittlig og en dårlig.
For å finne disse ble det satt sammen et jente-panel som skulle lese igjennom ti tekster de kunne velge fra; ni av disse hadde jeg kopiert fra profilene til ni tilfeldige gutter på en annen norsk datingside enn den jeg skulle bruke, den siste var en jeg hadde skrevet etter alle kunstens regler og med input fra et tidligere jentepanel. Jeg lurte den med i utvalget jentene skulle velge fra fordi jeg ikke syntes at noen av de ni tilfeldig utvalgte tekstene var helt i eliteklassen, og jeg ville sikre at den "bra" profilteksten virkelig ble "bra".
Her er det imidlertid viktig å merke seg at dette ikke var ment som noen test av hvorvidt jeg kan skrive bra profiltekster; hvis jentepanelet hadde valgt en av tekstene som jeg ikke hadde skrevet som den beste ville undersøkelsen selvsagt kunne ha fortsatt som planlagt. Det eneste som hadde blitt skadelidende var egoet mitt.
Om hvordan tekstene som skulle bli vurdert ble valgt ut:
De ni tekstene fra tilfeldige gutteprofiler ble funnet ved at jeg gikk til pålogget nå-listen på den aktuelle siden, genererte ni tilfeldige tall med en app som heter iGenerateRandomNumbers på telefonen min og kopierte tekstene til profilene som tilsvarte tallene. Den teksten jeg hadde skrevet selv tilhørte en tidligere
Perfekt Profil-deltaker som nå har samboer og således ikke bruker profilen sin lenger. Forutsetningen for å få låne den av ham var at eksperimentprofilen skulle slettes etter de to ukene den ble brukt.
Jentepanelet fikk altså i oppdrag å gå igjennom de ti tekstene og:
1) Velge ut den beste teksten
2) Velge ut den mest vanlige/gjennomsnittlige teksten
3) Velge ut den dårligste teksten
Jentepanelet var det forøvrig Andreas som fant for meg, og det var han som stod for all kommunikasjon med dem; jeg ville bruke jenter som ikke kjente meg til utvelgelsen slik at jeg var helt sikker på at de ikke kom til å kjenne igjen min skrivestil og la seg påvirke av det.
Allikevel ble, betryggende nok for egoet mitt, min tekst valgt ut som den beste av jentene. Det er nok ikke så rart at den skilte seg ut, for den var ganske annerledes enn de øvrige både i skrivestil og innhold. Den dårligste teksten var det også bred enighet om. Når det gjaldt den "gjennomsnittlige" teksten var det mye mindre enighet; det er kanskje ikke så rart, de fleste av tekstene var ganske gjennomsnittlige. Her endte jeg rett og slett med å velge den som jeg av erfaring så at var mest typisk for hva gutter pleier å skrive på datingsider.
Neste skritt var å laste opp og aktivere den første profilen; jeg begynte i Bergen, lastet opp bildene og la ut den "dårlige" profilteksten. Så gjennomførte jeg et søk begrenset til jenter med alder mellom min egen og ti år yngre samt bosted innenfor en radius på ti mil fra Bergen sentrum. Jeg sendte ut meldinger og jobbet meg nedover resultatlisten til jeg hadde fått 50 stk. som var lest. Datingsiden jeg brukte lar deg, som de fleste andre slike sider, se hvorvidt meldingen har blitt lest av mottaker eller ikke, og som alltid er det et poeng at man kun regner med leste meldinger i statistikken. Uleste meldinger er som regel et uttrykk for en inaktiv profil, ettersom de aller fleste vil klikke på meldingen og gjøre den "lest" selv om de ikke er interessert fordi man ellers vil få beskjed om at man har en ny melding hver gang man logger seg på. Jeg regnet ut svarprosent, som vanlig definert som antall svar innen to uker delt på antall leste meldinger ganget med 100 for å få prosent.
Etter to uker "meldte jeg flytting" på profilen til Trondheim og endret teksten til den "gjennomsnittlige". Videre gjorde jeg akkurat som i Bergen, laget et tilsvarende søk og sendte ut meldinger inntil jeg hadde 50 leste og beregnet svarprosent.
Etter enda to uker "flyttet" jeg til Tromsø, og byttet til den "bra" teksten. Nok en gang ble prosedyren gjentatt og svarprosent beregnet.
Alle profilene fikk forøvrig uoppfordrede meldinger fra jenter som jeg ikke hadde kontaktet også; disse valgte jeg å ikke ta med i statistikken, ettersom det ville medført uberegnlige feilkilder (f.eks. kan det hende at profiler fra Bergen blir ansett å være aktuelle for flere jenter enn profiler fra Tromsø rett og slett på grunn av geografisk beliggenhet, og at de således får flere uoppfordrede meldinger). Det virket mer forutsigbart å forholde seg til svar på meldinger sendt til jenter innenfor en definert avstand fra der profilen var bosatt.
Resultater
Svarprosentene ble som følger:
Bra bilder + dårlig tekst: 18% (9 av 50)
Bra bilder + gjennomsnittlig tekst: 58% (29 av 50)
Bra bilder + bra tekst: 72% (36 av 50)
Resultatene gir en p-verdi på 0.07 i forhold til de to siste verdiene; det er altså 7% sjanse for at forskjellen vi registrerer mellom "gjennomsnittlig" og "bra" er en tilfeldighet. Det er et mindre slående resultat enn det vi fant da vi så på bilder, men like fullt er forskjellen tydelig. Se avsnittet om diskusjon og feilkilder for mer inngående drøfting.
Jeg hadde i utgangspunktet tenkt å stoppe her, men da jeg var kommet så langt hadde jeg fått en idé til noe annet jeg hadde lyst til å se på. Jeg ville gå enda litt lengre og få en vurdering av attraktiviteten til jentene i tillegg til bare antallet svar, og for å få til dette gikk jeg rett og slett igjennom profilene til alle jentene som hadde svart på meldinger og lagret dem som .jpg-bilder i hver sin nummererte mappe vha. et screen-grab program med hurtigtaster (Første bilde var forsiden til profilen, andre bilde var første bilde i album osv.) Så lastet jeg alle mappene opp til et område på Dropbox og sendte link til fem kompiser. De fikk i oppgave å gi alle jenteprofilene en score på attraktivitet mellom 1 og 10. Jeg ville ikke bruke min egen vurdering fordi jeg visste hva jeg skulle med dataene, og hadde kunnet påvirke resultatet ubevisst. Kompisene mine hadde på dette tidspunktet ingen anelse om hvorfor de skulle gjøre dette, selv om de sikkert mistenkte at jeg var i gang med å leke forsker igjen.
Gutta var selvsagt ikke helt enig om jentene, men det var jo også poenget med å få flere vurderinger; folk har ikke identisk smak, så tanken var å få fem vurderinger av alle jentene for så å ta gjennomsnittet etter at øverste og laveste score er fjernet, litt slik man gjør for stilkarakterer i hopp. Det er et godt system for å sikre at personlige særheter ikke får for mye påvirkningskraft.
Så regnet jeg rett og slett ut gjennomsnittet av hvor høy score de fem mest attraktive jentene som hadde svart fikk for alle de tre profilene. Resultatet ble:
Bra bilder + dårlig tekst: 6.3 (5.7+6+6.3+6.7+7)
Bra bilder + gjennomsnittlig tekst: 7.3 (6.7+6.7+7.3+8+8)
Bra bilder + bra tekst: 8.5 (7.7+8.3+8.3+9+9)
Dette var et veldig morsomt resultat, som stemte godt med det jeg syntes jeg la merke til da jeg så på svarene: selv om den totale forskjellen i antall svar mellom profilen med den "gjennomsnittlige" teksten og den "bra" teksten ikke var så enorm, så var det også en merkbar forskjell i profilenes evne til å få svar fra de mest attraktive jentene. Det å ha en bra tekst gir altså utslag på to forskjellige måter, ikke bare på antall svar men på kvaliteten de jentene som svarer har. Dette er forsåvidt ganske logisk; de mest attraktive jentene, de som har mest å velge mellom, blir de mest kresne. De velger profilene som BÅDE har bra bilder OG bra tekst, fordi de kan.
Diskusjon/feilkilder
Jo større antall jenter vi inkluderer i undersøkelsen, jo mindre sårbare blir vi for slik variasjon. I denne undersøkelsen fikk jeg, pga. at jeg gjorde den i Norge, ikke mulighet til å inkludere så mange jenter som jeg gjorde i bilde-undersøkelsen. Det betyr at vi fikk resultater som er beheftet med mer usikkerhet enn det vi gjorde da vi så på bilder på den amerikanske datingsiden. En sannsynlighet på 93% for at forskjellen jeg registrerte er reell og ikke tilfeldig er allikevel rimelig bra i mitt hode.
Et annet poeng når det kommer til usikkerhet og feil er jo selvsagt at forholdene kan være forskjellige i de tre byene. Jeg gjorde søk begrenset til 10 mil fra sentrum av hver by; kan det tenkes at jenter som bor 10 mil fra Tromsø f.eks. har en lenger reisetid til Tromsø enn det jenter som bor 20 mil fra Trondheim har til Trondheim? Kan det bidra til systematiske feil i svarprosenten? Er populasjonene jeg sendte melding til fra de tre profilene ensartede? Jeg forsøkte å sikre dette ved å velge tre typiske studentbyer og velge jenter i typisk studentalder, men jeg vet jo ikke sikkert.
Uansett; det denne undersøkelsen antyder (veldig bra tekst gir en noe høyere svarprosent men også en høyere sjanse for å få svar fra de heiteste jentene) synes jeg i sum stemmer bra med erfaring, og det veier alltid tungt for meg når eksperimenter og erfaring trekker i samme retning.
Konklusjonen ift. det å ha en svært dårlig tekst er også interessant; dette er, slik vi vet veldig godt fra erfaring, ekstremt ødeleggende. I ettertid angrer jeg på at jeg ikke laget en profil uten tekst også; min antagelse er nemlig at denne ville hå fått bedre resultater enn profilen med dårlig tekst. Dette er spesielt relevant for gutter med dysleksi eller gutter som rett og slett ikke er så flinke til å skrive; de kan være like intelligente og interessante som andre, men dersom de har en ubehjelpelig tekst vil de kunne bli forhåndsdømt som enkle og dumme. Vi kan mene hva vi vil om det, men både erfaring og dette forsøket tyder på at det er slik verden er. Ofte vil det sannsynligvis være bedre å bare skrive en liste med "Elsker: ..." og "Hater: ..." enn å ha en veldig dårlig tekst.
Nye spørsmål og hypoteser å undersøke?
Til slutt litt fantasering av den nerdete sorten. Hvis man skulle gjort dette forsøket på den mest perfekte måten burde man egentlig ha regnet ut svarprosenter for forskjellige undergrupper av jenter, f.eks. lite attraktive, middels attraktive og svært attraktive, i tillegg til en total svarprosent. Man burde også ha brukt flere mannlige forsøkspersoner, ikke bare én slik jeg gjorde her. Dette hadde nødvendigvis blitt svært arbeidskrevende, og man støter raskt på problemer med å få store nok datamengder fordi Norge er et lite land med relativt få mennesker på datingsidene, ihvertfall i forhold til de store antallene man ønsker seg når man gjør slike forsøk. Man kunne gjort forsøket i USA, slik jeg gjorde med bilde-undersøkelsen, men da hadde det blitt usikkerhet rundt overføringsverdien til norske forhold (jeg har ikke engelsk som morsmål og jeg har heller ikke tilgang på jenter fra USA som jeg kunne brukt til å plukke ut engelske teksteksempler for meg).
Uansett synes jeg det virker som om det ligger mye potensiale i å se på ikke bare hvor mange svar man får, men også hvem det er som svarer, i fremtidige nettdating-undersøkelser. Det vi ønsker er jo først og fremst å møte de riktige jentene, ikke bare dra på hundrevis av dater med jenter som det ikke klaffer med! Er det forskjell på hva som virker på jenter som bor på bygda vs jenter som bor i byen og jenter med høyere utdannelse vs jenter med lite utdannelse, vestkantjenter vs løkka-jenter osv? Dette har jeg noen teorier om basert på erfaring og mønstre i tilbakemeldingene fra jentepanelene våre gjennom de årene vi har drevet med
Perfekt Profil.
Slike forhold er definitivt noe jeg vil se nærmere på i fremtiden.
- Sondre
PS: Ta undersøkelsene mine for det de er verdt; det er ikke hard naturvitenskap vi har å gjøre med her, og jeg er lite annet enn en engasjert amatør når det kommer til forskning. Dette er en blogg, og ikke et fagfellevurdert tidsskrift (selv om jeg skulle ønske at det fantes slike om sjekking;) Det må jeg alltid presisere, jeg vil ikke lure noen eller påberope meg noe jeg ikke har grunnlag for.