Användare av sökmotorer klickar oftare på första träffen än som kan förklaras av relevansordningen. Det visar en studie av Thorsten Joachims med flera vid Cornell University, USA, [PDF] som kommenteras av användbarhetsgurun Jakob Nielsen på Useit.com 26 september.

42% av användarna klickade på första träffen och 8% på andra träffen, vilket följer samma mönster som andra studier kommit fram till. Forskarna ändrade ordningen på träffarna genom ett script så att första och andra träffen bytte plats. Likafullt klickade 34% på första träffen och 12% på andra träffen. Med andra ord

Två möjliga förklaringar till detta är:

a)Sökmotorer är så bra på ranking att den bästa träffen oftast hamnar först.
b)Användare klickar på första träffen, inte för att den är bättre, utan snarare i egenskap av att den ligger först. Det kan de göra av lathet eller för att de litar på att sökmotorn kan avgöra vilken träff som är bäst.

Om användarna alltid klickar på den bästa länken borde det procentuella utfallet bytt plats när första och andra träffen ändrade plats, men första träffen fick fortfarande flest klickningar. Å andra sidan, om användarna litar på sökmotorns relevans borde inte procentuellt färre klicka på första träffen efter att första och andra träffen bytt ordning. Det sjönk från 42% till 34%, vilket betyder att 8% användare klickade nån annanstans. 4% klickade på andra träffen och 4% nån annanstans.

Forskarna lät också 5 testpersoner avgöra om sökmotorerna verkligen rankade de bästa sidorna högst upp. Vid 36% av fallen bedömdes första träffen vara mest relevant och 24% av fallen den andra träffen samt båda träffarna var lika relevanta i 40% av fallen. Med andra ord kan man säga att sökmotorn tenderade att vara relevant, men felaktig i ett fall av fyra.

Slutsatsen är att med tanke på hur ofta en sökmotor gör fel relevansbedömning, så klickar användare alldeles för ofta på första träffen. Dessutom ändrades beteendet knappt när man fejkade ordningen på första och andra träffen. Viljan att klicka på första länken är alltså mycket stark, även om det inte är så starkt att relevansranking är oviktigt. Man kan bara tänka vad det innebär när det finns studier som visar att folk har låg medvetenhet om sponsrade länkar som visar först i träfflistorna.

Behöver vi säga att testen gjordes enbart i Google? Nej, tänkte väl det.

Källa: Thorsten Joachims, Laura Granka, Bing Pan, Helene Hembrooke, and Geri Gay, “Accurately Interpreting Clickthrough Data as Implicit Feedback,” [PDF] Proceedings of the Conference on Research and Development in Information Retrieval (SIGIR), 2005.

Detta inlägg gjordes den 12 Oktober, 2005 av Lars Iselid och är kategoriserat under Sökbeteende. Skriv en kommentar här eller skicka en trackback från din egen webbplats.