Nog steeds kans op een miljoen dollar!
Door: Robin
Last van een Bore Out of gesmolten spaartegoeden op een IJslandse bank? Dan is dit misschien wat voor jou…
Netflix is een online videotheek en maakt gebruik van een recommendation engine (Cinematch), die op basis van eerdere reviews (1 tot en met 5 sterren) probeert te voorspellen of iemand een bepaalde film zal waarderen.
Daar hangt blijkbaar veel van af, want in 2006 (we schreven er hier al eerder over) schreven zij een wedstrijd uit waarmee je 1 miljoen dollar kan winnen als je Cinematch klopt met een 10% nauwkeurigere voorspelling. En daar bovenop nog een jaarlijkse voortgangsprijs van 50 duizend dollar, zolang de hoofdprijs nog niet vergeven is…. en die is nog niet vergeven!
Een mooie wedstrijd met daarachter mooie verhalen.
Via de wedstrijdsite kan je de data downloaden: Een training set van 100 miljoen ratings over ruim 18.000 filmtitels van 480.000 random geselecteerde klanten. Zonder persoonlijke informatie over de klanten, je hebt het maar te doen met alleen de ratings (klantid, rating, datum van de rating, filmtitel en de datum waarop de film is uitgebracht). Ook krijg je een testset zonder waardering meegeleverd, die je gescoord terug moet leveren ter beoordeling.
In het begin ging het hard: Binnen twee weken waren er drie inzenders die het Cinematch systeem wisten te kloppen, eind 2007 is de progress prize van $50.000 binnengehaald met 8,43%. Nu, drie jaar na de start, met bijna 35.000 teams uit 180 landen staat de teller op 9,44%.
En achter die wedstrijd gaan mooie verhalen schuil. Zie bijvoorbeeld het verhaal van Len Bertoni, opgetekend door de New York Times (leestip!). Deze gepensioneerde programmeur spendeert al anderhalf jaar lang 20 uur per week aan deze wedstrijd, samen met zijn kinderen van 12 en 13 jaar. En met succes, hij staat nu op een tiende plek met 8,8%.
Waar hij in het begin met sprongen vooruit ging, zijn het nu de “bijzondere” films die hem het leven zuur maken. We hebben het hier over films waar je of een grondige hekel aan hebt, of helemaal lyrisch van bent. Geen middenweg mogelijk. Napoleon Dynamite is zo’n film en gelijk zijn grootste zorgenkindje: De waardering voor deze film net zo goed voorspellen als de andere films zou hem 15% verder brengen….
Het grappige is, ondanks de forse prijs worden tussen deelnemers worden veel tips uitgewisseld. Ook door de teams die bovenaan in het klassement staan. Groot was dan ook de verrassing toen opeens -vanuit het niets- “Just a guy in a garage” in de top 10 stond met een verbetering van 7.15%. Iets waar de teamleden van klassementsleider Belkor (drie medewerkers van AT&T Labs - Research) zeven maanden op hadden gezwoegd. Niemand wist wie deze garagebewoner was en wat voor techniek werd gebruikt. Wired Magazine wist ‘m te vinden en interviewde de beste man (wederom: leestip!). Het bleek de 48 jarige britse Gavin Potter te zijn, een gepensioneerd management consultant met een opleiding psychologie, die overigens niet in een garage woont. Zijn oudste dochter helpt hem met de berekeningen.
Die opleiding psychologie komt hem goed van pas, want waar de andere teams zich puur richten op de methoden en technieken en hun strijd zich vooral toespitst wie deze technieken het beste kan fijnslijpen, kijkt hij vooral naar verklaringen van het menselijk gedrag vanuit de psychologie.
Pattie Maes, MIT professor en in 1994 een van de eerste die een online recommendation engine bouwde, is van mening dat te veel gefocused wordt op eerdere aanbevelingen en dat meer rekening gehouden moet worden met het sociale umfeld: bijvoorbeeld door het mogelijk te maken om te zien wat goede vrienden van je op het moment naar films kijken. Alhoewel buiten de scope van deze wedstrijd, biedt Netflix dit ook aan haar gebruikers, maar met weinig succes.
Aan het einde van het eerdergenoemde artikel in de New York Times vat Netflix CEO Reed Hastings de moeizame strijd om de laatste decimalen naar de 10% mooi samen:
“Human beings are very quirky and individualistic, and wonderfully idiosyncratic, and while I love that about human beings, it makes it hard to figure out what they like.”
Ach, hij mag in zijn vuistje lachen: De eerste 9,44% is binnen en het heeft hem nog geen miljoen gekost…