maart 17, 2006
Publieke Omroep in zee met wetenschappelijke BitTorrent
DSC_1090-1.jpg

Onderzoeker Johan Pouwelse (l) en content manager William Valkenburg (r) van Omroep.nl schudden elkaar de hand op de vanmiddag uitgesproken intentie om samen te gaan werken. De samenwerking is vrij uniek in de wereld. De Publieke Omroep gaat namelijk experimenteren met de Tribler, de p2p-client die Pouwelse met zijn team ontwikkelde aan de TU Delft.

Vanmiddag werd Tribler officieel gepresenteerd in het Amsterdamse Felix Meritis, en de broncode vrijgegeven (Flickr-foto's presentatie). Pouwelse: "We willen legaal gebruik laten maken van p2p-technologie." Hij acht IPTV zoals dat nu toegepast wordt ouderwets. Het gaat uit van het principe waarbij er 1 zender is en veel ontvangers. P2p verspreidt die distributielast over alle kijkers, want maakt van downloaders ook uploaders.

Tribler is gebaseerd op de BitTorrent-technologie, maar bouwt erop voort. De onderzoekers hebben het programma efficienter en schaalbaarder gemaakt. Bovendien moet het mogelijk worden om vanaf 1 pc audio of video als streaming media uit te zenden naar, in theorie naar tien- of honderdduizenden kijkers tegelijk. Pouwelse: "Dit is nog maar de eerste versie. Er is nog jaren onderzoek te doen."


DSC_0986.JPG

Tribler staat op het punt deel te gaan uitmaken van een Europees wetenschappelijk onderzoek, mede gefinancieerd door de Europese Unie via het IST onderzoeksprogramma. De TU hoopt vanaf juni te gaan samenwerken met universiteiten in Finland en Hongarije.

Maar wat heeft de Publieke Omroep hiermee te maken? De omroep wil onderzoeken wat de volgende generatie distributietechieken zou kunnen zijn. Daarom begint ze de proef (duur staat niet vast, kan een jaar zijn) met Tribler en met nog een andere nog niet gedetailleerde p2p-techniek. Belangrijk vindt Valkenburg het feit dat Tribler een 'sociale aanbevelingsmachine' bevat. Dat houdt in dat familie en bekenden elkaar kijktips kunnen geven, maar ook dat Tribler de gebruiker kijktips geeft van hem onbekenden. Dat zijn dan mensen die een vergelijkbaar kijkprofiel hebben. Knap werk.


DSC_0985.JPG

De omroep gaat, voor zover de rechten dat toestaan, zo veel mogelijk audio- en videomateriaal publiceren. Bovendien is ze bezig met een clean sweep van ouder materiaal. Beeld en Geluid zoekt in haar archieven alles bij elkaar wat de omroep mag en zou mogen uitzenden, door bijvoorbeeld rechten af te kopen.

Voor de statistici: Uitzendinggemist.nl bevat 400.000 programma's (15 terabyte), Negentig procent van alle dataverkeer wordt door 12.500 programma's gegenereerd. De long tail [?] klinkt in theorie prachtig, maar in de praktijk komt er maar weinig van terecht. Een mogelijke verklaring overigens is dat de gebruikersinterface van Uitzending Gemist niet geoptimaliseerd is voor maximale ontsluiting van kopij.

[aanvulling/correctie met reactie Vpro's Erwin Blom, zijn blogpost staat hier]


"In 2005 was de Top 10 van meest opgevraagde a/v verantwoordelijk voor 6% van alle keren dat beeld en geluid werd opgevraagd, de Top 1000 was verantwoordelijk voor 60%. Daaronder (de statistische software gaat maar tot 1000) zat dus nog eens 40%. Oftewel: de long tail is geen theorie maar bij de VPRO heel erg praktijk."

[/aanvulling/correctie]

Hoe gaat de samenwerking technisch in zijn werk? De Publieke Omroep gaat als het ware Torrent seeds plaatsen bij of nabij de netwerken van Nederlandse internetproviders. Daar werkt de omroep nu al mee samen om niet alle technische belasting van de streams zelf op te moeten vangen. Er worden als het ware private versies van Mininova of PirateBay gemaakt. Uiteraard hoopt de Publieke Omroep dat zo veel mogelijk kijkers voor de distributie zorgen door Tribler open te laten staan, maar dat is nooit te garanderen. Daarom deze 'tussenweg', om ervoor te zorgen dat er een Torrent-aanbod is en blijft.


DSC_0990-4.jpg

David Ferguson van het Engelse CacheLogic gaf zicht op hoeveel dataverkeer p2p-verkeer genereert. Zijn bedrijf, overigens, verkoopt aan internetproviders caches om p2p-last op te vangen en verminderen.

* Tussen de 50 en 65 procent van alle downloadverkeer is p2p-gerelateerd
* Tussen de 75 en 90 procent van alle uploadverkeer is p2p-gerelateerd
* In 2004 noteerde 1 CacheLogic-server 3 miljoen IP-adressen in 30 dagen
* In 2006 noteerde 1 CacheLogic-server 3 miljoen IP-adressen in 8 dagen
* Verdeling: 61,4 procent is uitwisseling van video, 11,3 procent is audio en 27,2 procent is games/software/etc.
* Gemiddelde omvang van een uitgewisseld bestand: 1 gigabyte
* Pouwelse schat: "p2p is op dit moment de grootste verspreider van HDTV"

Uit Fergusons ervaringen bij providers blijkt dat ADSL niet volstaat voor p2p-uitwisseling. "Bij ADSL ligt de download-upload-verhouding op 11:1, bij ADSL2+ is dat nog slechter met 24:1." P2p-verkeer is voor providers behoorlijk duur en het zet zeker alle uploadcapaciteit nagenoeg vol. Negentig procent van alle verkeer is internationaal, dus er valt weinig on net af te handelen. Maar, rekent Ferguson voor, p2p is voor een tv-zender juist aanzienlijk goedkoper als je het vergelijkt met de gebruikelijke distributiekanalen.


DSC_0972.JPG

De basistechnologie van Tribler is in essentie 'af', maar er staat nog een aantal uitbreiding op til. Naar de roadmap heb ik niet gevraagd, maar de derde afbeelding van boven verraadt al veel. Aangezien Tribler deel uitmaakt van het Freeband-programma I-Share is er zeker nog onderzoeksgeld tot 2008, mogelijk ook nog eens aangevuld met EU-geld.

Belangrijk wordt het werk dat aan de gebruikersinterface moet gebeuren. Tribler is nu een programma van en voor techneuten, niets iets voor de spreekwoordelijke weduwe uit Appelscha. Maar dat is uiteindelijk wel de bedoeling en wordt ook actief aan gewerkt.

Cory Doctorow, bekend van Boing Boing, was voor de gelegenheid naar Amsterdam gevlogen (en BB-blogde). Samen met Paula LeDieu van Icommons (voorheen werkzaam bij BBC Creative Archive) prees hij de nuchterheid en grondigheid waarmee door de Publieke Omroep, Nederlandse techneuten en het publiek inhoudelijk discussieerden over legale toepassingen van p2p. In de Verenigde Staten had dat volgens hen niet gelukt zonder dat de helft van de zaal was weg gelopen. Tim Kuik van Stichting Brein keek en luisterde de hele dag mee.


DSC_1043-6.jpg

Zie ook:
* Omroepen en uitgevers knuffelen met 'BitTorrent-klonen' (020206)
* Uitgevers beginnen p2p serieus te nemen (191005)

Gepost door erwin op maart 17, 2006 10:40 pm | Rubriek: Algemeen , Audio/video , Technologie
Reacties

"Voor de statistici: Uitzendinggemist.nl bevat 400.000 programma's (15 terabyte), Negentig procent van alle dataverkeer wordt door 12.500 programma's gegenereerd. De long tail [?] klinkt in theorie prachtig, maar in de praktijk komt er maar weinig van terecht. Een mogelijke verklaring overigens is dat de gebruikersinterface van Uitzending Gemist niet geoptimaliseerd is voor maximale ontsluiting van kopij."

Uitzending Gemist is op dit moment juist geen long tail service. Uitzending gemist is de verzameling programma's van de afgelopen zeven dagen (en dus geen 12.500 programma's). En zonder dwarsverbanden, zonder sociaal netwerk-elementen e.d. Oftewel niet zo gek dat het long tail effect niet zichtbaar is. Uit VPRO-ervaring, de long tail is zeer duidelijk zichtbaar bij bijvoorbeeld 3VOOR12. In 2005 was de Top 10 van meest opgevraagde a/v verantwoordelijk voor 6% van alle keren dat beeld en geluid werd opgevraagd, de Top 1000 was verantwoordelijk voor 60%. Daaronder (de statistische software gaat maar tot 1000) zat dus nog eens 40%. Oftewel: de long tail is geen theorie maar bij de VPRO heel erg praktijk.

Posted by: erwin blome on 17 maart 2006 23:27

Ik was er ook bij. Zie ook alvast:
http://www.bright.nl/publieke-omroep-gaat-p2p

Toch 2 uurtjes eerder! ;-)

Posted by: Tonie on 18 maart 2006 01:45

1 correctie: het was niet Cory die zei 'In de Verenigde Staten had dat volgens hen niet gelukt zonder dat de helft van de zaal was weg gelopen.' maar Paula Le Dieu van CC UK.

Erwin's Long Tail beschrijving is goed. Met name bij socila networks kun je jezelf afvragen: hoe kunnen je nog reageren op die 31.485 'vrienden' die je hebt.

De niche, de Long Tail, is De Nieuwe Media. Grote logge bedrijven over het algemeen niet. Da's mijn nu erg duidelijk geworden sinds gisteren.

Om Cory te citeren: 'Not ready for the internet!'

Posted by: Marco Raaphorst on 18 maart 2006 11:13

De verwachtingen van P2P zijn schromelijk overdreven. Juist de logn tale is via P2P slecht gedistribueerd. Zoek via een goede P2P oplossing eens naar osbcure titels. Je vindt alleen maar Madonna, 2Pac en Cold Play...

Posted by: Rens on 18 maart 2006 18:59

Vraag:
Wat maakt Tribler beter dan wat de BBC nu al gebruikt?
En waarom werkt Nederland niet samen met de BBC?
Weet iemand dat?


http://www.bit-tech.net/bits/2006/02/08/road_ahead_billgates/3.html

Posted by: Rob Zachte on 19 maart 2006 22:34

Tribler heeft kansen. Het magische woord is: vrienden. Als vrienden je files geven dan neem jet zo over. Mond-op-mond reclame... iets beters is er niet.

Waarom koopt Murdock MySpace denk je? Opdat het van vrienden en mond-op-mond-reclame aan elkaar hangt. Niet dat ik weet wat je met die 30.256 vrienden doen, maar da's weer een ander verhaal natuurlijk...

Posted by: Marco Raaphorst on 20 maart 2006 12:37

Ik zie dit wel zitten hoor. Als Amazon door mijn aankoopgedrag aanbevelingen kan doen over een boek en last.fm me op basis van de muziek die ik afspeel, weet at ik nog meer leuk zou vinden, dan is een p2p-variant volgens mij niet zover weg.

Posted by: Marko on 21 maart 2006 00:42
Reageer op dit bericht
Naam:


E-mailadres: (verplicht; wordt niet gepubliceerd)


Website:


Comments:


Remember info?