Meta heeft het woord ‘training’ verwijderd uit de crawl-clausule in zijn nieuwe Commercial Terms, die op 30 oktober ingaan. Klinkt als een concessie, maar het crawlrecht zelf is volledig intact gebleven. Dat is het eerste wat je moet onthouden.
Wat er precies veranderd is
De originele tekst stelde dat Meta ‘any content’ mocht gebruiken om zijn producten te ‘provide, develop, improve, research, train, and maintain’. In de herziene versie staat nu: ‘provide, develop, improve, research, and maintain advertising and business products.’ Training is eruit. Het recht om te crawlen, inclusief het aanmaken van testaccounts en het periodiek ophalen van site-updates: dat staat er nog steeds gewoon in.
Meta zelf zegt dat de clausule altijd al alleen over advertentie- en businessproducten ging, en dat de eerste versie simpelweg ‘niet duidelijk genoeg’ was. Verandering in hoe Meta webcrawlers feitelijk inzet? Nul komma nul, volgens woordvoerder Daniel Roberts.
Maar juridisch is het nog steeds lek
Laat je niet geruststellen door die ene woord-verwijdering. Meerdere juridische experts reageerden kritisch op de herziene tekst. Matt Topic, IP-advocaat bij Loevy & Loevy, zegt dat ‘develop’ breed genoeg is om ‘train’ te omvatten. James Grimmelmann van Cornell Law School noemt de taal ‘still broad enough to drive a truck through’. De koppeling aan ‘associated with your products or services’ staat er nog steeds in, en die formulering geeft Meta naar zijn mening ruimte om complete sites te scrapen.
Daarnaast: robots.txt wordt wel door Meta aangehaald als het mechanisme waarmee je de crawl kunt beperken, maar dat is en blijft vrijwillig. Je kunt er geen afdwingbaar juridisch recht aan ontlenen, zoals professor Benjamin Sobel van de University of Wisconsin benadrukt.
Wat je nu moet doen
Meta heeft twee aparte crawlers gedocumenteerd: één voor AI-training en één voor Meta AI search. Je kunt die per crawler blokkeren of toestaan via robots.txt. Dat is nu de enige concrete knop die je hebt.
Mijn advies: check je robots.txt vandaag nog op die Meta-crawlers. De termen zijn op 30 oktober van kracht, maar de preview is al meerdere keren aangepast zonder aankondiging. Check de clausule dus opnieuw vlak voor die datum.
En als je een Facebook-pagina beheert zonder advertenties te kopen: ook dan vallen jullie onder deze Commercial Terms. Dat vergeten mensen structureel. Combineer dit met de bredere trend dat botverkeer menselijk webverkeer al overtreft, en je begrijpt waarom robots.txt-beheer ineens veel serieuzer genomen moet worden dan een jaar geleden.
De bottomline: Meta heeft de PR-schade beperkt door één woord te schrappen. De juridische experts zijn er niet gerust op, en het crawlrecht staat als een huis.
Bron: Search Engine Journal