Meta startet Meta External Agent, einen Web-Crawler, der Robots.txt zur Datenerfassung umgeht. Meta launches Meta External Agent, a web crawler bypassing Robots.txt for data collection.

Meta hat einen neuen Web-Crawler namens Meta External Agent veröffentlicht, um Daten aus dem Internet zu sammeln, insbesondere aus öffentlich angezeigten Inhalten wie Nachrichtenartikeln und Online-Diskussionen. Meta has released a new web crawler called Meta External Agent to gather data from the internet, in particular from publicly displayed content such as news articles and online discussions. Der Crawler sammelt Daten für Metas KI-Modell und umgeht Standard-Website-Schutzmaßnahmen, die auf Robots.txt-Dateien basieren. The crawler collects data for Meta's AI model, bypassing standard website protection measures relying on Robots.txt files. Dieser Schritt zeigt das Engagement von Meta für das Training und die Verbesserung seiner KI-Modelle. This move demonstrates Meta's commitment to training and improving its AI models.