GPTBot

Der offizielle Crawler von OpenAI, der öffentliche Inhalte für das Training der Modelle sammelt. Ihn in robots.txt zu blockieren schließt die Website von zukünftigen Trainingsdaten aus, wirkt sich aber nicht notwendigerweise auf Echtzeit-Zitierungen aus (verwaltet von OAI-SearchBot).