Gregory's Server
#ОднаПтичкаМнеНащебетала про проблемы, связанные с сайтами по играм.
Кейс 1: Владелец сайта Game UI Database, посвященного игровым интерфейсам, жаловался на замедление работы из-за того, что кто-то активно скрапил материалы сайта, причем в обход robots.txt. После бана IP OpenAI тормоза прекратились. https://x.com/EddCoates/status/1831321191186932040
Кейс 2: Владелец репозитория ассетов rileyb3d вынужден был закрыть свой сайт на базе AWS, поскольку за час каким-то образом выгорел месячный трафик. В комментариях предположили, что это мог быть OpenAI со своим скрапингом.
https://x.com/rileyb3d/status/1831375847212904566
@th3rdsergeevich игнор robots.txt это занятно (уже случалось ранее, вроде как исправлялись, видимо - передумали), в остальном же нууууу они уже третий год как яростно парсят весь интернет, почему никто за этим не следит, но все по одному вопят как только очередь до них доходит, как будто заговор какой-то вскрыли.