Open3DLab обвинила робота Roblox в скачивании 145 ГБ 3D-моделей

Сообщество Open3DLab заявило, что краулер с User-Agent trellis2-data-sourcing/1.0 и адресом @roblox.com за 34 часа обошёл 18 926 проектов и скачал 145,5 ГБ данных, включая 1 027 файлов из 712 проектов. Краулер игнорировал robots.txt, условия использования и лицензии авторов, запрещающие коммерческое применение; Roblox на запрос о комментарии не ответила.

• Краулер сделал 26 429 запросов и скачал 1 027 файлов из 712 проектов
• Из них 54,8 ГБ — 364 файла с сайта SmutBase, 62,6 ГБ — с SFMLab
• Скачивание заметили 18 октября, блокировка сработала к утру 19-го
• User-Agent указывает на исследование 3D-фундаментальной модели Roblox