Мем дня: Cloudflare, которые годами защищали сайты от ботов-парсеров, выпустили парсер Они…
Мем дня: Cloudflare, которые годами защищали сайты от ботов-парсеров, выпустили парсер
Они анонсировали эндпоинт /crawl для Browser Rendering, который позволяет сканировать и извлекать контент целого сайта одним API-запросом. Он предназначен для «RAG пайплайнов, обучения AI, мониторинга и исследований».
Ирония в том, что Cloudflare – абсолютный лидер как раз в защите сайтов от нежелательных краулеров и ботов, которые собирают данные для обучения ИИ.
В свое оправдание они замечают, что их бот (в отличие от всех остальных злюк-ботов) будет вести себя хорошо: уважать правила сайта и robots.txt 😇
Материалы по теме
🌐 Объем ставок на киберспорт вырос на 31% за годВ 2025 году мировой рынок ставок на киберспорт продолжил активно расти. По данным аналитиков Oddin(.)gg, общий объем пари увеличился на 31%, а количество заключенных ставок — на 23%. Рост объема ставок…
13
0
🔄 Когда нужно начинать реактивацию игроков?Реактивация игрока стоит дешевле, чем привлечение нового.Именно поэтому все проекты покрыты соответствующими кампаниями. Распространенная практика: реактивация стартует через 30+ дней отсутствия игрока. Но…
9
0
Чуваки завернули openclaw в облако по сути теперь не нужно покупать сервер настраивать и мучаться Кто хотел зайти в вайбкодинг для вас это отличная новость
14
0
Вставить свои 5 копеек: