cl0q: открытый поисковик проиндексировал 38,5 млн доменов на VPS за $5

Разработчик построил открытый поисковик cl0q без логирования запросов и аккаунтов: сейчас в базе 38,5 млн доменов и 24,8 млн страниц, цель — 100 млн. Проект вырос с 2 ГБ VPS, ежедневно краулится 250–300 тыс. страниц.

• 38,5 млн доменов, 24,8 млн страниц, 1 027 TLD в индексе
• Ежедневный краулинг 250–300 тыс. страниц, ре-краулинг с 9 октября
• 16,3 млн сайтов имеют favicon, 7 млн уникальных иконок по SHA-256
• Поиск без cookies и логов, аккаунты опциональны и на passkey