PickbenchBot и PickbenchRetail
У Pickbench два автоматических агента. Если вы увидели один из этих user agent в своих журналах, здесь написано, что он делает и как им управлять.
PickbenchBot (сборщик каталога)
PickbenchBot/0.1 (+https://pickbench.ai/bot)
Он читает публичные страницы товаров на собственных сайтах брендов и открытые государственные данные (например, сведения о расходе топлива и безопасности автомобилей в США), чтобы записать факты о товарах, каждый с адресом источника и хешем страницы. Он никогда не загружает страницы магазинов и сайтов отзывов, не входит в учётные записи, не отправляет cookie и не заполняет формы.
Он соблюдает robots.txt для токена PickbenchBot, учитывает Crawl-delay до 120 секунд (при большем значении сайт пропускается) и отправляет каждому хосту не больше одного запроса в 10 секунд, включая запросы robots.txt.
Как заблокировать или ограничить PickbenchBot
Добавьте эти строки в robots.txt вашего сайта. Правило для PickbenchBot начинает действовать в течение суток, а сайт, который не отдаёт нам robots.txt, не обходится.
User-agent: PickbenchBot
Disallow: /PickbenchRetail (клиенты лицензированных данных)
PickbenchRetail/0.1 (+https://pickbench.ai/bot; automated agent)
Так представляются наши клиенты API магазинов и товарных данных, которыми мы пользуемся на их условиях, в пределах ограничений частоты и кеширования каждого источника. Он обращается только к этим официальным API и не обходит сайты магазинов.
Что мы делаем с прочитанным
Мы используем страницы только как источники фактов о товарах для наших измерений и храним их сжатую копию с хешем как доказательство. Мы не публикуем страницы повторно, не продаём их и не обучаем на них ИИ-модели. Чтобы исправить факт или попросить нас остановиться, напишите на адрес ниже.
Контакты
Оператор этого сайта — Pickbench (оператор; сведения о его юридическом лице будут опубликованы на этой странице).
Почтовый адрес: будет опубликован на этой странице, когда появится.
Юридические запросы, исправления и вопросы об этих страницах: [email protected]
Запросы о персональных данных: [email protected]
Чтобы запросить доступ к данным, их исправление или удаление (в том числе записей Pick Bench), напишите на [email protected] и укажите клиентский идентификатор, показанный на странице /ru/legal/privacy/my-id/.