AutrokBot, el robot de Autrok
AutrokBot es el robot que Autrok, un producto de Pomars (pomars.com), usa para leer anuncios públicos de autos usados en Belo Horizonte y comparar el precio pedido con la Tabla FIPE y con autos similares. Si apareció en los registros de tu sitio, esta página explica quién es, qué hace y cómo pedirle que no vuelva.
Siempre se identifica con este user agent:
AutrokBot/1.0 (+https://autrok.com/bot)Qué recoge
Solo los datos del anuncio: marca, modelo, versión, año, kilometraje, color, combustible, transmisión, precio pedido, ciudad y la dirección de la página, para que cada auto en Autrok lleve de vuelta al anuncio original. Nunca copia fotos ni descripciones, no lee patentes y no guarda nombre, teléfono, correo ni ningún otro dato de vendedores particulares; de concesionarios y empresas de alquiler, solo el nombre de la empresa.
Cómo visita los sitios
Lee y respeta el robots.txt de cada sitio: las páginas bloqueadas nunca se visitan, y parte de los sitemaps o de las listas de stock en lugar de las búsquedas. Hace una solicitud a la vez en cada sitio, con al menos 2 segundos entre ellas (más, si el sitio pide un Crawl-delay), no usa cookies ni inicia sesión y empieza como máximo una pasada cada 20 horas en cada sitio.
Cuándo se detiene
Si el sitio responde 401, 403 o 429, o muestra una verificación contra robots, AutrokBot se detiene al instante y no intenta eludir el bloqueo. Después de un 429 espera al menos 24 horas (o el Retry-After, si es mayor); después de un rechazo, al menos 7 días. Los errores seguidos del servidor también lo detienen.
Tabla FIPE
Los valores de la Tabla FIPE no los recoge AutrokBot: llegan por un servicio de datos y se muestran solo por modelo, junto a cada anuncio.
Cómo pedirle que no visite tu sitio
Bloquea a AutrokBot en el robots.txt de tu sitio, como en el ejemplo de abajo: deja de visitarlo en un plazo de 24 horas. O escribe a bot@autrok.com con la dirección del sitio: en un plazo de 24 horas detenemos la recolección y retiramos sus anuncios de Autrok.
Para bloquear a AutrokBot en el robots.txt:
User-agent: AutrokBot
Disallow: /Dudas o pedidos sobre AutrokBot: bot@autrok.com