Evaluación y Análisis

# Todos las arañas tienen acceso a todo el directorio (preferible no especificar carpetas comprometidas)
User-agent: *
Disallow:

# Los robots han de esperar 30 segundos entre cada petición (no afecta a todos los robots, pero si a los principales: MSNBot, Slurp i Googlebot)
Crawl-delay: 30

# Permitir trabajar a los buscadores de 0 am a 6 am (horario GMT). Como Madrid es GMT+2, a efectos de España será de las 2 am a 8 am
Visit-time: 0000-0600 

# Ayuda para encontrar el sitemap

La clasificación global de Semrush para cuatrovalles.es es 11,796,701 . cuatrovalles.es tiene un valor estimado de US$897,226 según los ingresos publicitarios estimados. cuatrovalles.es es accedido por aproximadamente 103,527 usuarios únicos cada día. Su servidor web está ubicado en Spain y tiene una dirección IP de 82.223.54.202. SiteAdvisor dice que es seguro acceder a cuatrovalles.es.

HTTP/1.1 301 Moved Permanently
Content-Length: 151
Content-Type: text/html; charset=UTF-8
Location: https://www.cuatrovalles.es/
Server: Microsoft-IIS/10.0
Date: Tue, 04 Jan 2022 08:53:06 GMT

HTTP/2 200 
cache-control: no-store, no-cache, must-revalidate
pragma: no-cache
content-length: 0
content-type: text/html; charset=UTF-8
expires: Thu, 19 Nov 1981 08:52:00 GMT
vary: Accept-Encoding
server: Microsoft-IIS/10.0
x-powered-by: PHP/7.4.4
set-cookie: idiomaCuatroValles=0; expires=Tue, 04-Jan-2022 09:53:06 GMT; Max-Age=3600; path=/
set-cookie: CuatroValles_LeyCookiesOK_0=0; path=/
set-cookie: PHPSESSID=4akrhdkhmqm0khdjovjd80em9t; path=/
date: Tue, 04 Jan 2022 08:53:08 GMT