¿Cómo BLOQUEAR bots de AHREF, SEMREUSH y otros?

6131313

Piedra
Usuario de Piedra
Mensajes
45
Puntuación de reacción
0
Buen día compañeros

No estoy seguro si me encuentro en la sección adecuada del foro. Pero necesito preguntar. Tengo claro que se puede bloquear ahref, semrush y las demás webs. Así como se puede bloquear a Google. El punto es que no sé cómo. Si alguien sabe, por favor, aguardo respuesta. Algún plugin o quizá codigo.

Gracias.
 

Byron Vargas

Piedra
Usuario de Piedra
Mensajes
38
Puntuación de reacción
0
Puedes bloquear los bots a través de robots.txt o htacces. Si no has modificado nunca estos archivos, realiza antes un respaldo. Ten mucho cuidado al modificar el archivo de htacces.

Por ejemplo para bloquear el bot de semrush a traves de robots.txt

User-agent: SemrushBot
Disallow: /

User-agent: SemrushBot-SA
Disallow: /

Por ejemplo para bloquear el bot de semrush a traves de htacces

Options +FollowSymlinks
RewriteEngine On
RewriteBase /
SetEnvIfNoCase User-Agent "^SemrushBot" bad_user
Deny from env=bad_user


Solo necesitas saber el nombre del bot de cada pagina que necesitas bloquear y puedes buscar en google
 
Mensajes
1
Puntuación de reacción
0
Si, puedes bloquearlos por medio del robot.txt, yo siempre lo hago si no quiero que los robots de google detecten ciertas urls.

Saludos.
 
Arriba