Crawl Rate Limit

El Crawl Rate Limit es el número máximo de solicitudes que un bot hará a un sitio en un período específico. Esto evita que los servidores se sobrecarguen debido a un rastreo excesivo.