Diminua o tempo entre cada visita dos crawlers

Como já sabemos, regularmente crawlers varrem a web em busca de novos conteúdos. Essa visita aos sites não é feita randomicamente, os crawlers reconhecem conforme o tempo que o site X produz conteúdo diário, portanto passa a visita-lo diariamente.

Em certos casos, consegui que o Google indexasse uma nova página em minutos! A grande dica é: produza conteúdo todo dia. Não necessariamente uma página nova, mas mude seu site. Um novo post, uma nova notícia. Isso fará com que os robots diminuam o tempo entre uma visita e outra.