Pyne

Um crawler é um programa que visita websites e lê as suas páginas e outras informações para criar entradas para um índice de motores de busca. Os principais motores de busca na Web têm todos um programa deste tipo, que também é conhecido como um “spider” ou um “bot”. Os rastreadores são normalmente programados para … Ler mais