Web Crawler

Web crawler é um programa automatizado que navega por páginas da Web para indexar conteúdo em mecanismos de busca ou coletar dados.