O ato de obter estritamente dados de sites considerados públicos é conhecido como web scraping ético. Se uma API pública estiver disponível, utilize-a em vez de fazer scraping diretamente dos dados, caso ela tenha as informações necessárias. Use um user agent string para se identificar junto aos dados. Defina uma taxa realista para o scraping de dados e limite ou controle o número de requisições por segundo.
O que é scraping ético?