La acción de obtener estrictamente datos de sitios web considerados públicos se conoce como web scraping ético. Si hay disponible una API pública, úsela en lugar de extraer los datos directamente si contiene la información que necesita. Utilice una cadena de agente de usuario para identificarse con sus datos. Establezca una tasa realista para la extracción de datos y limite o regule el número de solicitudes por segundo.
¿Qué es el scraping ético?