Por ahora, ha terminado de construir su primera tarea de scraping y sabe cómo ejecutar la tarea para obtener los datos que necesita. Llevemos al siguiente nivel y descubramos cómo puede hacer que sus rutinas diarias de scraping sean más efectivas y eficientes utilizando la tarea programación, exportación automática de datos y API.
Programación de tareas
Si planea obtener datos extraídos regularmente, la programación de tareas es exactamente lo que necesita y puede ahorrarle mucho tiempo. Puede programar su tarea para que se ejecute una vez, en un horario recurrente, o incluso que se ejecute repetidamente, como cada 1 minuto, 5 minutos, 10 minutos o 30 minutos.
1. Busque su tarea en el Tablero, haga clic en el ícono Mostrar más, luego elija "Ejecución Nube" y seleccione "Programar".
2. Elija con qué frecuencia le gustaría ejecutar la tarea.
3. Para crawls recurrentes, seleccione el día de la semana/día del mes y la hora del día para ejecutar su tarea.
Para repetir crawls, seleccione el intervalo de tiempo deseado.
4. También puede guardar la configuración para su uso posterior. Dé un nombre a la configuración y haga clic en "Save". De esta manera, siempre puede seleccionar la configuración de programación guardada y aplicarla directamente a cualquier otra tarea.
5. Después de que todo esté hecho. Haga clic en "Save and Run“ para comenzar a ejecutar la tarea según lo programado de inmediato. Si solo desea guardar la programación, pero aún no desea ejecutar la tarea según la programación, haga clic en "Guardar".
6. Una vez que haya configurado el horario, puede ON y OFF fácilmente haciendo clic en el ícono Show More en el Tablero, luego seleccione "Cloud runs", allí puede elegir "Schedule ON" o "Schedule OFF".
7. Cuando se programa una tarea, verá el próximo tiempo de ejecución en el Tablero. Haga clic en el signo + en el Tablero, luego seleccione "Next Run". De esta manera, tendrá una idea clara de las tareas programadas y cuándo se espera la próxima ejecución.
Exportación automática de datos (para datos en la nube)
La exportación de datos a la database también se puede automatizar y programar. Si necesita exportar datos a sus bases de datos de manera regular, la programación de exportación de datos puede ahorrarle mucho trabajo.
1. Cargue los datos de la nube para su tarea.
2. Haga clic en "Exportar Datos"
3. Haga clic en abrir "Auto-export to database", luego seleccione el tipo de base de datos que tiene.
4. Complete la información para conectarse con su base de datos. Haga clic en "Probar conexión" para probar si la base de datos está conectada correctamente. Luego, haga clic en "Siguiente" para continuar. El siguiente paso es asignar los campos de datos y elegir el intervalo de tiempo deseado para la exportación.
5. Por último, haga clic en "Siguiente" para finalizar el proceso.
API
Con la API de Octoparse, puede ejecutar tareas de scraping, recuperar los datos extraídos e incluso editar sus tareas mediante programación mediante la coordinación con su propia aplicación.
Consulte este tutorial paso a paso sobre cómo conectarse a la API de Octoparse o consulte Documentación API para obtener más detalles.
Comentarios
0 comentarios
Inicie sesión para dejar un comentario.