Este workflow busca videos de YouTube, los procesa y almacena la información relevante en una base de datos PostgreSQL. Se inicia manualmente y utiliza la API de YouTube para obtener datos de videos. Primero, verifica si la tabla en PostgreSQL ya existe; si no, la crea. Luego, recupera los IDs de los videos ya registrados para evitar duplicados. A continuación, realiza una búsqueda en YouTube y filtra los videos cortos. Los datos se estructuran y sanitizan antes de insertarlos en la base de datos. El workflow utiliza nodos de código personalizado para la manipulación de datos y la creación de consultas SQL. Se utiliza un bucle para procesar los resultados de la búsqueda en batches.
- Automatiza la búsqueda y almacenamiento de datos de videos de YouTube.
- Integra las APIs de YouTube y PostgreSQL.
- Evita la duplicación de datos mediante la consulta de una base de datos.
- Utiliza nodos de código para la transformación y limpieza de datos.
- Permite la gestión eficiente de grandes conjuntos de datos mediante el procesamiento por batches.