Automatización de la Extracción de Datos de Etsy con Bright Data, Google Gemini y OpenAI

Este workflow automatiza la extracción de datos de productos de Etsy utilizando Bright Data como proxy para el scraping, Google Gemini y OpenAI para el procesamiento del lenguaje natural (PLN) y la extracción de información, y un webhook para la notificación de datos. El workflow comienza con un disparador manual. Se define una consulta de búsqueda de Etsy. Luego, se realiza una solicitud HTTP a la API de Bright Data para obtener los datos de Etsy. Estos datos se procesan usando el modelo de lenguaje grande Google Gemini para extraer información relevante del producto. Los resultados se dividen en lotes para un procesamiento más eficiente. Cada lote se procesa de nuevo con Google Gemini para extraer información adicional. Adicionalmente, se utiliza OpenAI para refinar la extracción de información paginada. Los datos extraídos se escriben en un archivo y se envía una notificación a través de un webhook. El workflow incluye manejo de paginación para obtener todos los resultados de la búsqueda.