Desarrollo y DevOps

Web scraping usando Google Gemini y AI

19 nodos 197 129 Automatic trigger
Descargar

Descripción del flujo de trabajo

Una plantilla de automatización avanzada que combina un agente de IA inteligente con Google Gemini para extraer datos web eficientemente, almacenando resultados en archivos y gestionando contexto mediante búferes de memoria dinámica.

Cómo funciona

  1. 1.Activar disparador manual y enviar URL objetivo
  2. 2.Invocar agente de IA para orquestar flujos de extracción y procesamiento
  3. 3.Enviar solicitudes vía MCP Client para acceder a herramientas de raspado web
  4. 4.Procesar respuestas utilizando modelo de lenguaje Google Gemini
  5. 5.Guardar datos extraídos en archivos organizados
  6. 6.Mantener contexto histórico mediante gestión de búfer de memoria

Casos de uso

  • Recopilar datos de productos de sitios de comercio electrónico
  • Extraer precios de materias primas y monitorear cambios continuos
  • Recopilar automáticamente artículos de noticias y feeds de contenido
  • Recuperar información de contacto desde directorios comerciales

Requisitos

  • Clave API válida de Google Gemini para procesamiento de lenguaje
  • Acceso a interfaces MCP para interacciones con servicios web
  • Permisos de lectura y escritura en el sistema de archivos
  • Conectividad a internet estable y confiable

Valor del servicio

Ideal como servicio de automatización inteligente que combina integraciones e inteligencia artificial para producir resultados listos para usar.

Aplicaciones utilizadas

AI Agent Mcp Client Tool Gemini Memory Read Write File

Detalles

Disparador Automatic trigger
Nodos 19
Aplicaciones 6
Vistas 197
Descargas 129

Cómo usar

  1. 1.Haz clic en "Descargar plantilla"
  2. 2.Abre tu panel de n8n
  3. 3.Ve a Workflows > Import from File
  4. 4.Selecciona el archivo descargado y configura las credenciales

Nodos utilizados (19)

/

AI Agent

Agent

#1

When clicking ‘Test workflow’

Manual Trigger

#2

MCP Client list all tools for Bright Data

Mcp Client

#3

Sticky Note1

Sticky Note

#4

MCP Client List all tools

Mcp Client Tool

#5

MCP Client Bright Data Web Scraper

Mcp Client

#6

Webhook for web scraper

HTTP Request

#7

Set the URLs

Set

#8

MCP Client to Scrape as Markdown

Mcp Client Tool

#9

MCP Client to Scrape as HTML

Mcp Client Tool

#10

Google Gemini Chat Model for AI Agent

Gemini Model

#11

Sticky Note

Sticky Note

#12

Simple Memory

Memory Buffer Window

#13

Webhook for Web Scraper AI Agent

HTTP Request

#14

Set the URL with the Webhook URL and data format

Set

#15

Create a binary data

Function

#16

Write the scraped content to disk

Read Write File

#17

Sticky Note2

Sticky Note

#18

Sticky Note3

Sticky Note

#19