Как сделать ИИ-агента для скраппинга любой информации

В чате Нейроцеха часто мелькал запрос — научить нейронку делать скраппинг для сбора информации. Мы решили разобраться в теме и сделали ИИ-агента, который умеет делать скраппинг одного или нескольких сайтов сразу, выписывать карту сайта и даже идти вглубь сайта и находить нужную информацию. А результаты скраппинга записывать в Гугл-таблицу и дублировать результат в телеграм-бота.

Рассказываем, как все настроить.

Важно! Строить агента мы будем на платформе n8n. Если до этого вы с ней не взаимодействовали, сначала рекомендуем пройти наш мини-курс по агентам. Иначе разобраться в гайде будет сложно.

А если не хотите читать гайд — смотрите короткий видеообзор, где мы разбираемся со структурой агента и показываем, как он работает.