ИИ-сотрудники · Ресёрч · № 30

ИИ-сборщик данных с сайтов

Только Claude Code Нужен ключ Firecrawl

Вытаскивает данные с сайтов без ручного копирования: тексты страниц, цены, таблицы, каталоги. Может обойти целый сайт и собрать всё в структурированную таблицу.

Скачать сотрудника

Архив скилла и та же инструкция в PDF, чтобы держать под рукой.

firecrawl-skill.zipархив скилла, 5 КБ Инструкция174 КБ, 2 страницы

Под капотом: скилл на базе Firecrawl (у официального MCP-сервера Firecrawl 6 800+ звёзд на GitHub). Firecrawl обходит защиты и отдаёт чистый контент.

Что умеет

Установка

  1. Зарегистрируйся на firecrawl.dev и возьми API-ключ: бесплатный тариф даёт 500 запросов.
  2. Скачай архив firecrawl-skill.zip из этой папки, распакуй и положи папку в ~/.claude/skills/.
  3. Поставь библиотеку: pip install firecrawl python-dotenv
  4. Добавь ключ в файл ~/.env строкой FIRECRAWL_API_KEY=твой-ключ: скилл читает его оттуда. Готово.
В браузерном Claude не заработает. Этому сотруднику нужен доступ к твоему компьютеру, файлам или внешним сервисам. Чат работает в изолированной песочнице, такого доступа там нет. Ставь его в Claude Code, как описано в соседней вкладке.
Совет: Бесплатного тарифа (500 запросов) хватает для регулярного сбора небольших объёмов. Следи за остатком в личном кабинете Firecrawl, чтобы не упереться в лимит посреди задачи.

Как пользоваться

Специальных команд нет. Пиши задачу обычными словами, скилл включится сам. Примеры фраз:

«Собери все тарифы с этих 5 сайтов в таблицу»
«Вытащи контент этой страницы в markdown»
«Обойди раздел блога [ссылка] и собери заголовки со ссылками»
«Собери каталог курсов с этого сайта: название, цена, формат»

Что получишь на выходе

Чистые структурированные данные из веба: таблица, список или текст без рекламы и мусора. Часы ручного копирования превращаются в один запрос.

Пример задачи целиком

Собери с этих пяти сайтов школ по нейросетям (ссылки прилагаю) данные в одну таблицу: название курса, цена, длительность, формат, есть ли рассрочка. На выходе Excel с колонкой «источник» и датой сбора.

Забрать сразу всех

Один архив: 60 папок с архивами скиллов, PDF-инструкция к каждому и оглавление, с кого начинать.

Загрузить 60 сотрудников

Частые вопросы

Закончились бесплатные запросы?

Сотрудник предупредит и остановится до трат. Дальше или платный тариф Firecrawl, или ждать обновления лимита.

Сайт не отдаёт данные?

Некоторые сайты закрыты жёстко. Скажи об ошибке, сотрудник попробует другой способ или честно скажет, что сайт недоступен.

Это легально?

Открытые страницы собирать можно. Персональные данные и закрытые разделы: нет. Уважай правила сайтов.

Источник: 6 800+ звёзд у MCP-версии. Поставил и проверил на своих задачах.

Похожие сотрудники

№ 29

ИИ-исследователь

Проводит глубокие исследования с проверкой источников: 8 фаз, перекрёстная валидация фактов, оценка надёжности каждого источника. Режимы от быстрого (2 минуты) до ультраглубокого (45 минут).

 № 31

ИИ-видеоаналитик

Скачивает видео с YouTube, TikTok, X и 1800+ площадок, вытаскивает звук и субтитры, делает транскрипт и выжимку. Часовое видео превращается в конспект за минуты.

 № 32

ИИ-расшифровщик эфиров

Транскрибирует аудио и видео локально и делает критический разбор: выжимка с таймкодами, логические дыры, слабые места аргументации. Идеален для разбора своих выступлений и чужих эфиров.