MCP серверы для веб-скрапинга и сбора данных с сайтов

Вместо того чтобы писать парсеры под каждый сайт, вы подключаете нужный сервер к Cursor, Claude или другому клиенту и просите словами: собери данные с этой страницы, вытащи таблицу, обойди каталог и выгрузи товары. В этой подборке собраны MCP для веб-скрапинга и извлечения структурированных данных с сайтов. Данные с любой страницы — в готовом виде, без ручного парсинга.

Exa MCP Server даёт AI-ассистентам доступ к веб-поиску, поиску кода и исследованию компаний через Exa. Сервер легко интегрируется в Cursor, VS Code и Claude, предоставляя готовые инструменты для разработчиков. Просто подключите API-ключ и получите актуальные данные.

Веб-скрапингИнструменты для разработчиковИсследования и данныеПоиск
4742Звезд Github
TypeScriptЯзык
MITЛицензия

MCP сервер Tavily предоставляет инструменты для веб-поиска, извлечения данных и построения карты сайта в реальном времени. Помогает разработчикам AI-ассистентов получать актуальную информацию из интернета.

Веб-скрапингИнструменты для разработчиковПоиск
2231Звезд Github
JavaScriptЯзык
MITЛицензия

MCP-сервер Skill Seekers преобразует документацию, GitHub, PDF, видео и 18 типов источников в структурированные знания для AI-систем. Подходит для создания AI-навыков (Claude, Gemini, OpenAI), RAG-...

CI/CD и DevOpsGitRAG-системыАгентыАнализ кодаБазы данныхВеб-скрапингДокументацияЗнания и памятьИИ и машинное обучениеИнструменты для разработчиковИсследования и данныеОблачные платформыОбработка изображений и видеоОбработка мультимедиа
14495Звезд Github
PythonЯзык
MITЛицензия

MCP сервер для загрузки веб-контента и преобразования его в HTML, Markdown, JSON, читаемый текст или транскрипты YouTube. Полезен разработчикам для извлечения статей, данных и субтитров без лишнего...

Веб-скрапингПоиск
802Звезд Github
TypeScriptЯзык
MITЛицензия

MCP сервер для браузерной автоматизации на основе Playwright. Использует structured accessibility snapshots вместо скриншотов, что делает его быстрым и LLM-friendly. Подходит для агентов, тестирования и автономных сценариев без vision-моделей.

Автоматизация браузераАгентыАгенты для программированияВеб-скрапингВыполнение кодаИИ и машинное обучениеИнструменты для разработчиковИсследования и данныеТестирование и QA
35255Звезд Github
TypeScriptЯзык
Apache-2.0Лицензия

MCP сервер для веб-поиска локальных LLM без API-ключей. Использует Bing, Brave и DuckDuckGo для поиска и извлечения содержимого страниц. Включает три инструмента: глубокий поиск с контентом, быстрые выдержки и загрузку одной страницы. Совместим с LM Studio и LibreChat.

RAG-системыАвтоматизация браузераВеб-скрапингИИ и машинное обучениеИнструменты для разработчиковИсследования и данныеПоиск
1034Звезд Github
TypeScriptЯзык
MITЛицензия

MCP-сервер, открывающий ИИ-ассистентам доступ к контенту через протоколы Gopher и Gemini. Безопасное исследование ретро-пространств благодаря встроенной защите, кэшированию и TLS. Полезен энтузиаст...

БезопасностьВеб-скрапингИИ и машинное обучениеИнструменты для разработчиковИсследования и данные
7Звезд Github
PythonЯзык
MITЛицензия

MCP сервер для мультипровайдерного веб-поиска и извлечения контента. Поддерживает 13 поисковых и 6 extract-провайдеров с авто-роутингом, режимом исследования и диагностикой. Подходит для Claude Des...

Веб-скрапингИнструменты для разработчиковИсследования и данныеПоиск
2Звезд Github
PythonЯзык
MITЛицензия

MCP сервер для headless краулинга Screaming Frog через Claude: отправляйте URL и получайте экспорт CSV без GUI. Исправлены баги оригинала (зависания, проблемы с GUI, опасное удаление). Инструмент для SEO-автоматизации и встраивания краулинга в пайплайны без ручного запуска.

Автоматизация приложенийВеб-скрапингИнструменты для разработчиковИсследования и данныеМаркетингПоискТестирование и QA
2Звезд Github
PythonЯзык
MITЛицензия

MCP-сервер для создания скриншотов веб-страниц через Site-Shot с реальным рендерингом Chromium. Поддерживает полностраничный захват, автоматическое удаление рекламы и cookie-баннеров. Работает с Cl...

Автоматизация браузераВеб-скрапингИИ и машинное обучениеОбработка изображений и видео
1Звезд Github
JavaScriptЯзык
MITЛицензия

MCP-сервер Junipr даёт AI-ассистентам доступ к 75+ инструментам веб-интеллигенции: скриншоты, PDF, метаданные и многое другое. Бесплатный тариф: 500 кредитов/месяц. Всё через один API.

Автоматизация браузераВеб-скрапингОбработка изображений и видео
1Звезд Github
JavaScriptЯзык
MITЛицензия

MCP инструмент для поиска LinkedIn-страницы компании по домену или названию. Опирается на Apify, возвращает URL, confidence score, firmographics (сотрудники, отрасль, штаб-квартира) и ссылки на соц...

Веб-скрапингИсследования и данныеМаркетингПлатформы данныхПлатформы клиентских данныхПоискСоциальные сети
2Звезд Github
JavaScriptЯзык
MITЛицензия

FetchGuard - MCP-сервер и CLI для безопасного извлечения веб-контента в чистый Markdown. Защищает от prompt-инъекций, скрытых элементов, бот-блоков и paywall. Полезен при интеграции веб-данных в LL...

Автоматизация браузераБезопасностьВеб-скрапингИИ и машинное обучениеОткрытые данныеПоиск
1Звезд Github
PythonЯзык
MITЛицензия

PageMap сжимает HTML в компактные карты для AI-агентов, сокращая токены на 97%. Агенты могут кликать, вводить текст и навигировать по страницам, поддерживая 16 типов и 30+ e-commerce. Идеально для ...

RAG-системыАвтоматизация браузераАгентыВеб-скрапингЗнания и памятьИИ и машинное обучениеИнструменты для разработчиковИсследования и данные
34Звезд Github
PythonЯзык
NOASSERTIONЛицензия

MCP сервер для AI-ассистентов: открывает браузер для входа на защищённые страницы, захватывает очищенный HTML и сохраняет сессии локально. Помогает разработчикам читать сайты с авторизацией через ИИ без повторных логинов.

Автоматизация браузераАгенты для программированияВеб-скрапингИнструменты для разработчиковИсследования и данные
31Звезд Github
TypeScriptЯзык
MITЛицензия

MCP сервер Mamba Labs GTM Suite даёт 11 GTM-инструментов для разведки аккаунтов: идентификация, обогащение, сигналы найма и техстека, оценка ICP. Результаты в JSON для Clay. Помогает B2B-командам с...

CRMВеб-скрапингИИ и машинное обучениеИсследования и данныеМаркетинг
1Звезд Github
JavaScriptЯзык
MITЛицензия

intercept-mcp — MCP-сервер, дающий AI возможность читать веб-страницы: извлекает чистый markdown из любых URL, обрабатывает Twitter, YouTube, arXiv, PDF, GitHub и другие источники. Использует много...

RAG-системыАвтоматизация браузераАгенты для программированияВеб-скрапингДокументацияЗнания и памятьИИ и машинное обучениеИнструменты для разработчиковИсследования и данныеОбработка мультимедиаОткрытые данныеПоискСоциальные сети
8Звезд Github
TypeScriptЯзык
MITЛицензия

MCP-сервер для поиска и извлечения контента через Kagi API. Поддерживает веб, новости, видео, подкасты, изображения и выгрузку страниц в Markdown. Полезен разработчикам MCP-клиентов.

Веб-скрапингИсследования и данныеПоиск
450Звезд Github
PythonЯзык
MITЛицензия

MCP сервер для параллельного поиска в Google: отправляет несколько запросов одновременно, обходит капчу, симулирует поведение пользователя. Возвращает структурированные JSON-результаты — удобно для анализа данных и автоматизации.

Автоматизация браузераВеб-скрапингИнструменты для разработчиковПоиск
268Звезд Github
TypeScriptЯзык
MITЛицензия

MCP сервер для поиска и скрапинга веб-страниц, превращающий живой интернет в чистые данные для ИИ-агентов. Поддерживает навигацию, клики и автономные исследования. Работает в облаке или локально.

АгентыВеб-скрапингИнструменты для разработчиковИсследования и данныеПоиск
6989Звезд Github
JavaScriptЯзык
MITЛицензия

MCP сервер для поиска в DuckDuckGo и извлечения содержимого веб-страниц. Поддерживает настройки SafeSearch, региональную фильтрацию и гибкие параметры запросов. Удобный инструмент для LLM-агентов, ...

Веб-скрапингПоиск
1343Звезд Github
PythonЯзык
MITЛицензия

MCP сервер для бэклинк-интеллекта CrawlGraph: поиск ссылающихся доменов, gap-анализ конкурентов и тёплые цели для аутрича. Данные из Common Crawl (4,4 млрд ребер, 120 млн доменов) без ежемесячной подписки. Полезен SEO-специалистам для массового поиска ссылок и конкурентного анализа.

Веб-скрапингИнструменты для разработчиковИсследования и данныеМаркетингОткрытые данныеПлатформы данныхПоиск
1Звезд Github
TypeScriptЯзык
MITЛицензия

Driflyte MCP Server даёт AI-ассистентам доступ к веб-страницам и GitHub через рекурсивный краулинг и тематическое индексирование. Сервер возвращает релевантные документы по запросу. Бесплатно, без ...

RAG-системыВеб-скрапингЗнания и памятьИИ и машинное обучениеИнструменты для разработчиковИсследования и данныеПоиск
11Звезд Github
TypeScriptЯзык
MITЛицензия

Zero-API-Key Web Search - MCP-сервер для AI-агентов: веб-поиск, извлечение контекста, проверка утверждений с взвешенной оценкой доказательств. Бесплатно без API-ключа, поддерживает DuckDuckGo, Sear...

RAG-системыАгентыВеб-скрапингИИ и машинное обучениеИнструменты для разработчиковИсследования и данныеПоиск
13Звезд Github
PythonЯзык
MITЛицензия

MCP-сервер для AI-ассистентов, который ищет в интернете с проверкой реальных источников. Фильтруйте результаты по доверенным сайтам (медицина, право, наука, новости) и читайте полные статьи, а не с...

RAG-системыБиология и медицинаВеб-скрапингГосударственные данныеИнструменты для разработчиковИсследования и данныеОбработка изображений и видеоОткрытые данныеПоискСуммаризация текстаФинансыЮриспруденция и комплаенс
42Звезд Github
GoЯзык
MITЛицензия

Skylos — open-source статический анализатор кода на Python, JS, Java и других языках. Выявляет мертвый код, уязвимости, секреты и типичные ошибки AI-кода. Работает локально, интегрируется в CI/CD д...

CI/CD и DevOpsАнализ кодаБезопасностьВеб-скрапингИнструменты для разработчиковТестирование на проникновение
475Звезд Github
PythonЯзык
Apache-2.0Лицензия

Apify MCP Server подключает AI-агентов к тысячам готовых парсеров и краулеров из Apify Store - от соцсетей до карт и e-commerce. Поддерживает OAuth, x402 и Skyfire для оплаты без API-токена.

E-commerceRAG-системыWeb3 и децентрализованные технологииАгентыАгенты для программированияБлокчейнВеб-скрапингГеолокационные сервисыДокументацияИИ и машинное обучениеИнструменты для разработчиковКриптовалюты и DefiОблачное хранилищеОблачные платформыОткрытые данныеПлатежи и выставление счетовПлатформы данныхПоискРабочее место и продуктивностьСоциальные сети
2042Звезд Github
TypeScriptЯзык
MITЛицензия

Knowledge RAG — MCP сервер для локальной базы знаний из ваших PDF, Markdown и кода. Гибридный поиск (BM25 + семантика) и реранжинг работают офлайн, без API-ключей и Docker. 13 MCP инструментов для ...

CMSRAG-системыБазы данныхВеб-скрапингВекторные базы данныхДокументацияЗнания и памятьИИ и машинное обучениеИнструменты для разработчиковИсследования и данныеПоискРабочее место и продуктивность
234Звезд Github
PythonЯзык
MITЛицензия

MCP-сервер для автоматизации браузера с полным доступом к DevTools. Агент навигирует, кликает, извлекает данные, а также анализирует сеть, консольные ошибки, производительность и доступность. Один Rust бинарник — без Node, Python или Docker. Полезен разработчикам и тестировщикам для глубокого наб...

Автоматизация браузераАгентыВеб-скрапингВыполнение кодаИИ и машинное обучениеИнструменты для разработчиковМониторингТестирование и QA
10Звезд Github
RustЯзык
MITЛицензия

MCP инструмент для файловой системы через Claude Desktop. Поддерживает чтение и запись больших файлов, пакетное редактирование с резервированием, поиск по содержимому. Полезен для автоматизации файловых операций.

Веб-скрапингИнструменты для разработчиковФайловые системы
59Звезд Github
TypeScriptЯзык
Apache-2.0Лицензия

MCP-сервер для X (Twitter) Scraper API — инструмент для агентов ИИ, который даёт доступ к поиску твитов, данным профилей, подписчикам, медиа, мониторингу и вебхукам. Включает 2 MCP-инструмента и бо...

Автоматизация приложенийАгентыВеб-скрапингИнструменты для разработчиковИсследования и данныеМониторингОркестрация агентовПоискСоциальные сети
156Звезд Github
JavaScriptЯзык
MITЛицензия

MCP сервер flyto-core — отлаживаемый движок автоматизации с трассировкой каждого шага. 460+ модулей для браузера, API, файлов, SSH, Docker. При сбое восстанавливает выполнение с нужного шага. Для р...

CI/CD и DevOpsGitАвтоматизация браузераАвтоматизация ОСАвтоматизация приложенийАгентыАгенты для программированияВеб-скрапингВиртуализацияВыполнение кодаДоступ к командной строкеИИ и машинное обучениеИнструменты для разработчиковКомандная строкаКоммуникацииМониторингНаблюдаемостьОблачное хранилищеОблачные платформыОбработка изображений и видеоОркестрация агентовРабочее место и продуктивностьТестирование APIТестирование и QAУправление календаремФайловые системыЭлектронная почта
477Звезд Github
PythonЯзык
Apache-2.0Лицензия

MCP-сервер webclaw преобразует веб-страницы в чистый Markdown, JSON и LLM-контекст для AI-агентов. Работает локально, подключается к Claude/Cursor, скрапит, краулит и извлекает структурированные да...

RAG-системыАгентыВеб-скрапингИИ и машинное обучениеИнструменты для разработчиковИсследования и данныеПоискСуммаризация текста
1783Звезд Github
RustЯзык
AGPL-3.0Лицензия

OpenIntegrations — MCP сервер для интеграции 1С и OneScript с внешними API. Предоставляет готовые методы для Telegram, Bitrix24, баз данных и других сервисов. Полезен разработчикам для автоматизации бизнес-процессов.

CI/CD и DevOpsCMSGitАвтоматизация приложенийБазы данныхВеб-скрапингГеолокационные сервисыДокументацияЗаметкиИнструменты для разработчиковКомандная строкаКоммуникацииОблачные платформыОбработка мультимедиаПлатформы данныхРабочее место и продуктивностьУправление календаремФайловые системыЭлектронная почта
652Звезд Github
1C EnterpriseЯзык
MITЛицензия

MCP-сервер для подключения LLM к живому интернету в реальном времени — без блокировок и капч. Включает поиск, скрапинг в markdown и браузерную автоматику. Полезен для исследований, мониторинга цен ...

E-commerceАвтоматизация браузераАгентыАгенты для программированияВеб-скрапингИнструменты для разработчиковИсследования и данныеПоискПутешествия и транспортСоциальные сетиФинансы
2507Звезд Github
JavaScriptЯзык
MITЛицензия

MCP сервер для извлечения веб-контента через Playwright. Работает с динамическими сайтами, поддерживает JavaScript, умное выделение текста и пакетную загрузку. Идеален для сбора данных и разработки.

Автоматизация браузераВеб-скрапинг
1065Звезд Github
TypeScriptЯзык
MITЛицензия

Автономный браузерный движок для веб-скрапинга: извлекает контент без Chromium и API-ключей. Встроенный MCP сервер для AI-агентов выполняет JS, обходит сайты, строит layout. Полезен разработчикам.

Автоматизация браузераВеб-скрапингИИ и машинное обучениеИнструменты для разработчиков
131Звезд Github
RustЯзык
Apache-2.0Лицензия

MCP-сервер создает портативный .brand рантайм - извлекает бренд-идентичность из сайтов, Figma и PDF, компилирует гайдлайны, токены и правила голоса. AI-инструменты используют этот рантайм для генер...

Автоматизация браузераАвтоматизация приложенийАгентыАгенты для программированияАнализ кодаВеб-скрапингДокументацияЗнания и памятьИИ и машинное обучениеИнструменты дизайнаИнструменты для разработчиковИсследования и данныеМаркетингРабочее место и продуктивностьТестирование и QA
9Звезд Github
TypeScriptЯзык
MITЛицензия

MCP сервер для приватного веб-поиска, подключающий любой SearXNG к AI-ассистентам. Поддерживает поиск с пагинацией, чтение URL, кеширование, фильтры времени и языка — всё без API-ключей и с сохране...

Веб-скрапингИнструменты для разработчиковИсследования и данныеПоиск
1052Звезд Github
TypeScriptЯзык
MITЛицензия

open-websearch — это MCP-сервер и CLI для веб-поиска и извлечения контента без API-ключей. Поддерживает множество поисковиков (Bing, Baidu, DuckDuckGo и др.), загружает статьи и README с GitHub. Ра...

Веб-скрапингИнструменты для разработчиковПоиск
1615Звезд Github
TypeScriptЯзык
Apache-2.0Лицензия

MCP сервер облачной автоматизации браузера Browserbase. Позволяет AI-агентам навигировать по сайтам, извлекать данные и выполнять действия. Полезен для RPA и веб-скрапинга. Доступен self-hosted и hosted.

Автоматизация браузераВеб-скрапинг
3408Звезд Github
TypeScriptЯзык
Apache-2.0Лицензия

MCP-сервер для аналитики корейского фондового рынка на английском — отслеживает корпоративные раскрытия DART, изменения долей иностранных инвесторов и активность активистов в реальном времени. Подх...

Веб-скрапингГосударственные данныеИИ и машинное обучениеИнструменты для разработчиковИсследования и данныеМониторингОткрытые данныеПлатформы данныхФинансы
3Звезд Github
PythonЯзык
AGPL-3.0Лицензия

Используйте Safari MCP сервер для AI-агентов на macOS - ваш реальный браузер с сессиями, куками и 96 инструментами. Работает без Chrome, на нативном WebKit, с низким нагревом.

Автоматизация браузераВеб-скрапингИнструменты для разработчиковТестирование и QA
152Звезд Github
JavaScriptЯзык
MITЛицензия

MCP сервер для интеграции с ScraperAPI, позволяющий LLM-агентам легко выполнять веб-скрапинг. Поддерживает рендеринг JavaScript, геотаргетинг и обход блокировок. Полезен разработчикам, работающим с...

Веб-скрапингИнструменты для разработчиковИсследования и данные
5Звезд Github
PythonЯзык
MITЛицензия

Открытый MCP-сервер для AI-агентов с веб-поиском, извлечением контента и поиском по документации библиотек. Использует 5 стратегий скрапинга, работает без API-ключей — подходит для автономного сбор...

RAG-системыАвтоматизация браузераАгентыВеб-скрапингДокументацияИИ и машинное обучениеИнструменты для разработчиковИсследования и данныеОблачное хранилищеОбработка мультимедиаПоискФайловые системы
15Звезд Github
PythonЯзык
MITЛицензия

MCP сервер Content Core извлекает, обрабатывает и суммаризирует контент из URL, документов и медиафайлов. Полезен разработчикам и ИИ-агентам: интеграция с Claude Desktop, поддержка YouTube, PDF, аудио. Единый API и CLI.

Веб-скрапингИИ и машинное обучениеИнструменты для разработчиковИсследования и данныеОбработка аудиоОбработка мультимедиаОбработка речиСуммаризация текста
165Звезд Github
PythonЯзык
MITЛицензия

MCP-сервер для поиска через SerpApi: объединяет Google, Bing, YouTube, eBay и другие движки. Поддерживает погоду, котировки и гибкие режимы ответов - удобно для ИИ-агентов, которым нужны структурир...

E-commerceВеб-скрапингВизуализация данныхИнструменты для разработчиковИсследования и данныеОткрытые данныеПогодные сервисыПоискРазвлечения и медиаФинансы
156Звезд Github
PythonЯзык
MITЛицензия

MCP-сервер для управления TUI-приложениями через терминал. Поддерживает постоянные сессии: запускает TUI-программы (vim, htop), снимает скриншоты с xterm-эмуляцией, анализирует вывод.

ERP-системыАвтоматизация ОСАрхитектура ПОВеб-скрапингВыполнение кодаДоступ к командной строкеКомандная строкаКоммуникацииФайловые системы
10Звезд Github
JavaScriptЯзык
MITЛицензия

Unbrowser — легковесный MCP сервер для LLM-агентов, заменяющий тяжёлый Chrome. Возвращает структурированную BlockMap (~500 токенов), поддерживает cookie handoff и диагностику блокировок. 10MB, ~50M...

CI/CD и DevOpsCMSCRME-commerceERP-системыGitWeb3 и децентрализованные технологииАвтоматизация браузераАвтоматизация ОСАгенты для программированияАрхитектура ПОБезопасностьБиология и медицинаБлокчейнВеб-скрапингВизуализация данныхВиртуализацияГеолокационные сервисыГосударственные данныеЗаметкиЗдоровье и WellnessИгры и геймификацияИИ и машинное обучениеИнструменты дизайнаИнструменты для разработчиковИскусство и культураИсследования и данныеКомандная строкаКоммуникацииКриптовалюты и DefiМаркетингМониторингНедвижимостьОблачное хранилищеОбработка аудиоОбработка изображений и видеоОбработка мультимедиаОбработка речиОбразование и обучениеОткрытые данныеПлатежи и выставление счетовПлатформы клиентских данныхПогодные сервисыПоддержка клиентовПоискПутешествия и транспортРабочее место и продуктивностьРазвлечения и медиаСети и инфраструктураСоциальные сетиСпортСуммаризация текстаТестирование APIТестирование и QAТестирование на проникновениеУмный дом и IoTУправление календаремУправление проектамиФайловые системыФинансыЭлектронная почта
12Звезд Github
RustЯзык
Apache-2.0Лицензия

Локальный MCP-сервер для RAG-поиска и глубоких исследований без API-ключей. Поддерживает 9+ поисковых движков (Google, DuckDuckGo и др.), выполняет семантическое ранжирование результатов. Полезен д...

RAG-системыВеб-скрапингЗнания и памятьИИ и машинное обучениеИнструменты для разработчиковИсследования и данныеОткрытые данныеПоиск
132Звезд Github
PythonЯзык
MITЛицензия