MCP серверы для веб-скрапинга и сбора данных с сайтов

bighippoman/intercept-mcp

от bighippoman

intercept-mcp — MCP-сервер, дающий AI возможность читать веб-страницы: извлекает чистый markdown из любых URL, обрабатывает Twitter, YouTube, arXiv, PDF, GitHub и другие источники. Использует много...

mrslbt/rippr

от mrslbt

MCP сервер rippr извлекает транскрипты YouTube для людей и AI-агентов. Субтитры сохраняются локально и возвращаются модели в форматах RAG, JSON или Markdown. Инструмент работает с Claude Desktop и Cursor.

Dumpling-AI/mcp-server-dumplingai

официальный

от dumpling-ai

Интегрируйте Dumpling AI через MCP сервер: собирайте данные с веб-страниц, транскрипты YouTube, новости, отзывы и карты. Выполняйте скрапинг, конвертацию документов, генерацию изображений и запуск JavaScript/Python кода. Полезен разработчикам и дата-сайентистам для автоматизации сбора и обработки...

webscraping-ai/webscraping-ai-mcp-server

официальный

от webscraping-ai

MCP сервер для веб-скрапинга через WebScraping.AI — извлекает текст, HTML и структурированные данные, задаёт вопросы по содержимому страниц. Поддерживает JavaScript-рендеринг, CSS-селекторы, выбор прокси и эмуляцию устройств. Идеален для интеграции с LLM при сборе информации с сайтов.

konippi/servo-fetch

от konippi

servo-fetch рендерит страницы с JavaScript и выгружает чистый Markdown, JSON или скриншоты. Без Chromium и API-ключа.

n24q02m/wet-mcp

от n24q02m

Открытый MCP-сервер для AI-агентов с веб-поиском, извлечением контента и поиском по документации библиотек. Использует 5 стратегий скрапинга, работает без API-ключей — подходит для автономного сбор...

MikkoParkkola/nab

от mikkoparkkola

Nab это токен-эффективный MCP сервер: извлекает чистый markdown из URL с куками, локально транскрибирует аудио/видео и отслеживает изменения. Всё в одном Rust-бинарнике с защитой от инъекций.

zcaceres/fetch-mcp

от zcaceres

MCP сервер для загрузки веб-контента и преобразования его в HTML, Markdown, JSON, читаемый текст или транскрипты YouTube. Полезен разработчикам для извлечения статей, данных и субтитров без лишнего...

just-every/mcp-read-website-fast

от just-every

MCP-сервер для быстрого извлечения веб-контента и преобразования в чистый Markdown. Минимизирует расход токенов, использует Mozilla Readability и кэширование. Идеален для Claude Code, IDE и AI-пайп...

lfnovo/content-core

от lfnovo

MCP сервер Content Core извлекает, обрабатывает и суммаризирует контент из URL, документов и медиафайлов. Полезен разработчикам и ИИ-агентам: интеграция с Claude Desktop, поддержка YouTube, PDF, аудио. Единый API и CLI.

tavily-ai/tavily-mcp

от tavily-ai

Tavily ищет свежую информацию в интернете, извлекает данные со страниц, строит карту сайтов и работает без локальной установки.

apify/actors-mcp-server

официальный

от apify

Извлекает данные из соцсетей, поисковиков, карт и любых сайтов: парсит посты Facebook, контакты Google Maps, выдачу Google Search.

Firecrawl MCP

официальный

от firecrawl

MCP сервер для поиска и скрапинга веб-страниц, превращающий живой интернет в чистые данные для ИИ-агентов. Поддерживает навигацию, клики и автономные исследования. Работает в облаке или локально.

Aas-ee/open-webSearch

от aas-ee

Ищет в интернете через Bing, DuckDuckGo и другие поисковики без API-ключей, вытаскивает текст статей и README с GitHub.

brightdata/brightdata-mcp

официальный

от brightdata

MCP-сервер Bright Data подключает LLM к живому интернету, обходя блокировки и CAPTCHA. Даёт real-time поиск, скрапинг, мониторинг e-commerce, данных с npm/PyPI и AI-брендов. Бесплатно 5 000 кредитов в месяц.

Xquik-dev/x-twitter-scraper

от xquik-dev

MCP-сервер для X (Twitter) Scraper API — инструмент для агентов ИИ, который даёт доступ к поиску твитов, данным профилей, подписчикам, медиа, мониторингу и вебхукам. Включает 2 MCP-инструмента и бо...

overtlids/mcp-searxng-enhanced

от overtlids

MCP-сервер для веб-поиска с поддержкой категорий (изображения, видео, файлы) и извлечения контента сайтов с цитированием. Включает чтение PDF, кэширование и управление временными зонами. Полезен разработчикам, интегрирующим SearXNG в ассистентов и инструменты.

Erodenn/fetch-guard

от erodenn

FetchGuard - MCP-сервер и CLI для безопасного извлечения веб-контента в чистый Markdown. Защищает от prompt-инъекций, скрытых элементов, бот-блоков и paywall. Полезен при интеграции веб-данных в LL...

andyliszewski/webcrawl-mcp

от andyliszewski

MCP сервер для веб-скрапинга, поиска и обхода сайтов без headless-браузера. Использует бесплатные библиотеки (trafilatura) для извлечения контента, с опциональным Fallback на Firecrawl для JS-тяжёл...

yubinkim444/ai-first-scraper-mcp

от yubinkim444

Этот MCP сервер даёт AI-агентам три инструмента: загрузку страницы в Markdown, пакетную загрузку до 25 URL, веб-поиск с авто-преобразованием результатов. Избавляет от сырого HTML и рекламы, для Claude, Cursor, Cline.

scrape-badger/scrapebadger-mcp

от scrape-badger

MCP сервер ScrapeBadger открывает AI-агентам полный доступ к данным Twitter: профили, твиты, тренды и списки. Используйте для анализа, мониторинга и исследований. Совместим с Claude, Cursor и ChatGPT.

macrocosm-os/macrocosmos-mcp

от macrocosm-os

MCP сервер Macrocosmos собирает данные из X (Twitter) и Reddit в реальном времени через Bittensor. Идеален для аналитики трендов, мониторинга аккаунтов и крупномасштабного сбора постов — от быстрых...

Retio-ai/pagemap

от retio-ai

PageMap сжимает HTML в компактные карты для AI-агентов, сокращая токены на 97%. Агенты могут кликать, вводить текст и навигировать по страницам, поддерживая 16 типов и 30+ e-commerce. Идеально для ...

oxylabs/oxylabs-mcp

от oxylabs

MCP инструмент для веб-скрапинга: связывает AI-модели с реальными данными, предлагая универсальный скрапер, парсинг Google/Amazon, AI-извлечение, краулинг и браузерный агент с обходом CAPTCHA и geo-доступом.

scrapercity/scrapercity-cli

от scrapercity

MCP сервер ScraperCity - лидогенерация для AI-агентов: парсинг Apollo и Google Maps, поиск email и телефонов, валидация. 15+ инструментов для B2B-контактов, холодных продаж. Работает через CLI, MCP, API.

lyrenth/lyrenth-mcp

от lyrenth

MCP сервер Lyrenth для чтения веб-страниц: превращает HTML в Markdown (AIDocument), экономя токены. Полезен AI-агентам для получения чистого контента без навигации. Поддерживает пакетные запросы до 20 URL и кэширование.

webpeel/webpeel

от webpeel

MCP сервер для AI-агентов, выполняющий веб-загрузку, поиск, краулинг, извлечение данных и скриншоты единым API. Содержит 55+ доменных экстракторов для Reddit, GitHub, YouTube и других. Идеален для ...

olostep/olostep-mcp-server

от olostep

MCP сервер для веб-скрапинга и поиска через Olostep: извлекает контент в разных форматах и выполняет ИИ-поиск с цитатами, пакетно собирает до 10k URL и обходит сайты с построением карты ссылок.

crawlbase/crawlbase-mcp

от crawlbase

Crawlbase MCP инструмент соединяет AI с живым вебом: извлекает HTML, Markdown и скриншоты, обрабатывая JavaScript и защиту от ботов. Идеально для анализа рынка, мониторинга цен и автономных агентов, требующих свежих данных.

ymw0407/auth-fetch-mcp

от ymw0407

MCP сервер для AI-ассистентов: открывает браузер для входа на защищённые страницы, захватывает очищенный HTML и сохраняет сессии локально. Помогает разработчикам читать сайты с авторизацией через ИИ без повторных логинов.

Custodia-Admin/pagebolt-mcp

от custodia-admin

PageBolt MCP сервер открывает AI-ассистентам браузерную веб-автоматизацию: скриншоты, PDF и запись демо-видео. Также инспектирует страницы и создаёт OG-картинки. Просто опишите задачу — сервер выполнит.

scavio-ai/scavio-mcp

от scavio-ai

Scavio MCP — единый API и MCP-сервер с 33 инструментами для поиска в Google, YouTube, Amazon, Walmart, TikTok, Instagram и Reddit. Подключает AI-агентов к веб-поиску, товарам, видео и соцсетям чере...

ofershap/mcp-server-scraper

от ofershap

MCP-сервер для веб-скрапинга: извлекает чистый контент с URL в виде markdown, ссылки и метаданные. Использует Mozilla Readability, не требует API-ключей и настроек. Бесплатная альтернатива Firecraw...

junipr-labs/mcp-server

от junipr-labs

MCP-сервер Junipr даёт AI-ассистентам доступ к 75+ инструментам веб-интеллигенции: скриншоты, PDF, метаданные и многое другое. Бесплатный тариф: 500 кредитов/месяц. Всё через один API.

Crawlora-org/crawlora-mcp

от crawlora-org

Crawlora MCP - 445 инструментов чистых JSON-данных из публичных источников: поиск, карты, e-commerce, соцсети, финансы, путешествия. Полезен AI-агентам, заменяя парсинг HTML. До 2000 кредитов/мес.

nangman-infra/touch-browser

от nangman-infra

Touch-browser - MCP сервер для проверки фактов AI-агентами. Анализирует страницу и выдаёт вердикты по утверждениям с цитатами: поддержано, опровергнуто или нужен ещё просмотр.

tinyfish-io/agentql-mcp

официальный

от tinyfish-io

Сервер AgentQL для MCP извлекает структурированные данные с любой веб-страницы по описанию на естественном языке. Разработчику достаточно указать URL и перечислить нужные поля – MCP инструмент сам соберет информацию для AI-агентов.

scrapeless-ai/scrapeless-mcp-server

официальный

от scrapeless-ai

Scrapeless MCP Server подключает LLM и AI-агентов к вебу: поиск Google, тренды, браузерная автоматизация, скрапинг (HTML, Markdown, скриншоты). Применяется для AI-ассистентов, копилотов и веб-агентов.

mzxrai/mcp-webresearch

от mzxrai

Ищет в Google, извлекает текст страниц, делает скриншоты и ведёт журнал сессии с URL источников для цитирования.

apify/mcp-server-rag-web-browser

официальный

от apify

Ищет в Google и очищает веб-страницы в Markdown, поддерживает JS-сайты. Устарел, используйте mcp.apify.com с 6000+ инструментов.

securecoders/opengraph-io-mcp

от securecoders

Отдаёт OpenGraph.io данные по любой ссылке: превью сайта, скриншот, чистый текст и Markdown. Задавайте вопросы по содержанию страницы или извлекайте нужные теги.

urlbox/urlbox-mcp-server

от urlbox

MCP-сервер для Urlbox Screenshot API: делайте скриншоты, PDF, извлекайте HTML и markdown с любых сайтов. Идеален для AI-ассистентов, чтобы захватывать страницы без рекламы и куки-баннеров.

hyperbrowserai/mcp

от hyperbrowserai

MCP сервер Hyperbrowser для скрапинга, краулинга и извлечения структурированных данных. Включает браузерные агенты OpenAI CUA и Claude. Для веб-автоматизации и сбора данных LLM.

jae-jae/fetcher-mcp

от jae-jae

Читает любые страницы через headless-браузер с JavaScript, вычищает рекламу и навигацию, отдаёт текст в HTML или Markdown. Загружает несколько URL параллельно.

supadata-ai/mcp

от supadata-ai

MCP сервер для извлечения транскриптов видео с YouTube, TikTok, Instagram и Twitter, а также веб-скрапинга, краулинга и AI-извлечения структурированных данных. Помогает разработчикам парсить контент и собирать метаданные с медиаплатформ.

Mingye-Lu/AgenticCrawler

от mingye-lu

MCP-сервер для автоматизации браузера с полным доступом к DevTools. Агент навигирует, кликает, извлекает данные, а также анализирует сеть, консольные ошибки, производительность и доступность. Один Rust бинарник — без Node, Python или Docker. Полезен разработчикам и тестировщикам для глубокого наб...

hshintelligence/agent-scrape

от hshintelligence

MCP сервер для платного веб-скрапинга — AI-агенты вызывают инструменты и моментально платят $0.001 USDC за вызов, без регистрации и API-ключей. Включает сбор метаданных, скриншоты, извлечение данны...

pskill9/website-downloader

от pskill9

MCP-сервер для скачивания целых сайтов с помощью wget. Сохраняет структуру и конвертирует ссылки для локального просмотра. Полезен для архивирования и офлайн-доступа. Требует установленного wget.

Crawleo/Crawleo-MCP

от crawleo

Crawleo MCP-сервер даёт AI-ассистентам веб-поиск и краулинг в реальном времени: извлекайте данные с любых URL, выбирайте формат (HTML, Markdown, текст), настраивайте страну и устройство. Без хранен...

kimdonghwi94/Web-Analyzer-MCP

от kimdonghwi94

MCP сервер для интеллектуального анализа веб-страниц: умеет извлекать ключевой контент в чистый markdown и отвечать на вопросы по содержимому сайта с помощью GPT. Помогает разработчикам получать су...