Перейти к содержимому

Scrapeless Mcp Server

Интеграция LLM с вебом для реального времени: поиск Google, браузерная автоматизация и скрапинг динамических сайтов без блокировок.

TypeScript
48 stars

Описание

Scrapeless MCP Server — это открытый протокол для подключения AI-моделей (ChatGPT, Claude) и инструментов (Cursor) к веб-сервисам. Ключевые особенности: интеграция с Google Search/Trents, автоматизация браузера (навигация, клики, скролл), скрапинг JS-сайтов с экспортом в HTML, Markdown или скриншоты. Технологии: MCP-стандарт, Stdio/HTTP транспорт. Применения: AI-ассистенты для исследований, кодинг-копилоты, автономные веб-агенты для извлечения данных.

Возможности

Поиск в Google

Универсальный поиск информации и анализ трендов через Google Search и Trends.

Автоматизация браузера

Навигация по страницам, клики, ввод текста, скролл и ожидание элементов.

Скрапинг сайтов

Извлечение контента с динамических JS-сайтов в HTML, Markdown или скриншоты.

Скриншоты страниц

Захват высококачественных изображений веб-страниц.

Обработка Cloudflare

Автоматический обход защит для доступа к заблокированному контенту.

Установка

  1. Получите API-ключ: Войдите в дашборд Scrapeless (https://app.scrapeless.com/passport/login), перейдите в ‘Setting’ > ‘API Key Management’ > ‘Create API Key’ и скопируйте ключ.

  2. Настройте MCP-клиент:

Stdio (локальный):

{
  "mcpServers": {
    "Scrapeless MCP Server": {
      "command": "npx",
      "args": ["-y", "scrapeless-mcp-server"],
      "env": {
        "SCRAPELESS_KEY": "YOUR_SCRAPELESS_KEY"
      }
    }
  }
}

Streamable HTTP (хостинг):

{
  "mcpServers": {
    "Scrapeless MCP Server": {
      "type": "streamable-http",
      "url": "https://api.scrapeless.com/mcp",
      "headers": {
        "x-api-token": "YOUR_SCRAPELESS_KEY"
      },
      "disabled": false,
      "alwaysAllow": []
    }
  }
}

Интеграция: В Claude Desktop или Cursor добавьте конфиг в настройки MCP Servers.

Информация

Язык
TypeScript
Лицензия
MIT License
GitHub Stars
48

Ссылки