Fetch

Fetch извлекает веб-контент и преобразует его в HTML, JSON, текст или Markdown. Простая интеграция, настраиваемые заголовки и мощный парсинг для всех ваших задач с данными!

Веб-скрапинг и сбор данных Разработка API Инструменты разработчика ★ 761 GitHub (761 ★)

Fetch — это гибкий MCP-сервер, предназначенный для извлечения веб-контента и преобразования его в различные форматы. Он поддерживает HTML, JSON, обычный текст и Markdown, что позволяет приложениям легко получать доступ к онлайн-данным и использовать их. Для разбора используется современный fetch API и JSDOM, а для конвертации в Markdown — TurndownService.

Ключевые особенности

01Извлекает веб-контент в форматах HTML, JSON, обычный текст и Markdown.

02Поддерживает пользовательские заголовки для HTTP-запросов.

03Использует JSDOM для разбора HTML и извлечения текста.

04Применяет TurndownService для конвертации HTML в Markdown.

05Легко интегрируется с настольными приложениями через настройку MCP-сервера.

Варианты использования

01Интеграция веб-контента в настольные приложения.

02Преобразование веб-страниц в Markdown для документации или создания контента.

03Получение структурированных данных с веб-сайтов в формате JSON.

Fetch MCP Server

This MCP server provides functionality to fetch web content in various formats, including HTML, JSON, plain text, and Markdown.

Components

Tools

fetch_html
- Fetch a website and return the content as HTML
- Input:
  - url (string, required): URL of the website to fetch
  - headers (object, optional): Custom headers to include in the request
- Returns the raw HTML content of the webpage
fetch_json
- Fetch a JSON file from a URL
- Input:
  - url (string, required): URL of the JSON to fetch
  - headers (object, optional): Custom headers to include in the request
- Returns the parsed JSON content
fetch_txt
- Fetch a website and return the content as plain text (no HTML)
- Input:
  - url (string, required): URL of the website to fetch
  - headers (object, optional): Custom headers to include in the request
- Returns the text content of the webpage with HTML tags, scripts, and styles removed
fetch_markdown
- Fetch a website and return the content as Markdown
- Input:
  - url (string, required): URL of the website to fetch
  - headers (object, optional): Custom headers to include in the request
- Returns the content of the webpage converted to Markdown format

Resources

This server does not provide any persistent resources. It's designed to fetch and transform web content on demand.

Getting started

Clone the repository
Install dependencies: npm install
Build the server: npm run build

Usage

To use the server, you can run it directly:

npm start

This will start the Fetch MCP Server running on stdio.

Usage with Desktop App

To integrate this server with a desktop app, add the following to your app's server configuration:

{
  "mcpServers": {
    "fetch": {
      "command": "node",
      "args": [
        "{ABSOLUTE PATH TO FILE HERE}/dist/index.js"
      ]
    }
  }
}

Features

Fetches web content using modern fetch API
Supports custom headers for requests
Provides content in multiple formats: HTML, JSON, plain text, and Markdown
Uses JSDOM for HTML parsing and text extraction
Uses TurndownService for HTML to Markdown conversion

Development

Run npm run dev to start the TypeScript compiler in watch mode
Use npm test to run the test suite

License

This project is licensed under the MIT License.

Fetch MCP Server

Обзор

Fetch MCP Server — это простой инструмент для получения веб-контента и его преобразования в различные форматы: HTML, JSON, Plain Text и Markdown. Сервер предназначен для использования в качестве компонента MCP (Model Context Protocol) и работает по запросу, не предоставляя постоянных ресурсов.

Компоненты

Сервер предоставляет четыре инструмента, каждый из которых принимает URL и опциональные HTTP-заголовки:

fetch_html

Назначение: Загружает веб-страницу и возвращает необработанный HTML-код.
Входные параметры: url (строка, обязательный), headers (объект, опционально).
Результат: Сырой HTML-контент.

fetch_json

Назначение: Получает JSON-файл по URL и возвращает его в виде разобранного объекта JavaScript (JSON).
Входные параметры: url (строка, обязательный), headers (объект, опционально).
Результат: Разобранный JSON-объект.

fetch_txt

Назначение: Извлекает текст со страницы, удаляя HTML-теги, скрипты и стили.
Входные параметры: url (строка, обязательный), headers (объект, опционально).
Результат: Чистый текст без HTML.

fetch_markdown

Назначение: Преобразует HTML-контент веб-страницы в Markdown-разметку.
Входные параметры: url (строка, обязательный), headers (объект, опционально).
Результат: Текст в формате Markdown.

Установка и запуск

Клонируйте репозиторий:

git clone <repository-url>
cd fetch-mcp-server

Установите зависимости:
```
npm install
```
Соберите проект:
```
npm run build
```

Запуск напрямую

npm start

Сервер будет работать через stdio и ожидать запросы формата MCP.

Интеграция с десктопным приложением

Для подключения сервера к приложению (например, через MCP-совместимый клиент) добавьте следующую конфигурацию в настройки сервера:

{
  "mcpServers": {
    "fetch": {
      "command": "node",
      "args": ["/абсолютный/путь/к/файлу/dist/index.js"]
    }
  }
}

Замените /абсолютный/путь/к/файлу на реальный путь к собранному проекту.

Основные возможности

Современная fetch API для выполнения HTTP-запросов.
Поддержка произвольных заголовков — можно передавать куки, токены авторизации и т.д.
Четыре формата на выходе: HTML, JSON, чистый текст и Markdown.
Используемые библиотеки: JSDOM (парсинг HTML), TurndownService (конвертация в Markdown).

Разработка

Запуск TypeScript-компилятора в режиме слежения:
```
npm run dev
```
Запуск тестов:
```
npm test
```

Лицензия

Проект распространяется под лицензией MIT.

Источник: https://mcpmarket.com/server/fetch

Fetch

Ключевые особенности

Варианты использования

Fetch MCP Server

Components

Tools

Resources

Getting started

Usage

Usage with Desktop App

Features

Development

License

Fetch MCP Server

Обзор

Компоненты

fetch_html

fetch_json

fetch_txt

fetch_markdown

Установка и запуск

Запуск напрямую

Интеграция с десктопным приложением

Основные возможности

Разработка

Лицензия

Какие форматы поддерживает Fetch?

Могу ли я настраивать HTTP-запросы в Fetch?

Как Fetch обрабатывает парсинг HTML?

Как Fetch конвертирует HTML в Markdown?

Как использовать Fetch в моем десктопном приложении?

Fetch Html

Parameters

Fetch Markdown

Parameters

Fetch Txt

Parameters

Fetch Json

Parameters

Комментарии