ScraperFlyAPI веб-данных для AI

main

Конструктор API для запросов ScraperFly

Создайте канонический запрос, выберите формат вывода и параметры маршрутизации, затем перенесите точную форму в ваше приложение, Postman или cURL.

API Builder
Build, send, and inspect a canonical ScraperFly API request.
step 1
1
Enter a full http:// or https:// URL.
Enter a target URL to unlock output, proxy, render, file, and Postman options.
Generated request
Canonical endpoint only. Legacy aliases are intentionally hidden.
Your generated URL, query params, and cURL command will appear here after step 1.

Документация API

Создайте готовые к производству запросы ScraperFly, прежде чем писать код интеграции

Преобразуйте любой целевой URL в точный ответ, который нужен вашему продукту: сырой HTML, чистый текст, Markdown, JSON метаданные, скриншоты или PDF. Начните с самого быстрого запроса, затем добавьте рендеринг, премиум маршрутизацию, таргетинг по странам и пересылку заголовков только тогда, когда страница докажет, что ей нужно более сильное выполнение.

HTML
Сырой ответ

Сырой HTML для парсеров и краулеров

Используйте самый быстрый путь для статических страниц, списков, документов и страниц продуктов. Сначала получите оригинальный исходный HTML, затем включите рендеринг браузера, когда JavaScript создаст разметку, необходимую вашему скрейперу.

format=htmlrender=falserender=true
TXT
Чистые данные

Текст, Markdown и JSON

Пропустите слой очистки после доступа к странице. Верните читаемый текст для агентов, Markdown для подсказок и RAG, или структурированный JSON с метаданными, ссылками, заголовками, чистым текстом и Markdown, готовым для вашего конвейера.

format=textformat=markdownformat=json
PDF
Визуальные файлы

Скриншоты и PDF

Запечатлейте то, что видит настоящий браузер, когда вам нужны доказательства QA, архивные доказательства, проверки визуальной регрессии, загружаемые отчеты или общие записи страниц для клиентов и внутренних команд.

format=screenshotformat=pdfскачать

Управления, которые делают запросы предсказуемыми

url

Целевая страница для получения, рендеринга, очистки или захвата.

format

Выберите ответ, который нужен вашему продукту: html, text, markdown, json, скриншот или pdf.

premium

Эскалируйте на более сильные маршруты для блокировок, нестабильных целей или контента, чувствительного к геолокации.

render

Запустите Chromium для SPA, JS-вставленного разметки, скриншотов, PDF и страниц только для браузера.

country

Запросите маршрут, специфичный для страны, когда контент меняется в зависимости от местоположения.

keep_headers

Перенаправьте выбранный контекст запроса, такой как user-agent, cookie, язык и referer.

render_wait

Дайте динамическому контенту контролируемую дополнительную задержку перед извлечением или захватом.

download

Возвращайте визуальные артефакты в виде загружаемых файлов, когда вывод - это скриншот или PDF.

пример cURL

Генерируйте Markdown с той же формой запроса, которую вы можете использовать в производстве

curl "https://scraperfly.com/api/v1?url=https%3A%2F%2Fexample.com&format=markdown" \
  -H "apikey: YOUR_API_KEY"