ScrapeGraphAI: AI-парсинг сайтов на Python с помощью LLM¶

ScrapeGraphAI

Открытая Python-библиотека для парсинга сайтов через языковые модели без написания хрупких селекторов.

Скриншот ScrapeGraphAI

Что это¶

ScrapeGraphAI позволяет описать нужные данные на естественном языке, а библиотека сама строит цепочку извлечения через LLM (OpenAI, Ollama, Groq и другие). Вместо ручной настройки XPath или CSS-селекторов вы передаёте URL и текстовый запрос, а на выходе получаете структурированный JSON. Работает локально или через API любой поддерживаемой модели.

Что даёт¶

Парсер перестаёт ломаться при каждом редизайне сайта, потому что логика извлечения данных строится динамически. Разработчик экономит часы на поддержке скриптов и получает чистые структурированные данные за несколько строк кода. Подходит для разовых задач и для встраивания в продакшн-пайплайны сбора данных.

Кому подходит¶

Полезно Python-разработчикам, аналитикам данных и исследователям, которым нужно регулярно собирать информацию с сайтов без написания и поддержки классических парсеров.

Доступ из России¶

Библиотека открытая и устанавливается через pip без ограничений. Если использовать локальные модели через Ollama, внешние запросы не нужны вовсе. При подключении OpenAI или других облачных LLM может потребоваться VPN для получения API-ключа; оплата этих сервисов из РФ стандартно затруднена.

Цена¶

Open-source (MIT), бесплатно; облачная версия на сайте имеет платные тарифы