ИИ для Тильды: проверяйте страницы и выгружайте их HTML

Агент ходит в API Тильды по паре ключей и начинает со списка проектов и их настроек, а дальше спускается на страницы: алиасы, заголовки, статус публикации. Содержимое он тоже забирает — HTML страницы либо только телом, либо полным документом вместе с путями к картинкам, стилям и скриптам, то есть в том виде, в каком страницу можно положить на свой сервер.

Устройство Тильды диктует темп: список страниц приходит одним запросом, а вот содержимое каждой страницы — отдельным. Ревизия сайта на полсотни страниц это полсотни обращений, и агент планирует их под часовой лимит, а не упирается в него на середине. Ещё одна тонкость — статус публикации: страница, отредактированная в конструкторе, но не опубликованная, в экспорте отдаст прежнюю версию, и агент показывает такие расхождения.

Писать в Тильду нельзя, и агент этого не скрывает: API отвечает только на GET, создать или изменить страницу через него невозможно. Всё, что он делает, — читает и выгружает: сверяет список страниц по расписанию и сообщает о новой странице или смене заголовка, собирает тексты сайта и показывает, где они дублируются или разошлись с прайсом. Правки остаются за вами в конструкторе.

Оба ключа уходят в каждый запрос параметрами: отдельной сессии Тильда не заводит, поэтому доступ отзывается перевыпуском ключей на стороне проекта, а не выходом из аккаунта. Лимит — 150 запросов в час на аккаунт, дёргать API на каждый визит посетителя Тильда запрещает, поэтому массовый экспорт агент делает последовательно и кэширует выгруженное. Если страниц или доступа нет, он скажет об этом прямо.