Переобход страниц
Квота
bash scripts/recrawl.sh --host example.com --action quotaПоказывает дневную квоту и остаток. Данные всегда live (без кеша).
Отправка URL на переобход
bash scripts/recrawl.sh --host example.com --action submit --url "https://example.com/updated-page"Ответ включает task_id и quota_remainder.
Возможные ошибки:
INVALID_URL— невалидный URLURL_ALREADY_ADDED— URL уже в очередиQUOTA_EXCEEDED— дневная квота исчерпана
Статус задачи
bash scripts/recrawl.sh --host example.com --action status --task-id <id>Состояния:
IN_PROGRESS— в процессеDONE— завершеноFAILED— ошибка
Список задач
bash scripts/recrawl.sh --host example.com --action list --limit 20
bash scripts/recrawl.sh --host example.com --action list --date-from 2025-03-01Приоритетный переобход сайтмапа
Отдельная функция — см. SITEMAPS.md (--action recrawl и --action recrawl-limit).
API endpoints
| Метод | Endpoint |
|---|---|
| POST | /v4/user/{uid}/hosts/{hid}/recrawl/queue |
| GET | /v4/user/{uid}/hosts/{hid}/recrawl/queue/{tid} |
| GET | /v4/user/{uid}/hosts/{hid}/recrawl/queue |
| GET | /v4/user/{uid}/hosts/{hid}/recrawl/quota |