Скрипт для проверки кодов ответа списком
Иногда нужно быстро узнать коды ответа для списка адресов из таблицы. Скрипт на несколько строк справляется с этим лучше любых ручных проверок.
Читать статью →Иногда нужно быстро узнать коды ответа для списка адресов из таблицы. Скрипт на несколько строк справляется с этим лучше любых ручных проверок.
Читать статью →После переезда нужно доказать, что каждая старая страница нашла новый адрес. Это делается сравнением двух обходов по карте соответствий.
Читать статью →На небольшом сайте краулер работает «из коробки». На большом нужны настройки: иначе обход затянется, память закончится, а сервер устанет.
Читать статью →Краулер — главный инструмент технического аудита. Инструментов много, и выбирать нужно по задаче, а не по популярности.
Читать статью →Десять строк регулярных выражений заменяют часы ручной работы: отфильтровать адреса, найти ошибки, написать правило перенаправления.
Читать статью →Автоматизировать можно многое, но начинать нужно с самого дешёвого и полезного. Этот список помогает выбрать порядок.
Читать статью →Большинство технических проблем возникают в момент публикации: забыли canonical, закрыли от индексации, изменили адрес без перенаправления. Регламент снижает число таких ошибок.
Читать статью →Структура сайта живёт в головах нескольких людей, и когда они уходят, знание теряется. Короткий документ решает эту проблему.
Читать статью →Единый список всех адресов сайта с их свойствами превращает разрозненные знания в опору для аудитов, переездов и ежедневной работы.
Читать статью →Шаблон экономит время, пока не превращает сотни страниц в копии друг друга. Граница определяется долей уникального содержания.
Читать статью →Автоматика позволяет создавать тысячи страниц за час, но не каждая из них нужна поиску. Ценность создаёт не количество, а данные и правила отбора.
Читать статью →Кластеризация группирует запросы по смыслу и превращает список фраз в набор страниц. Подходов несколько, и они дают разный результат.
Читать статью →Структура каталога должна следовать за тем, как люди ищут товары. Для этого нужен набор реальных запросов, а не догадок.
Читать статью →Скорость одной страницы мало о чём говорит. Чтобы увидеть картину по сайту, замеры нужно повторять по выборке и накапливать историю.
Читать статью →Единичные 404 нормальны, а резкий рост — почти всегда следствие поломки. Оповещение срабатывает при росте, а не при каждой ошибке.
Читать статью →Одна выгрузка показывает состояние сайта, две — что изменилось. Именно изменения чаще всего указывают на проблему.
Читать статью →Заголовки и описания создаются шаблонами и вручную, и ошибки в них накапливаются: пустые значения, дубли, «остатки» шаблонов. Их проще ловить автоматически.
Читать статью →Валидаторы проверяют одну страницу за раз. Но разметка ломается сразу на тысячах страниц, поэтому нужна проверка пакетом.
Читать статью →Краулер не найдёт страницу, на которую никто не ссылается. Найти её можно только сравнив список всех страниц с тем, что удалось обойти по ссылкам.
Читать статью →Карта сайта, собранная вручную, устаревает в тот же день. Автоматическая генерация по расписанию держит её актуальной без участия человека.
Читать статью →Ручная выгрузка из панелей утомляет и ограничена интерфейсом. Программный доступ позволяет собирать данные регулярно и в любом объёме.
Читать статью →Логи — самый точный источник о поведении робота. Инструментов много, и подходят они для разных задач: от быстрой проверки до постоянного мониторинга.
Читать статью →Таблица — самый доступный инструмент аналитика. Несколько формул заменяют десятки ручных операций с выгрузками.
Читать статью →Дубли появляются постоянно: новый модуль, изменение фильтров, ошибка шаблона. Мониторинг замечает их, пока они не размножились.
Читать статью →Перенаправления ломаются незаметно: обновили конфигурацию, сменили CMS, и десятки старых адресов уже отвечают ошибкой. Регулярная проверка находит это за день.
Читать статью →Три способа обработать столбец адресов в таблице и честное сравнение с готовым генератором.
Читать статью →224 статьи
85 статей
50 статей
38 статей
31 статья
31 статья
27 статей
27 статей
26 статей
25 статей
25 статей
25 статей
25 статей
25 статей
25 статей
25 статей
25 статей
25 статей
25 статей
8 статей
7 статей
5 статей
5 статей
4 статьи