Screaming Frog для строительного сайта: как найти страницы с неработающими внутренними ссылками
Посетитель читает описание дома, нажимает «Сравнить комплектации» и попадает на страницу ошибки. Исполнитель присылает список неработающих адресов, но редактор не знает, в каких материалах менять ссылки. Исправление затягивается: само назначение найдено, а исходные страницы потерялись.
Screaming Frog SEO Spider позволяет собрать техническое задание с обеими сторонами перехода. Результат проверки — конкретные страницы-источники, адреса назначения, наблюдаемые ответы и подтверждение исправленного маршрута. Это полезно маркетологу строительной компании, который принимает работу технического специалиста. Ниже разбирается один такой обход, а не полный аудит всех факторов SEO.
Содержание
Задайте границы проверки до запуска
Выберите рабочий сайт и важные разделы: услуги, каталог проектов, комплектации, портфолио. Назовите адрес начала и исключения. Если компания использует несколько поддоменов, отдельно укажите, какие входят в задание. Обход одного раздела нельзя сдавать как проверку всего цифрового хозяйства.
Согласуйте время и допустимую скорость с человеком, отвечающим за сайт. Краулер создаёт запросы к серверу. В документации настройки Screaming Frog предусмотрены ограничения глубины, общего числа URL и скорости через Max URI/s. Увеличивать параллельность ради быстрого отчёта без проверки нагрузки не требуется.
Попросите исполнителя записать дату, начальный URL, режим, ограничения и состояние завершения. Добавьте список контрольных страниц, которые обязательно должны попасть в проверку. Например, карточку недавно переименованного проекта и статью со ссылкой на прежнюю комплектацию. Эти примеры помогают установить фактическое покрытие.
Проверьте, хватит ли возможностей версии
По официальному руководству начала работы бесплатная версия ограничена 500 URL за обход. Снятие ограничения, дополнительные настройки и сохранение с последующим открытием обходов требуют лицензии. Условия проверены 2 ноября 2026 года; не обещайте одинаковый набор функций каждой установленной версии.
500 URL не означают 500 коммерческих страниц: среди обнаруженных адресов могут быть ресурсы и технические варианты. Если лимит остановил сбор, назовите проверенный объём и непроверенный остаток. Надпись «ошибок нет» внутри ограниченной части не доказывает исправность остальных разделов.
Если компании передают только экспорт, попросите сохранить рядом параметры обхода. В лицензированной версии полезно приложить и сам доступный для открытия обход. Отсутствие лицензии не повод выдавать ограниченную проверку за полную; при небольшом сайте бесплатного режима может быть достаточно для конкретной задачи.
Выберите Spider или List по вопросу
В режиме Spider исполнитель вводит начальный адрес и запускает обход обнаруживаемых ссылок. Это подходящий маршрут, когда нужно найти, какие страницы сайта ведут на ошибочное назначение. Проверьте, что внутренние ссылки действительно сохраняются и обходятся в конфигурации.
Режим List принимает заранее известный набор URL. Он удобен, например, для проверки списка старых адресов после обновления. Однако в нём глубина по умолчанию равна нулю: проверяются загруженные адреса. Это не равнозначно поиску всех страниц, которые на них ссылаются. Изменение глубины меняет состав проверки и должно быть явно записано. Официальная инструкция по неработающим ссылкам.
Если навигация появляется только после выполнения JavaScript, обычный HTML-обход может не представить нужный маршрут. Руководство описывает режим JavaScript Rendering. Его применимость и доступность исполнитель проверяет отдельно. Не меняйте одновременно режим и область обхода, а затем не сравнивайте количества без объяснения различий.
Найдите ответы и восстановите источник
После сбора откройте Response Codes и фильтр Client Error (4XX). Не называйте каждую строку именно ошибкой 404: проверьте конкретный код. Отделите внутренние назначения от внешних ресурсов. Задание на собственный сайт не должно незаметно превращаться в исправление чужих страниц.
Выберите ошибочный URL в верхней части окна и откройте нижнюю вкладку Inlinks. В ней From обозначает страницу-источник, To — назначение; также доступны сведения о тексте ссылки. Именно эта связка позволяет редактору найти место исправления. Если одно назначение встречается в меню и нескольких статьях, одного изменения в статье недостаточно.
| Что сохранить | Для чего нужно |
|---|---|
| From | Открыть страницу, где стоит переход |
| To | Проверить буквальный адрес назначения |
| Текст ссылки | Найти нужное место и понять обещание |
| Код ответа и дата | Воспроизвести обнаруженное состояние |
| Тип связи | Отличить обычный переход от перенаправления |
| Решение и владелец | Понять, кто и что исправляет |
На узком экране таблицу можно прокрутить вбок.
Для массовой передачи используйте Bulk Export → Response Codes → Client Error (4XX) Inlinks. Обычный экспорт списка ошибочных URL не заменяет выгрузку их источников. Прежде чем отдавать таблицу редактору, откройте несколько пар и убедитесь, что он сможет найти переход без помощи автора отчёта.
Разберите цепочку перенаправлений
Иногда ближайший источник ошибки — другой URL, который перенаправляет дальше. В выгрузке связей он может иметь тип HTTP Redirect. Такой адрес ещё не отвечает на вопрос, из какой опубликованной статьи человек начинает путь.
Официальная инструкция предлагает Reports → Redirects → All Redirects и фильтрацию конечного кода по 404. В этом отчёте Source помогает найти исходную страницу, Address — последний источник, Final Address — ошибочное назначение. Передайте всю значимую цепочку, чтобы исполнитель не исправил только промежуточное звено.
Условный пример: статья ведёт на старую страницу комплектации, та перенаправляет на удалённый документ. Решение зависит от содержания. Возможно, нужна прямая ссылка на действующие условия; возможно, обещанного документа больше нет и следует переписать сам абзац. Автоматическая замена всех ошибок на главную страницу не восстанавливает смысл перехода.
Подтвердите причину перед изменением
Откройте исходную страницу и само назначение. Проверьте, не связано ли наблюдение с временным отказом, ограничением доступа или настройкой обхода. Если браузер и краулер получают разные ответы, сохраните расхождение и передайте его техническому специалисту. Не делайте вывод о постоянной поломке всего сайта по одному ответу.
Отдельно посмотрите, соответствует ли исправный адрес обещанию ссылки. Успешный технический ответ не доказывает, что там нужная комплектация или актуальные условия. Такой смысловой контроль выполняет владелец содержания.
Для каждого исправления выберите действие: заменить адрес, восстановить необходимую страницу, убрать переход или обновить текст. Сохраните основание. Таблица должна объяснять результат для читателя, а не только требовать убрать красный статус инструмента.
Примите исправление новым наблюдением
После публикации пройдите прежний маршрут с исходной страницы. Затем выполните новый сопоставимый обход и сохраните его дату и параметры отдельно от первоначального. Проверяйте как отсутствие ошибочной связи, так и наличие нужного продолжения. Удаление всех ссылок тоже уменьшит число ошибок, но лишит человека полезного ответа.
Для шаблонной ссылки проверьте несколько страниц, включая новую. Если изменён только один демонстрационный материал, общий источник ошибки может сохраниться. В итоговой таблице укажите, какие пары исправлены, какие оставлены по решению владельца и какая часть сайта ещё не проверена.
Техническая приёмка не обещает рост позиций, индексацию или заявки. Она подтверждает конкретный исправленный путь. Если обнаруженные разрывы мешают посетителю перейти от проекта дома к обсуждению строительства, их можно включить в разбор сайта и привлечения клиентов с Digitax, передав проверенные пары адресов и вопросы покупателей.
Политика в отношении обработки персональных данных
1. Общие положения
Настоящая политика обработки персональных данных составлена в соответствии с требованиями Федерального закона от 27.07.2006. №152-ФЗ «О персональных данных» и определяет порядок обработки персональных данных и меры по обеспечению безопасности персональных данных, предпринимаемые ИП Мальцевым Алексеем Александровичем (далее – Оператор).
1.1. Оператор ставит своей важнейшей целью и условием осуществления своей деятельности соблюдение прав и свобод человека и гражданина при обработке его персональных данных, в том числе защиты прав на неприкосновенность частной жизни, личную и семейную тайну.
1.2. Настоящая политика Оператора в отношении обработки персональных данных (далее – Политика) применяется ко всей информации, которую Оператор может получить о посетителях веб-сайта https://agency-digitax.ru
2. Основные понятия, используемые в Политике
2.1. Автоматизированная обработка персональных данных – обработка персональных данных с помощью средств вычислительной техники;
2.2. Блокирование персональных данных – временное прекращение обработки персональных данных (за исключением случаев, если обработка необходима для уточнения персональных данных);
2.3. Веб-сайт – совокупность графических и информационных материалов, а также программ для ЭВМ и баз данных, обеспечивающих их доступность в сети интернет по сетевому адресу https://agency-digitax.ru;
2.4. Информационная система персональных данных — совокупность содержащихся в базах данных персональных данных, и обеспечивающих их обработку информационных технологий и технических средств;
2.5. Обезличивание персональных данных — действия, в результате которых невозможно определить без использования дополнительной информации принадлежность персональных данных конкретному Пользователю или иному субъекту персональных данных;
2.6. Обработка персональных данных – любое действие (операция) или совокупность действий (операций), совершаемых с использованием средств автоматизации или без использования таких средств с персональными данными, включая сбор, запись, систематизацию, накопление, хранение, уточнение (обновление, изменение), извлечение, использование, передачу (распространение, предоставление, доступ), обезличивание, блокирование, удаление, уничтожение персональных данных;
2.7. Оператор – государственный орган, муниципальный орган, юридическое или физическое лицо, самостоятельно или совместно с другими лицами организующие и (или) осуществляющие обработку персональных данных, а также определяющие цели обработки персональных данных, состав персональных данных, подлежащих обработке, действия (операции), совершаемые с персональными данными;
2.8. Персональные данные – любая информация, относящаяся прямо или косвенно к определенному или определяемому Пользователю веб-сайта https://agency-digitax.ru;
2.9. Пользователь – любой посетитель веб-сайта https://agency-digitax.ru;
2.10. Предоставление персональных данных – действия, направленные на раскрытие персональных данных определенному лицу или определенному кругу лиц;
2.11. Распространение персональных данных – любые действия, направленные на раскрытие персональных данных неопределенному кругу лиц (передача персональных данных) или на ознакомление с персональными данными неограниченного круга лиц, в том числе обнародование персональных данных в средствах массовой информации, размещение в информационно-телекоммуникационных сетях или предоставление доступа к персональным данным каким-либо иным способом;
2.12. Трансграничная передача персональных данных – передача персональных данных на территорию иностранного государства органу власти иностранного государства, иностранному физическому или иностранному юридическому лицу;
2.13. Уничтожение персональных данных – любые действия, в результате которых персональные данные уничтожаются безвозвратно с невозможностью дальнейшего восстановления содержания персональных данных в информационной системе персональных данных и (или) уничтожаются материальные носители персональных данных.
3. Оператор может обрабатывать следующие персональные данные Пользователя
3.1. Фамилия, имя, отчество;
3.2. Электронный адрес;
3.3. Номера телефонов;
3.4. Также на сайте происходит сбор и обработка обезличенных данных о посетителях (в т.ч. файлов «cookie») с помощью сервисов интернет-статистики (Яндекс Метрика и Гугл Аналитика и других).
3.5. Вышеперечисленные данные далее по тексту Политики объединены общим понятием Персональные данные.
4. Цели обработки персональных данных
4.1. Цель обработки персональных данных Пользователя — информирование Пользователя посредством отправки электронных писем; предоставление доступа Пользователю к сервисам, информации и/или материалам, содержащимся на веб-сайте.
4.2. Также Оператор имеет право направлять Пользователю уведомления о новых продуктах и услугах, специальных предложениях и различных событиях. Пользователь всегда может отказаться от получения информационных сообщений, направив Оператору письмо на адрес электронной почты info@digitax-agency.ru с пометкой «Отказ от уведомлений о новых продуктах и услугах и специальных предложениях».
4.3. Обезличенные данные Пользователей, собираемые с помощью сервисов интернет-статистики, служат для сбора информации о действиях Пользователей на сайте, улучшения качества сайта и его содержания.
5. Правовые основания обработки персональных данных
5.1. Оператор обрабатывает персональные данные Пользователя только в случае их заполнения и/или отправки Пользователем самостоятельно через специальные формы, расположенные на сайте https://agency-digitax.ru. Заполняя соответствующие формы и/или отправляя свои персональные данные Оператору, Пользователь выражает свое согласие с данной Политикой.
5.2. Оператор обрабатывает обезличенные данные о Пользователе в случае, если это разрешено в настройках браузера Пользователя (включено сохранение файлов «cookie» и использование технологии JavaScript).
6. Порядок сбора, хранения, передачи и других видов обработки персональных данных
Безопасность персональных данных, которые обрабатываются Оператором, обеспечивается путем реализации правовых, организационных и технических мер, необходимых для выполнения в полном объеме требований действующего законодательства в области защиты персональных данных.
6.1. Оператор обеспечивает сохранность персональных данных и принимает все возможные меры, исключающие доступ к персональным данным неуполномоченных лиц.
6.2. Персональные данные Пользователя никогда, ни при каких условиях не будут переданы третьим лицам, за исключением случаев, связанных с исполнением действующего законодательства.
6.3. В случае выявления неточностей в персональных данных, Пользователь может актуализировать их самостоятельно, путем направления Оператору уведомление на адрес электронной почты Оператора info@digitax-agency.ru с пометкой «Актуализация персональных данных».
6.4. Срок обработки персональных данных является неограниченным. Пользователь может в любой момент отозвать свое согласие на обработку персональных данных, направив Оператору уведомление посредством электронной почты на электронный адрес Оператора info@digitax-agency.ru с пометкой «Отзыв согласия на обработку персональных данных».
7. Трансграничная передача персональных данных
7.1. Оператор до начала осуществления трансграничной передачи персональных данных обязан убедиться в том, что иностранным государством, на территорию которого предполагается осуществлять передачу персональных данных, обеспечивается надежная защита прав субъектов персональных данных.
7.2. Трансграничная передача персональных данных на территории иностранных государств, не отвечающих вышеуказанным требованиям, может осуществляться только в случае наличия согласия в письменной форме субъекта персональных данных на трансграничную передачу его персональных данных и/или исполнения договора, стороной которого является субъект персональных данных.
8. Заключительные положения
8.1. Пользователь может получить любые разъяснения по интересующим вопросам, касающимся обработки его персональных данных, обратившись к Оператору с помощью электронной почты info@digitax-agency.ru.
8.2. В данном документе будут отражены любые изменения политики обработки персональных данных Оператором. Политика действует бессрочно до замены ее новой версией.
8.3. Актуальная версия Политики в свободном доступе расположена в сети Интернет по адресу https://agency-digitax.ru
Пользователь — любое лицо, оставляющее свои данные на Сайте: agency-digitax.ru
Оператор — Индивидуальный предприниматель Мальцев Алексей Александрович, адрес: РФ, 355045, СТАВРОПОЛЬСКИЙ КРАЙ, Г СТАВРОПОЛЬ, УЛ ПИРОГОВА, д. 64, корп. 4, кв. 101
1. Пользователь, присоединяясь к настоящему Соглашению и оставляя свои данные на Сайте Оператора по адресу в сети Интернет: agency-digitax.ru (далее — Сайт), путем заполнения персональных данных в специальных полях на Сайте:
1.1. Подтверждает, что все указанные им данные принадлежат лично ему;
1.2. Подтверждает и признает, что им внимательно в полном объеме прочитано настоящее Согласие, Политика конфиденциальности, расположенная по адресу agency-digitax.ru, текст и условия ему понятны.
1.3. Выражает согласие с условиями Политики конфиденциальности, расположенной по адресу agency-digitax.ru
1.4. Дает согласие Оператору на обработку персональных данных и возможность передачи им таких персональных данных третьим лицам, с использованием машинных носителей информации, по каналам связи с соблюдением мер, обеспечивающих их защиту от несанкционированного доступа.
1.5. Согласие дается на обработку следующих персональных данных:
- Имя, номер телефона, адрес электронной почты
1.6. Согласие Пользователя на обработку и передачу третьим лицам персональных данных является конкретным, информированным и сознательным.
2. Оператор осуществляет автоматизированную обработку персональных данных с получением и/или передачей полученной информации по информационно-телекоммуникационным сетям или без таковой.
3. В ходе обработки с персональными данными Пользователя могут быть совершены следующие действия: сбор, запись, систематизацию, накопление, хранение, уточнение (обновление, изменение), использование, передачу (распространение, предоставление, доступ), обезличивание, удаление и уничтожение персональных данных.
4. Оператор не осуществляет обработку специальных категорий персональных данных, касающихся расовой, национальной принадлежности, политических взглядов, религиозных или философских убеждений, состояния здоровья, интимной жизни, за исключением случаев, предусмотренных законодательством РФ.
5. Срок согласия на обработку и передачу третьим лицам персональных данных ограничен сроком необходимым для достижения цели сбора и обработки персональных данных.
6. Согласие может быть отозвано Пользователем путем направления письменного заявления на электронную почту: info@digitax-agency.ru
7. Оператор имеет право вносить изменения в настоящее Согласие. При внесении изменений в актуальной редакции указывается дата последнего обновления. Новая редакция Согласия вступает в силу с момента ее размещения, если иное не предусмотрено новой редакцией Согласия.
