У меня есть страница, содержащая теги <div> с кодом onclick="", который вызывает запрос ajax для получения данных json, а затем перебирает результаты для формирования ссылок ( <a /> ) для добавления на страницу. Эти ссылки не существуют...

Google обнаружил значительное увеличение количества URL-адресов, возвращающих ошибку 404 (страница не найдена). Изучение этих ошибок и их исправление в соответствующих случаях гарантирует, что Google сможет успешно сканировать страницы вашего...

Я обнаружил, что GoogleBot сканирует URL-адреса веб-сервисов, на которые есть ссылки в коде JavaScript/AJAX. URL-адрес уже находится в robots.txt в качестве исключения, но Google больше не подчиняется robots.txt при определении того, что нужно...

После каждой статьи на моем сайте есть превью других статей. Это случайные превью. Проблема в том, что превью очень большие: есть заголовок, подзаголовок и 6 строк текста. Иногда Google думает, что они являются частью моей статьи. Есть ли...