Страницы вылетели из яндекса

Страницы вылетели из яндекса

Добрый вечер, уважаемые оптимизаторы. Я думаю, что все читают раздел серча, посвященный индексации сайтов в яндексе. Вы, вероятно, могли заметить, что в топике создано огромное количество тем, в которых сращивается, почему страницы вылетают из индекса. На сегодняшний день, только на первой странице этого раздела форума, есть 4 темы, посвященные этому вопросу. К сожалению, проблема вылета страниц из индекса коснулась и меня. Почему это произошло, вы можете узнать, прочитав эту статью.

Начнем, пожалуй, с обрисовки моих проблемных сайтов. Судя по всему, проблема вылета страниц, как я понимаю, появилась на сайтах, которые созданы в последние два месяца (начиная с конца ноября 2011 года). Все мои проблемные сайты представляют собой обычные статейные сайты. На них закрыты дубли (если они изначально есть), контент — копирайт или рерайт, объем статей — около 1500 символов. Переспама никакого нет: в статье максимум употреблено два раза ключевое словосочетание, причём, если в тексте уместнее склонить слово, то оно склоняется.

Что происходит с этими сайтами после публикации? Один сайт, например, который я сразу выложил с 60-ю статьями, попал мгновенно в бан — даже страницы не были загружены в ЯВМ. На другие сайты я не добавлял большое количество статей одновременно (хотя, раньше с этим проблем не было). Для сайтов, которые наполнялись контентом равномерно, я заметил такую тенденцию:

  • При добавление статьи, быстроробот её кушает, и статья появляется в индексе
  • По такой схеме, некоторые мои сайты успешно индексировались до

60 страниц, а другие — до

30.

  • Следующий этап: с каждым новым апдейтом яндекса количество страниц в индексе менялось на +-3 страницы.
  • Что интересно, в индекс залетали одни статьи, а вылетали — другие. Кроме того, входили в индекс необязательно новые статьи, часть старых статей также появлялась в индексе.
  • Заключительный этап: либо резкое увеличение страниц в индексе, либо агс, либо бан.
  • Немного статистики. С ноября 2011 года я создал 4 сайта: один (на который сразу выгрузил 60 статей) попал мгновенно в бан, второй — начал нормально индексироваться, третий — ушёл сегодня в бан, четвертый — находится на этапе, при котором в индексе яндекса 30 страниц. Не очень приятная статистика, если учесть, что раньше такие сайты через 2 месяца давали какой-то доход, а не поподали в бан яндекса.

    Проанализировав эту ситуацию и почитав серч, я пришёл к выводу, что нужно делать действия, которые я опишу ниже, чтобы минимизировать шансы вылета страниц из индекс. Итак, делаем:

    • Постим на сайт по несколько статей каждый день (например, одну статью постим в первой половине дня, а вторую — во второй. Если у вас нет времени публиковать контент два раза в день, то можно воспользоваться отложенной публикацией в wordpress.
    • Делаем кросспостинг в твиттер из wordpress, чтобы обеспечить попадание статьи в индекс с помощью быстроробота. Можно делать кросспостинг и в другие места, ваша цель — быстроиндекс.
    • Как только статья попадает в быстроиндекс, следует ввести запрос, по которому она находится в топе, в яндекс; далее — зайти на сайты, которые находятся на 1-5 местах (любые 2 сайта), а затем — перейти по ссылки на свой сайт. После перехода нужно немного походить по сайту. Важно! Следует выполнять этот пункт с помощью аномайзера и браузера, который вы не используете для основного серфинга. Это некая накрутка ПФ, которая, судя по отзывам людей, помогает статье остаться в индексе.
    • Было бы хорошо, если бы вы поставили пару дешевых ссылок на новую статью. Однако, это не так важно, как предыдущий пункт.
    Читайте также:  Как узнать на кого зарегистрирован номер билайн

    По мнению большинства людей, страницы вылетают из индекса яндекса из-за того, что публикуемый контент — некачественный. В данном случае речь не идёт о том, что это копипаст или нет. Контент может быть некачественным даже, если по адвего его уникальность близка к 100%.

    Судя по всему, яндекс около двух месяцев назад ввел такой алгоритм: ваша статья попадает в индекс яндекса, если по ней есть успешные клики (пользователь получает ответ на вашем сайте и не возвращается в поиск) и/или на неё появляются внешние ссылки, то странице суждено остаться в индексе. Есть один непонятный момент: нужно ли странице попадать в индекс с помощью быстроробота, чтобы этот алго заработал, или достаточно попадания страницы в рядовой апдейт.

    В любом случае, ваши статьи должны давать что-то новое, а не говорить о том, о чём уже писали 20 раз другие люди. Как я понимаю, для новых сайтов сейчас рерайт, в котором будут изменены только порядок слов и слова на их синонимы — не сработает.

    Я надеюсь, что все ваши сайты успешно проиндексируются, как один из моих новых проектов. Если у вас ещё остались вопросы о том, почему яндекс выкидывает страницы ваших сайтов из своего индекса, пишите их в комментариях, я вам обязательно отвечу.

    Случаи, когда страницы сайта по какой-то не понятной причине вдруг выпадает из результатов поиска Яндекса, не редки. Возможных объяснений для этого явления вполне достаточно и их список не такой уж и большой. Постараемся перечислить наиболее вероятные.

    1. Прежде всего банальные технические неполадки. К ним можно отнести проблемы самого движка или неправильный ответ сервера. Поэтому рекомендуем использовать профессионально разработанную CMS, которая входит в услугу создания сайта, предоставляемую нами. Известны случаи, когда провайдеры намеренно закрывали доступ поисковых роботов к серверам. Раздел ошибок сайта webmaster.yandex.ru поможет вам разобраться с причинами технической ошибки. Чтобы это сделать, просто добавьте свой сайт в «Яндекс.Вебмастер» и внимательно изучите раздел ошибок.
    2. Страницы с разными адресами, но одинаковым содержанием. В этом случае из поиска могут вывалиться целые разделы вашего сайта. Одинаковые страницы генерируют различные URL. Чаще всего это происходит автоматически CMS сайта. Это комментарии, результаты поиска и идентификаторы сессий. О подобных результатах работы СМS вебмастер может и не догадываться до тех пор, пока не столкнётся с такой проблемой. Решить проблему можно введением запрета индексации дублей в robots.txt.
    3. Страницы сайта без содержания.
      С точки зрения поисковика такие страницы бесполезны для посетителей и исключаются из индекса. Особенно велика вероятность такого развития событий, когда сквозные блоки имеют размер значительно больше, чем содержательная часть. Как пример: информационная часть страницы – картинка с подписью, а сквозная – шапка, каталог навигации со ссылками и т.д. Как показывает практика, это наиболее распространенная причина выпадения сайта из индекса. Решить это можно добавив на страницу побольше уникального контента, либо сократить раздел навигационных ссылок.
    4. Большое количество исходящих ссылок.
      Яндекс не любит страницы с большим количеством ссылкок на чужие сайты. Это правило не абсолютно и действует в основном в отношении молодых ресурсов. Кроме того, порой трудно объяснить причины, по которым некоторые директории сайта исключаются из базы. Однако замечено, что некоторые сайты прекрасно индексировались Яндексом кроме отдельных директорий, посвященных продажам.
    5. Наличие неуникального содержания.
      Тут всё понятно. В качестве примера можно привести случай, когда на сайте, посвященном рекрутингу, из индекса пропали страницы с разделами Кодекса законов о труде. В то же время наблюдался уверенный рост в индексе страниц с резюме и вакансиями.
      Есть два решения проблемы. Если надо сохранить индексацию таких страниц, то неуникальный контент необходимо заменить уникальным. Проще говоря – изложить законы своими словами. Либо можно оставить всё как есть, но разбавить содержание уникальными комментариями, добавив их на страницу отдельно.
    6. Необъяснимый сбой поисковика.
      Такое, к сожалению бывает. В этих случаях разумно переждать некоторое время. После восстановления работоспособности поисковика есть вероятность, что всё вернётся на прежние позиции.
    7. Качество сайта недостаточное в целом.
      Тут уже речь идёт о разных представлениях вебмастера и Яндекса о том, каким должен быть сайт. Наличие уникального содержания и отсутствие рекламных ссылок еще не является гарантией, что сайт придётся по душе поисковику. Так что в этом случае придётся опытным путём добиваться симпатий Яндекса.
      Ну и будьте внимательны. Не забывайте в robots.txt открывать сайт к индексации. Такое иногда случается при переносе на новый движок. Посматривайте на количество страниц в индексе на webmaster.yandex.ru. Если обнаружите рост разрыва между показателями «Страниц в поиске» и «Загружено роботом», то есть причины для беспокойства, что что-то идёт не так.
    Читайте также:  Тор браузер ссылки на детское

    Как видите, список внушительный и разобраться в причине вылета страниц из индекса рядовому пользователю достаточно сложно. Поэтому для создания и оптимизации сайта рекомендуем обратиться в ООО "Бастион Дизайн". Наши сотрудники помогут вам создать максимально оптимизированный сайт, который не будет испытывать такой проблемы, как вылет страниц из индекса.

    Сегодня я с ужасом обнаружил, что целая куча страниц на всех моих сайтах выпали из Яндекса. Из-за этого трафик везде просел в два-три раза, а как понимаете — это полная печаль 🙁 Почему страницы выпали из Яндекса?

    Причина, скорее всего, кроется в недавнем падении моего сервера, об этом я писал в своем живом журнале, тут писать, по понятным причинам, не мог. Сервер лежал почти сутки, называется, поковырялся в пятницу вечером!

    НИКОГДА НИЧЕГО НЕ ДЕЛАЙТЕ НА СЕРВЕРЕ В ПЯТНИЦУ ВЕЧЕРОМ!

    Почему? Потому что и у ребят, которые держат хостинг тоже есть выходные. Они оставляют дежурного специалиста, и я на собственном опыте убедился, что в это время суток сажают не самых лучших. Но это ладно, тема для отдельного разговора.

    Сначала я подумал, что трафик просел из-за Пасхи , люди гуляют, интернетом пользуются реже. На выходных у меня всегда проседает немного посещаемость, а на большие праздники еще сильнее.

    Но наступил понедельник, а трафик так и остался на пасхальном уровне, и вот тогда я начал беспокоиться. Полез стразу в Яндекс вебмастер, и вот что я вижу:

    40% статей на этом блоге вылетели из индекса! Понятно, почему просел трафик! Связано ли это с падением сервера? Захожу в Яндекс вебмастер и сморю на исключенные страницы:

    Как хорошо видно на фото, страницы вылетели из индекса 23 числа. Когда было падение сервера? Смотрим:

    Как видно на графике, падение сервера было тоже 23 числа. Но это пока догадки, написал в Яндекс, через несколько часов получил ответ:

    Все указанные страницы Вы можете найти среди исключенных из поиска в соответствующем разделе «Яндекс.Вебмастера». Дело в том, что 23 апреля, когда робот обращался к ним, Ваш сервер вернул код ответа 404. Сейчас со страницами все в порядке, роботу уже об этом известно, поэтому они смогут вернуться в поиск уже после следующего обновления поисковой базы.

    О двух других сайтах, пожалуйста, напишите отдельно с помощью формы на странице https://yandex.ru/support /webmaster-troubleshootin g/site-indexing.xml .

    Правило вести о каждом сайте отдельную переписку помогает нам избежать путаницы и быстрее отвечать Вам.

    Читайте также:  Как отключить net framework в windows 10

    Спасибо за понимание, ждем Вашего письма!

    Все ясно, пришел робот, а сайт в ауте, он не долго мучаясь выкинул пол сайта из индекса. МОЛОДЕЦ! ВОЗЬМИ С ПОЛКИ ПИРОЖОК!

    Я все понимаю, алгоритмы там всякие, но вот объясните мне, сотрудники Яндекса: почему ОДИН раз не найдя страницу ваша поисковая система сразу выкидывает ее из индекса? В то же время у меня до сих пор в индексе много страниц, которые я уже как пол года назад удалил, и они все в индексе?

    Но не об этом даже хотел я написать, это была прелюдия. В процессе решения этого вопроса у меня возник закономерный вопрос:

    Как найти страницы выпавшие из Яндекса?

    Рыская по интернету я нашел отличное решение по МАССОВОМУ поиску выпавших из индекса страниц, будь то из Яндекса или Google. Для этого нам понадобятся две программы: SiteMap Generator и Key Collector.

    Первая программа (бесплатная) поможет нам выкачать с сайта все статьи. Запускаем программу, пишем адрес сайта и запускаем сканирование:

    Когда все страницы собраны, переходим во вкладку Yahoo и копируем список всех страниц.

    Далее вставляем все это в таблицу EXEL и сортируем по алфавиту. Так как программа спарсила нам и все картинки, которые нам не нужны, благодаря сортировке мы сможем все их быстро найти и удалить. Теперь открываем Key Collector и идем в НАСТРОЙКИ программы:

    В ИНТЕРФЕЙСЕ настраиваем все так, как показано на фото выше. Далее переходим в другую вкладку и удаляем все символы из указанных полей:

    Далее создаем новый проект и добавляем в ФРАЗЫ все наши URL:

    Теперь прописываем в верхнем правом поле адрес нашего сайта и запускаем сбор позиций Яндекс или Google:

    После того как все закончилось выгружаем результат в EXEL. Что мы видим?

    А видим простую картину: если страница не в индексе, то в выдаче релевантной страницей будет главная страница или другая похожая статья. Отсортируем левую колонку по алфавиту и сразу увидим страницы, которые выпали из индекса:

    Все это делается за пять минут. Что дальше? В моем случае нужно ждать обновления выдачи (сегодня утром он случился), если же страницы выпали из индекса по другим причинам, то можно загнать их обратно способами, изложенными в этой статье — как можно ускорить индексацию сайта?

    Написал это больше для себя, чтобы не забыть алгоритм, все может повторится, ну и вам может быть пригодится. И еще урок для всех: держи ноги в тепле, в сервер в холоде…

    СОВЕТ ВЕБМАСТЕРУ: Умение зарабатывать в интернете — это только пол дела, вторая половина — это получить деньги и быть увернным в их сохранности.

    1. Tinkoff Bank — Мой любимый банк, пользуюсь не один год: бесплатные дебетовые мультивалютные карты, ивестиции на фондовом рынке и многое другое. Банк будущего — ему не страшен короновирус и прочие напасти, так как Тинькофф — ОНЛАЙН БАНК

    2. Payoneer — Самая популярная в мире платежная система для фрилансеров. Выдает карты, находится в США.

    3. Skrill — Единственная платежная система которая работает с криптовалютами и при этом выпускает бесплатные банковские карты MasterCard.

    4. AdvCash — Офшорный банк находится в Белизе, можно открыть счет в долларах, евро, фунтах и рублях.

    5. Payeer — Штаб квартира этой платежной системы находится в Грузии, тут так же можно открыть счет в долларах, евро и рублях.

    Ссылка на основную публикацию
    Сравнить технические характеристики rx330 и rx350
    Линейка популярных люксовых SUV Lexus RX пополнилась новой модификацией – RX 350. Теперь покупателем RX быть еще приятнее – ведь...
    Сколько рублей получают ютуберы
    Видеохостинг YouTube — не только развлекательная площадка, но и хороший источник дохода. Тысячи пользователей выкладывают ролики, пытаясь привлечь внимание аудитории....
    Сколько света мотает компьютер
    Выбирая комплектующие для персонального компьютера (ПК) обычно обращают внимание на производительность и объем памяти, порой забывая о том, сколько же...
    Сравнить процессоры кирин и снапдрагон
    Snapdragon 636 vs. Kirin 960: кто лучше? Результаты тестов и сравнительных таблиц, описанных в этой статье, помогут определить, какой из...
    Adblock detector