Рассказываю ситуацию, с которой я столкнулся, буду описывать ее без сильных подробностей, но чтобы было всем все понятно.
Есть блог, он работает на бесплатной платформе, в блоге 7 языков, после полугода продвижения блога, выяснилось что в коде блога, на любые ссылки внутренние, т.е. на случайные статьи, на ссылки языков и вообще все ссылки по которым можно ходить по сайту стоит атрибут nofollow, за исключением меню сайта.
Вопрос собственно: разве нужен этот атрибут для закрытия собственных ссылок?
Получается что робот заходит на сайт, и читает, эту ссылку не индексируй, на нее не заходи, сюда тоже не ходи и так весь сайт.
Но самое интересное, что в поиске все страницы основного языка - русского, частично статьи английского есть, а вот в июне этого года были добавлены языки испанский, немецкий, итальянский, французский, турецкий, при запросе домена в любом поисковике находит только русский язык.