В начале этого года я зарегистрировал домен и установил Joomla и WordPress, чтобы опробовать различные темы и функции.
Менее чем через несколько дней основной домен и подпапка были проиндексированы Google следующим образом:
Около двух недель назад я прибрался все и сделал следующее:
С тех пор, только главная страница index.html была проиндексирована Google, хотя она имеет ссылки на «вики» и «блог».
У WordPress и Dokuwiki есть дружественный URL (спасибо .httacess)
Как получить, чтобы мои подпапки были проиндексированы Google? Примечание: у меня нет поддоменов.
Обновление 1:
Веб-сайт: http://goo.gl/vVvyr9
Я перечислил несколько тем, имеющих отношение к вашему вопросу:
robots.txt
Этот файл указывает поисковику, какие папки или файлы он не должен индексировать. Поэтому убедитесь, что ваши подпапки не перечислены здесь. Больше информации о: http://www.robotstxt.org/
User-agent: *
Disallow: /cgi-bin/
Disallow: /tmp/
Disallow: /~joe/
не следует & NOINDEX
Атрибуты NoFollow могут быть перечислены в заголовке страницы или в самих ссылках. Он сообщает поисковику, что определенные ссылки или целые страницы не должны быть индексами.
<html>
<head>
<title>...</title>
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
</head>
Больше информации: http://www.robotstxt.org/meta.html
<a href="signin.php" rel="nofollow">sign in</a>
Больше информации: https://support.google.com/webmasters/answer/96569?hl=en
Sitemaps
Sitemaps являются файлами, содержащими ссылки на все ваши страницы, что облегчает поисковым системам их индексацию. Рассмотрите возможность отправки карты сайта в Инструменты Google для веб-мастеров.
Содержание:
У гугл методические рекомендации для контента и веб-мастеров, убедитесь, что вы как можно более совместимы, чтобы максимизировать видимость вашего поиска.
Других решений пока нет …