• +375297715972
  • Этот адрес электронной почты защищён от спам-ботов. У вас должен быть включен JavaScript для просмотра.
  • 10:00-18:00

Правильная настройка Robots.txt для Joomla сайта

Рейтинг:  0 / 5

Звезда не активнаЗвезда не активнаЗвезда не активнаЗвезда не активнаЗвезда не активна
 

Правильная настройка Robots.txt для Joomla сайта имеет огромную важность для сео-продвижения ресурса. Любая ошибка может привести к выпадению страниц из индекса Яндекс и Гугл, а это приведет к снижению посещаемости. Ведь именно этот файл отвечает, за то, как будут видеть сайт поисковики.

Например, если использовать стандартный файл Robots.txt в Joomla, то придется забыть об индексации изображений, размещенных на нем. Кроме того, поисковый бот не сможет понять оформления сайта, будет утеряна определенная часть контента, переход робота по ссылкам меню будет затруднен.

Оригинальное оформление дополнительных модулей выполняется, чтобы сделать сайт более удобным и красочным для пользователей, а стандартный файл robots.txt не даст это оценить поисковому роботу.

Разработчики Joomla знают об этой проблеме, и в версиях от 3.3, файл robots.txt получил значительные доработки, но, при апгрейде CMS обновление файла предыдущей версии не происходит автоматически - файл подгружается в корень сайта с расширением .txt.dist, которое нужно редактировать. К тому же, нужно все равно внести изменения, которые нужны этому конкретному сайту.

Внесение необходимых изменений в Robots.txt

Доработка от разработчиков новой версии Robots.txt для Джумла заключается в удалении трех запрещающих директив с папок изображений, фона и медиа. Для получения поисковым ботом полной картины сайта, со всеми оригинальными фишками, этого не достаточно. Чтобы понять это, можно в Google Search Console сравнить, как видит сайт пользователь и робот.

При проверке будет видно, что видео, фон отдельных модулей (с версии 2.5 они могут иметь собственное оформление) роботу недоступны, так же не отображается разметка сайта. А анализ сайта покажет, что поисковый бот не получил доступа к папке плагинов, компонентов и фонов шаблона (tmp).

Чтобы исправить это, достаточно удалить соответствующие директивы или использовать разрешающую директиву, с указанным путем для нужного компонента. Ведь удаление откроет путь ко всем плагинам, а это допустимо не всегда. Иногда, например, плагины устанавливаются для сокрытия исходящих ссылок и если показать этот плагин поисковику, ему это не понравится.

Также, нужно удалить запрет на папку модулей, ведь именно туда устанавливаются модули, обладающие собственным фоном и оформлением, которые поисковый робот, в противном случае, не увидит.

То же самое относится к папке компонентов, для получения роботом скриптов, файлов стилей и изображений по этому пути.

Пример правильного Robots.txt для Joomla:

robots.txt код:
  1. User-agent: *
  2. Disallow: /administrator/
  3. Disallow: /bin/
  4. Disallow: /cache/
  5. Disallow: /cli/
  6. Disallow: /components/
  7. Disallow: /includes/
  8. Disallow: /installation/
  9. Disallow: /language/
  10. Disallow: /layouts/
  11. Disallow: /libraries/
  12. Disallow: /logs/
  13. Disallow: /media/
  14. Disallow: /modules/
  15. Disallow: /plugins/
  16. Disallow: /templates/
  17. Disallow: /tmp/
  18. Allow: /media/*.css
  19. Allow: /media/*.js
  20. Allow: /media/*.png
  21. Allow: /media/*.woff
  22. Allow: /media/*.woff2
  23. Allow: /media/*.ttf
  24. Allow: /media/*.svg
  25. Allow: /modules/*.css
  26. Allow: /modules/*.js
  27. Allow: /components/*.css
  28. Allow: /components/*.js
  29. Allow: /components/*.png
  30. Allow: /plugins/*.css
  31. Allow: /plugins/*.js
  32. Allow: /plugins/*.png
  33. Allow: /templates/*.css
  34. Allow: /templates/*.js
  35. Allow: /templates/*.woff
  36. Allow: /templates/*.woff2
  37. Allow: /templates/*.eot
  38. Allow: /templates/*.ttf
  39. Allow: /templates/*.otf
  40. Allow: /templates/*.svg
  41. Allow: /templates/*.png
  42. Allow: /templates/*.jpg
  43. Allow: /templates/*.gif
  44. Host: Домен_Сайта
  45. Sitemap: http://ваш сайт

Кроме этого, считается, что микроразметка интегрирована в Джумлу, но на самом деле, большинство пользователей используют коммерческие шаблоны, где шаблоны материалов переписаны и значительно отличаются от стандартных и путь к ним в Robots.txt нужно прописать вручную.

Правильная настройка Robots.txt для Joomla сайта совсем простая, занимает так мало времени, тем не менее, есть ресурсы, где эта работа не проводится годами, теряется посещаемость, увеличивается бюджет на сео-продвижение, а чтобы избежать всего этого, довольно выполнить эти простые действия!

Калькулятор расчета пеноблоков смотрите на этом ресурсе
Все о каркасном доме можно найти здесь http://stroidom-shop.ru
Как снять комнату в коммунальной квартире смотрите тут comintour.net


© Copyright 2017-2018 Масташев Вадим Сергеевич. Все права защищены.

MASTASHEV.BY