1. Приветствуем Вас на нашем закрытом форуме для складчиков сайта cmsheaven.org. Если Вы частный вебмастер, фрилансер, владелец малого или среднего бизнеса, представитель студии по разработке сайтов - будем рады видеть Вас в наших рядах экономных людей.
    Регистрация на форуме возможна только после вступления в складчину

plg_jchoptimize и Googlebot нагружают сайт

Тема в разделе "Вопросы по расширениям Joomla [тех. поддержка]", создана пользователем vlad1204, 10 окт 2016.

  1. vlad1204

    vlad1204 Опытный складчик

    Регистрация:
    10 май 2015
    Сообщения:
    51
    Симпатии:
    8
    Столкнулся с непонятной проблемой и прошу помощи.
    За последние 2 дня один из сайтов начал сильно грузить сервер. Запрос от хостеров показал огромную активность Googlebot.
    Лезу в лог и вижу тысячи одинаковых повторяющихся запроса на каждый товар типа:
    www.сайт.ru 66.249.65.181 - - [10/Oct/2016:00:00:03 +0300] "GET /media/plg_jchoptimize/assets/nz/1/2/a64bb35d5419adda336c1bd3de7087a9.css HTTP/1.1" 200 492 "http://www.сайт.ru/home/hit-dakimakura-date-a-live-6" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
    www.сайт.ru 66.249.65.178 - - [10/Oct/2016:00:00:03 +0300] "GET /media/plg_jchoptimize/assets/nz/1/0/a64bb35d5419adda336c1bd3de7087a9.css HTTP/1.1" 200 22467 "http://www.сайт.ru/home/hit-dakimakura-date-a-live-6" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
    www.сайт.ru 66.249.65.181 - - [10/Oct/2016:00:00:04 +0300] "GET /media/plg_jchoptimize/assets/nz/1/1/a64bb35d5419adda336c1bd3de7087a9.css HTTP/1.1" 200 42476 "http://www.сайт.ru/home/hit-dakimakura-date-a-live-6" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"

    Тоже самое и на объединенный файл js. Убрал объединение файлов-не помогло. Уменьшение активность робота в гугле, не спасает. Нагрузка упала только после отключения плагина.
    Расставаться с плагином не хочется. Заранее спасибо.
    #1
  2. Artur

    Artur Тех. поддержка

    Регистрация:
    25 дек 2015
    Сообщения:
    898
    Симпатии:
    139
    #2
  3. vlad1204

    vlad1204 Опытный складчик

    Регистрация:
    10 май 2015
    Сообщения:
    51
    Симпатии:
    8
    В настройках было на усмотрение гугла. Установил на 0.05 запросов в секунду. Плагин пока не проверял, так как давно уже превысил лимит нагрузки. Странное поведение гугла, ведь у яндекса такие же настройки. Чем быстрей работает сайт, тем шустрей заходят гугл боты? Если дело в этом, то чуть позже отпишусь.
    #3
  4. vlad1204

    vlad1204 Опытный складчик

    Регистрация:
    10 май 2015
    Сообщения:
    51
    Симпатии:
    8
    Перевел на https и новая версия протокола http2 + плагин и сайт стал просто летать. Моментально загружаются страницы. Соответственно гуглу это понравилось и действительно пришлось усмирять пыл в настройках вебмастера гугл. Может кому пригодится информация о нагрузке на сервер.
    #4