Форум » Общие вопросы » Форум сходит с ума [3] (продолжение) » Ответить
Форум сходит с ума [3] (продолжение)
ariona: Продолжение Вчера наш форум "глючил" на полную катушку, сегодня открывается нормально, но какие-то моменты/форум работает, а иконки еще не открылись, лс вылезло не флажком, а буквами/ остались. Просьба, если что, в эту тему сбрасывать описание проблем, а то думаешь, что они только у тебя. Спасибо. Конец предыдущей темы здесь: http://mycoweb.borda.ru/?1-5-0-00000183-000-300-0#135.001.001 Обновления для Firefox: http://mycoweb.borda.ru/?1-5-0-00000183-000-280-0#132 Скачать Firefox http://mozilla-russia.org/ Скрап-бук https://addons.mozilla.org/ru/firefox/addon/scrapbook/ Old Default Image Style https://addons.mozilla.org/ru/firefox/addon/old-default-image-style/
vstepanov: Да, и форум сегодня медленно, очень медленно грузился На серверах, где базируется ГИФ, авария. Я уже получил письмо от руководства хостинга с извинениями Давайте наберемся терпения...
ariona: vstepanov Спасибо! Сегодня и кратковременный сбой был в Фейсбуке.
Rannar: Да, у меня всё то же самое, как и у Ирины. И на форум трудно было попасть, и ГИФ не работает.
SAE: vstepanov ariona Rannar Полнолуние. И конец месяца. Это всё объясняет...
ariona: SAE пишет: Полнолуние. И конец месяца. Это всё объясняет... Лучше бы владельцы хостинга объяснили, когда ликвидируют проблему.
SAE: ariona пишет: Лучше бы владельцы хостинга объяснили, когда ликвидируют проблему. Так у них, очевидно, те же проблемы - полнолуние и конец месяца (теперь начало).
ariona: SAE Я уже переживаю о ГИФе, надеюсь, копия у Вячеслава есть.
Алтэй: ariona пишет: SAE Я уже переживаю о ГИФе, надеюсь, копия у Вячеслава есть. Очень бы хотелось. Тем более, что авария связана с *Апачи*, вредоносная программа, разрушающая компьютерные ифраструктуры.
ariona: Алтэй пишет: Тем более, что авария связана с *Апачи*, вредоносная программа, разрушающая компьютерные ифраструктуры. Александр, откуда такие сведения?
SAE: Алтэй пишет: Тем более, что авария связана с *Апачи*, вредоносная программа, разрушающая компьютерные ифраструктуры. Да, действительно. Можно подробнее, откуда информация? Может, я что-то упустил.
Rannar: Может быть, из этой подписи к сообщению об отказе в доступе? Apache/2.0.64 Server at mycoweb.ru Port 80 Если так, то это, к счастью, это не те "Апачи".
Алтэй: Rannar пишет: Если так, то это, к счастью, это не те "Апачи". А, я так понял, что это указывается причина аварии.
Rannar: Друзья, ГИФ заработал. Ура!
vstepanov: Друзья, всем добрый день! Может быть, кто-то из Вас заметил, что меня не было на форуме с 28 февраля, с этого же времени не работал и ГИФ. Теперь мы с ГИФом появились, но обратной последовательности: сначала ГИФ заработал, потом и я зашел на форум. Короче. НАШ ГИФ ЗАБЛОКИРОВАЛИ КАК УБИЙЦУ СЕРВЕРА ХОСТИНГА!!! 1. Зная о проблемах доступа к сайтам хостинга, я терпеливо ждал, когда ситуация разрядится, ГИФ снова заработает и я смогу продолжить разработки, а вы -загрузки 2. Время шло, ГИФ не работал, но я обратил внимание, что http- протокол не заработал, зато можно было подключиться независимо к базе данных и к файлам, через ftp 3. Пользуясь доступам к БД и файлам, сделал полные копии сайта и продолжил ждать 4. Когда терпение лопнуло, а в душу закрались черные сомнения, 3 марта написал в техподдержку, мол, какого черта оплаченный до 2019 года сайт не работает Ответ пришел быстро и ошеломил меня. Сайт mycoweb.ru был блокирован из-за создания чрезмерной нагрузки на сервер хостинга. Наш сайт и чрезмерная нагрузка - это же нонсенс!!! 5. Мое следующее письмо в техподдержку было менее вежливым. Матюги я припас на будущее, но фразу "Вы что, у США научились санкции без доказательств сразу вводить?" в письмо вставил, а еще попросил привести доказательства перегрузки нашим сайтом сервера хостинга 6. Получил развернутое письмо из техподдержки, в котором мне указали на три возможные причины создания чрезмерной нагрузки на сервер: а) колоссальная посещаемость б) неэффективный код в) "тяжелые" запросы к огромной базе данных И самое главное (тут выдержка из правил хостинга), чтобы "в неделю суммарное время использования веб-сервера для обработки запросов, связанных с одним аккаунтом, не может превышать 60480 секунд и/или среднее время обработки запроса не должно превышать 1 секунды" 7. Стал анализировать данные доступа к нашему сайту в самые "тяжелые" дни, 25 и 26 февраля, и вот что выяснил. 25 февраля было самое активное "доение" нашего сайта, за сутки поступило около 300 000 запросов. Было всего 12 запросов, которые превысили 10 секунд, а вот среднее время обработки запроса составило 0,09 секунды, т.е в 11 раз меньше предельного 8. Тут же отправил данные анализа техподдержке хостинга (хотя этот анализ они могли бы сделать и сами), и буквально через полчаса ответил уже другой сотрудник. Они признались, что специально не блокируют сайты при незначительном пергрузе сервера (а мы и не могли это сделать), просто у них была "критическая" ситуация. 9. Ё-мое, мне этих критических дней у пользователей на заводе хватает, а тут еще они и у хостинга, где ГИФ располагается. 10. Сайт разблокировали. Тут же Ирина Уханова загрузила несколько замечательных фотографий, а меня в душе наступило какое-то опустошение, руки опустились. Знаете как это бывает у спортсменов: он поймал кураж, интенсивно работает на тренировках, дела у него идут замечательно, а тут бац - у вас, мол, проблема с мочой, давайте-ка мы вас до стадиона не допустим. Потом выясняется, что моча была кошачья, дверь на стадион открыли, но дыхалка-то уже сбилась... Так и у меня: была куча идей и планов по доработке, все шло хорошо, а тут несколько дней фигней промаялся и все дела застопорились. Как следствие, код писать совсем не хочется, не доверяют!. Как говорят мои друзья-евреи: "Ложечки-то мы после вас нашли, а вот неприятный осадок в душе остался..." Я тут поостыл немного и понял, а ведь служба хостинга права: ГИФ действительно насилует сервер хостинга. Смотрите, если 25 февраля было к сайту порядка 300 тысяч обращений, а среднее время обработки одного обращения составляет 0,09 секунды, то только за один день 25 февраля сайт "съел" 300 000 х 0.09 = 27 000 секунд из 60 480 отведенных на неделю!!!!
vstepanov: Анализ продолжается: Вывод: дикую загрузку (300 тысяч и более обращений в сутки) делают поисковые роботы Google, которые буквально еженочно "перетряхивают" весь ГИФ, ища что-то новенькое на нем. Помните, я как ребенок радовался, что наши новые фото попадают в Гугл через 8-12 часов после их публикации. Вот теперь за эту скорость мы платим блокировкой сайта Я сегодня предпринял кое-какие меры по уменьшению нагрузки от поисковых роботов. Первые изменения могу посмотреть только завтра, проанализировав журнал обращений к сайту за сутки Ну не дают микологией заниматься, не дают - все ИТ-терки да ИТ-разборки...!!
ariona: vstepanov Слава, ошеломил... Я не очень разбираюсь в правилах пользования хостингами и их ограничениями. Я-то, по простоте душевной и наивному неведению , думала, что если на сервере хостинга лежат такие популярные сайты, то хостингу это должно давать какие-то дивиденды. Я не понимаю, откуда столько обращений к ГИФу, но из глубин души, пузырясь и вырастая, словно пена из стиральной машины, куда нечаянно добавили порошок для ручной стирки, растет чувство гордости. Получается, что либо хостингу катастрофически не хватает мощностей, либо они хотят просто сдоить лишние деньги этим ходом? Не понимаю... Есть сайты, обращений к которым на порядок больше, но они живут без проблем. Слава, выходит, я еще и подсуропила тебе со своими фотографиями? Слава, не опускай руки. Насчет обращений к сайту. С ГИФ своровано столько материалов, что неудивительно, обращаются все, кому не лень. А что можно сделать? Если у них в правилах лимит времени по обращениям, мы вроде должны соблюдать. Но если мы превышаем, какой выход? Если платить больше, готова участвовать материально. А если им не хватает мощности сервера, то сложно ли переехать на др. платформу? Я в этом не понимаю, не знаю, насколько затратно это для тебя и чем чревато для ГИФ.
vstepanov: Ира, все будет хорошо и даже лучше Это поисковые роботы нам накрутили трафик. Из 300 тысяч обращений к сайту за сутки только на роботы поисковика ГУГЛ приходится более половины обращений. А еще мне надо будет поработать на списком тех файлов, которые работы должны заносить в базы поисковика, чтобы они не делали лишних движений на нашем сайте Таким образом, наша задача сейчас - ущемить в правах поисковые роботы А загрузкой фото ты никак не могла подсуропить, так что не беспокойся понапрасну
Waleri: Rannar пишет: Под старые фотки дадут место, а новые складывать особенно будет некуда. И ссылки там только прямые. Никаких BB-кодов. Как я понял, Яндекс снова сжимается за счёт пользователей, оптимизируется. С соцсетей больше кликов, больше рекламы и она дороже естественно. Идёт борьба за место под солнцем. А нам придётся пользоваться тем, что дадут. М-да. https://www.youtube.com/watch?v=SvmHCYW6paM
Rannar: Да, похоже что обитателей форумов подталкивают к переезду в соцсети - с которых собирается информация обо всех участниках. До сих пор я успешно уклонялся от этого... Да видно, скоро форумы отомрут и деваться будет некуда.
vstepanov: Ё-моё, только победил нападки хостинга, где ГИФ расположен, как еще одна неприятная новость - закрытия фотохостинга "Яндекс-фотки" На сегодняшний день к базе ГИФа подключено более 15 тысяч фото с этого фотохостинга. Если в один прекрасный день ссылки "умрут", то это будет... , да, катастрофа. Накроются медным тазом тысячи фото Станислава Кривошеева, Владимира Брюхова, Валерия Афанасьева, Юрия Семенова и других авторов. Не смотря ни на что, я продолжу подключать фотографии с Яндекс-фотки к альбомам на ГИФе в надежде, что мы все же преодолеем сложную ситуацию в недалеком будущем Хочу закончить это сообщение все-таки приятной новостью: мне удалось умерить аппетит поисковых роботов с Гугла. Теперь вместо 300 тысяч обращений в нашему сайту эти роботы "шерстят" только новые свежие страницы и поступления. Так, например, по журналу доступа к сайту я выяснил что 9 марта гугловские поисковые роботы внесли в свои базы все свежие фото от Игоря Крома и созданную им страницу каталога про Гимнопил обманчивый http://mycoweb.ru/GIF/catalog/catalog.php?level=picture&id=8967 Работы по упорядочиванию работы поисковых ботов на ГИФе будут продолжены...
полная версия страницы