Моё меню Общее меню Пользователи Правила форума Все прочитано
Вернуться   uForum.uz > ИКТ и телеком > Информационная безопасность > Борьба со спамом
Знаете ли Вы, что ...
...нарушения правил форума наказываются. Старайтесь их не нарушать.
<< Предыдущий совет - Случайный совет - Следующий совет >>

Борьба со спамом ... в почте, на форумах и т.д. Сюда перемещены все старые темы по данному вопросу.


Ответить

 
Опции темы Опции просмотра
Старый 19.07.2013 22:21   #1  
Аватар для moymir
Оффлайн
Сообщений: 1,297
+ 86  296/233
– 4  24/20

Uzbekistan
ahrefs.com -новая пакость интернета

В среду запустил на альфа тест аналазитор статистики трафика. Сегодня просмотрел первые результаты. Какой то бот ака AhrefsBot заходит на сайт в день по несколько раз и сканирует все ресурсы.

В логах проходит как:

[HTTP_USER_AGENT] => Mozilla/5.0 (compatible; AhrefsBot/5.0; +http://ahrefs.com/robot/)

[HTTP_X_FORWARDED_FOR] => 46.8.35.129


Пока закрыл на этот IP вход на сайт. Ну наверное у этих спамеров другие адреса есть. Если кто сталкивался с этим чудом, поделитесь инфой.

Ответить 
Старый 19.07.2013 22:38   #2  
Real ID uParty Miss uForum Ultimate
Аватар для Tatyana Belyakova
Оффлайн
AKA:Flower
Сообщений: 9,996
+ 10,740  8,468/3,420
– 429  257/220

UzbekistanОтправить сообщение для Tatyana Belyakova с помощью Skype™LiveJournalFacebook
Цитата:
Сообщение от moymir Посмотреть сообщение
ahrefs.com -новая пакость интернета
Да обычный поисковый бот. Чего вы так всполошились?
__________________
Слишком много говорю.
Ответить 
2 "+" от:
Старый 19.07.2013 22:47   #3  
Заблокирован(а)
Аватар для JackDaniels
Оффлайн
Сообщений: 18,519
+ 10,956  12,586/6,453
– 307  539/385

Vatican City State
Цитата:
Сообщение от moymir Посмотреть сообщение
AhrefsBot
Удаляет данные с сайта, сервер из датацентра и левую почку у вебмастера.
Ответить 
Старый 19.07.2013 22:54   #4  
Аватар для moymir
Оффлайн
Сообщений: 1,297
+ 86  296/233
– 4  24/20

Uzbekistan
Цитата:
Сообщение от Tatyana Belyakova Посмотреть сообщение
Цитата:
Сообщение от moymir Посмотреть сообщение
ahrefs.com -новая пакость интернета
Да обычный поисковый бот. Чего вы так всполошились?
Да больно бот какой то настырный , и еще видно с памятью у него худо. По несколько раз в день заходит и все страницы прочитывает. У меня на сайте около 400 страниц, вот и выходит 1200 левых просмотров в день.
Ответить 
Старый 19.07.2013 23:01   #5  
Заблокирован(а)
Аватар для JackDaniels
Оффлайн
Сообщений: 18,519
+ 10,956  12,586/6,453
– 307  539/385

Vatican City State
Цитата:
Сообщение от moymir Посмотреть сообщение
Цитата:
Сообщение от Tatyana Belyakova Посмотреть сообщение
Цитата:
Сообщение от moymir Посмотреть сообщение
ahrefs.com -новая пакость интернета
Да обычный поисковый бот. Чего вы так всполошились?
Да больно бот какой то настырный , и еще видно с памятью у него худо. По несколько раз в день заходит и все страницы прочитывает. У меня на сайте около 400 страниц, вот и выходит 1200 левых просмотров в день.
Это SEO-инструмент.
Пусть заходит, жалко вам что ли?

Цитата:
Сообщение от moymir Посмотреть сообщение
У меня на сайте около 400 страниц, вот и выходит 1200 левых просмотров в день.
И в секунду такой объем обрабатывается, ничего страшного.

Последний раз редактировалось JackDaniels; 19.07.2013 в 23:08.
Ответить 
Старый 19.07.2013 23:17   #6  
Аватар для moymir
Оффлайн
Сообщений: 1,297
+ 86  296/233
– 4  24/20

Uzbekistan
Цитата:
Сообщение от JackDaniels Посмотреть сообщение
Цитата:
Сообщение от moymir Посмотреть сообщение
Цитата:
Сообщение от Tatyana Belyakova Посмотреть сообщение
Да обычный поисковый бот. Чего вы так всполошились?
Да больно бот какой то настырный , и еще видно с памятью у него худо. По несколько раз в день заходит и все страницы прочитывает. У меня на сайте около 400 страниц, вот и выходит 1200 левых просмотров в день.
Это SEO-инструмент.
Пусть заходит, жалко вам что ли?

Цитата:
Сообщение от moymir Посмотреть сообщение
У меня на сайте около 400 страниц, вот и выходит 1200 левых просмотров в день.
И в секунду такой объем обрабатывается, ничего страшного.
Зашел к ним на сайт. Все самое сладкое у них за деньги. Выходит я еще им и деньги какие то должен платить )))

Насчет просмотров и трафика как то вопрос не стоит. Ну не у всех же трафик бесплатный. В узинфокоме к примеру есть планы по 20 сум за лишний мегабайт внешнего трафика. А эти красавцы примерно 60 метров снимают с сервера в день ))
Ответить 
Старый 19.07.2013 23:30   #7  
Заблокирован(а)
Аватар для JackDaniels
Оффлайн
Сообщений: 18,519
+ 10,956  12,586/6,453
– 307  539/385

Vatican City State
Цитата:
Сообщение от moymir Посмотреть сообщение
А эти красавцы
Просто никто кроме нас не в курсе, что трафик до сервера может еще чего-то стоить.
Ответить 
Реклама и уведомления
Старый 19.07.2013 23:35   #8  
Аватар для moymir
Оффлайн
Сообщений: 1,297
+ 86  296/233
– 4  24/20

Uzbekistan
Цитата:
Сообщение от JackDaniels Посмотреть сообщение
Цитата:
Сообщение от moymir Посмотреть сообщение
А эти красавцы
Просто никто кроме нас не в курсе, что трафик до сервера может еще чего-то стоить.
Это точно.
Ответить 
Старый 20.07.2013 00:04   #9  
Аватар для akai
Оффлайн
Сообщений: 356
+ 783  166/104
– 47  37/30

Uzbekistan
Цитата:
Сообщение от moymir Посмотреть сообщение
Пока закрыл на этот IP вход на сайт. Ну наверное у этих спамеров другие адреса есть.
Откройте для себя robots.txt

Цитата:
How to turn it off?

The quick way to prevent AhrefsBot from visiting your site is to put these two lines into the /robots.txt file on your server:

Код:
user-agent: AhrefsBot
disallow: /
__________________
Имхо по умолчанию.
Ответить 
Старый 20.07.2013 00:40   #10  
Аватар для moymir
Оффлайн
Сообщений: 1,297
+ 86  296/233
– 4  24/20

Uzbekistan
Цитата:
Сообщение от akai Посмотреть сообщение
Цитата:
Сообщение от moymir Посмотреть сообщение
Пока закрыл на этот IP вход на сайт. Ну наверное у этих спамеров другие адреса есть.
Откройте для себя robots.txt

Цитата:
How to turn it off?

The quick way to prevent AhrefsBot from visiting your site is to put these two lines into the /robots.txt file on your server:

Код:
user-agent: AhrefsBot
disallow: /
В первую очередь это сделал. Не помогло. Правда просто домен они перестали индексировать. Теперь смотрят www.домен

Последний раз редактировалось moymir; 20.07.2013 в 00:42.
Ответить 
Ответить
Опции темы
Опции просмотра




Powered by vBulletin® Version 3.8.5
Copyright ©2000 - 2024, Jelsoft Enterprises Ltd. Перевод: zCarot
Advertisement System V2.5 By Branden
OOO «Единый интегратор UZINFOCOM»


Новые 24 часа Кто на форуме Новички Поиск Кабинет Все прочитано Вверх