Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо. / Вопросы по форуму

Участник

Сообщения: 4 386
Рейтинг: 263 / 2

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Только поисковых ботов и интернет-магазинных ботов и т.п. можно пускать.

PS Ещё будут интернет-войны ботов, ИБО уже контекстно-вредных ботов более, чем дофига.

...

Изменено: 15.06.2022, 15:32 - Умник^практик

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать | Ответы

15.06.2022, 19:55

#64165

basename ✓

Участник

Откуда: Из браузера
Сообщения: 21 088
Рейтинг: 3146 / 67

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Умник^практик 15.06.2022, 15:31

[игнорируется]

А чем они плохие?

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать | Ответы

15.06.2022, 20:43

#64230

Просто Трёп Привилегированный пользователь

Участник

Сообщения: 22 082
Рейтинг: 5730 / 34

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

basename 15.06.2022, 19:55

[игнорируется]

Умник^практик 15.06.2022, 15:31

[игнорируется]

А чем они плохие?

Тем, что ненужны.

И это. Сделай галочку для мемберов, чтобы желающие могли отключить метрику. Хуй с ним, с гуглом, но яндекс точно не нужен.

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать | Ответы

15.06.2022, 20:52

#64236

basename ✓

Участник

Откуда: Из браузера
Сообщения: 21 088
Рейтинг: 3146 / 67

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Просто Трёп 15.06.2022, 20:43

[игнорируется]

64230

basename 15.06.2022, 19:55

[игнорируется]

Умник^практик 15.06.2022, 15:31

[игнорируется]

А чем они плохие?

Ну какой-то слабый аргумент. Нужно искать способ как их заблочить 100%, вроде robots.txt они вроде игнорят.

А ради чего?

Гугл я как раз собирался выкинуть, абсолютно бесполезная хуита, вообще ноль инрформации в отчетах.

Никакие галочки я сделать не могу, я не дед. Используй inprivate browsing. Там нет трекинга.

И чем яндекс метрика мешает на дедофоруме, когда ты открываешь другие сайты где она так же присутствует?

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать | Ответы

16.06.2022, 08:27

#64552

Участник

Сообщения: 4 386
Рейтинг: 263 / 2

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

basename 15.06.2022, 19:55

[игнорируется]

Умник^практик 15.06.2022, 15:31

[игнорируется]

А чем они плохие?

сама идея такого интернет-бизнеса, что у Semrush: это как поднять у поисковиков те сайты, владельцы которых платят Semrush, так и ОПУСТИТЬ сайты, владельцы которых не платят Semrush. Такой типа интернет-рэкет в отношении поисковости.
Ну и нехило грузят запросами (чуть ли не через доли секунд те сайты, где инфа менятся, а на форумах постоянно новые топеги и посты) - стараются. И т.п.

PS Причем русские первые придумали этот интернет-бизнес.

_____
Наверно когда таких контор станет много - когда быть вверху поисковых выдач станет стоить много денег, то запретят такие фирмы.

...

Изменено: 16.06.2022, 08:32 - Умник^практик

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать | Ответы

16.06.2022, 08:31

#64559

IT-Христ

Участник

Сообщения: 4 816
Рейтинг: 508 / 26

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Умник^практик 16.06.2022, 08:27

[игнорируется]

basename 15.06.2022, 19:55

[игнорируется]

Умник^практик 15.06.2022, 15:31

[игнорируется]

А чем они плохие?

Можно поподробнее, как это работает?

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать | Ответы

16.06.2022, 08:47

#64572

basename ✓

Участник

Откуда: Из браузера
Сообщения: 21 088
Рейтинг: 3146 / 67

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Умник^практик 16.06.2022, 08:27

[игнорируется]

basename 15.06.2022, 19:55

[игнорируется]

Умник^практик 15.06.2022, 15:31

[игнорируется]

А чем они плохие?

Понял. Спасибо за информацию. Так вроде никакого вреда от них не вижу, у деды тоже висели. Надо почитать, как их запретить правильно.

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать

16.06.2022, 08:53

#64573

Участник

Сообщения: 4 386
Рейтинг: 263 / 2

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

IT-Христ 16.06.2022, 08:31

[игнорируется]

64559

Умник^практик 16.06.2022, 08:27

[игнорируется]

basename 15.06.2022, 19:55

[игнорируется]

Умник^практик 15.06.2022, 15:31

[игнорируется]

А чем они плохие?

Можно поподробнее, как это работает?

как и поисковики держат в тайне сотню своих критериев "почему у них в выдачах сперва те, а не эти", так и у seo-ков куча секретов,
короче - это "коммерческие
тайны", о которых у народа только общие представления

PS ... возможен и сговор с поисковиками, если речь пойдет о больших деньгах
PSS ... типа:: если на своем сайте разместишь яндекс.рекламу, то твой сайт будет чаще показываться в поиске яндекс-машины (но и яндекс.реклама не будет размещаться, что-то выплачивая, на сайтах, на которые никто не ходит) ...

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать | Ответы

16.06.2022, 08:56

#64575

Просто Трёп Привилегированный пользователь

Участник

Сообщения: 22 082
Рейтинг: 5730 / 34

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

basename 15.06.2022, 20:52

[игнорируется]

Ну какой-то слабый аргумент. Нужно искать способ как их заблочить 100%, вроде robots.txt они вроде игнорят.

Просто не вставлять их код на свои страницы.

basename 15.06.2022, 20:52

[игнорируется]

Никакие галочки я сделать не могу, я не дед. Используй inprivate browsing. Там нет трекинга.

Это не поможет, если ты в моем браузере запускаешь яндексовый код.

basename 15.06.2022, 20:52

[игнорируется]

И чем яндекс метрика мешает на дедофоруме, когда ты открываешь другие сайты где она так же присутствует?

Именно тем, что она идентифицирует меня и на других сайтах, и на дедофоруме.

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать | Ответы

16.06.2022, 09:04

#64578

basename ✓

Участник

Откуда: Из браузера
Сообщения: 21 088
Рейтинг: 3146 / 67

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Просто Трёп 16.06.2022, 08:56

[игнорируется]

basename 15.06.2022, 20:52

[игнорируется]

Ну какой-то слабый аргумент. Нужно искать способ как их заблочить 100%, вроде robots.txt они вроде игнорят.

Просто не вставлять их код на свои страницы.

basename 15.06.2022, 20:52

[игнорируется]

Никакие галочки я сделать не могу, я не дед. Используй inprivate browsing. Там нет трекинга.

Это не поможет, если ты в моем браузере запускаешь яндексовый код.

basename 15.06.2022, 20:52

[игнорируется]

И чем яндекс метрика мешает на дедофоруме, когда ты открываешь другие сайты где она так же присутствует?

Именно тем, что она идентифицирует меня и на других сайтах, и на дедофоруме.

Речь про вредных ботов была, которые на сайт ходят. Я даже без понятия, что за конторы, а не то, что их код вставлять.

Просмотр инкогнито точно помогает от всяких метрик, браузер в режиме запрещает сбор и отслеживание при помощи сторонних скриптов.

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать | Ответы

16.06.2022, 09:04

#64579

	cat2 Участник [игнорирует гостей] Сообщения: 10 746 Рейтинг: 2657 / 70
Гесты и игнорируемые идут по CSS

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Просто Трёп 16.06.2022, 08:56

[игнорируется]

Именно тем, что она идентифицирует меня и на других сайтах, и на дедофоруме.

Что, парагвайский шпион, спалится боишься?

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать | Ответы

16.06.2022, 09:16

#64585

Участник

Сообщения: 4 386
Рейтинг: 263 / 2

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

basename 16.06.2022, 09:04

[игнорируется]

64578

Просто Трёп 16.06.2022, 08:56

[игнорируется]

basename 15.06.2022, 20:52

[игнорируется]

Ну какой-то слабый аргумент. Нужно искать способ как их заблочить 100%, вроде robots.txt они вроде игнорят.

Просто не вставлять их код на свои страницы.

basename 15.06.2022, 20:52

[игнорируется]

Никакие галочки я сделать не могу, я не дед. Используй inprivate browsing. Там нет трекинга.

Это не поможет, если ты в моем браузере запускаешь яндексовый код.

basename 15.06.2022, 20:52

[игнорируется]

И чем яндекс метрика мешает на дедофоруме, когда ты открываешь другие сайты где она так же присутствует?

Именно тем, что она идентифицирует меня и на других сайтах, и на дедофоруме.

уже складывается общее мнение о полезных и о вредных бактериях ботах
Список полезных и вредных ботов и краулеров

PS как и в жизни: что-то одним - полезно, а другим это же - вредно

...

Изменено: 16.06.2022, 09:18 - Умник^практик

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать | Ответы

16.06.2022, 09:35

#64595

Просто Трёп Привилегированный пользователь

Участник

Сообщения: 22 082
Рейтинг: 5730 / 34

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

cat2 16.06.2022, 09:04

[игнорируется]

64579

Просто Трёп 16.06.2022, 08:56

[игнорируется]

Именно тем, что она идентифицирует меня и на других сайтах, и на дедофоруме.

Что, парагвайский шпион, спалится боишься?

Не то, чтобы боюсь, просто стараюсь минимизировать, там, где можно, свое наличие в чьих-то базах. Как я ни старался, в недавний большой слив информации я таки попал, причем я там связан с тобой лично. Ищешь мою фамилию, находишь заодно твою. Неприятно. Кто-нибудь может этим злоупотребить. Так это хорошо, что я яндекс-еду не заказывал. В сливе только фамилия и телефон. А так бы и адрес был.

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать

16.06.2022, 09:36

#64596

Просто Трёп Привилегированный пользователь

Участник

Сообщения: 22 082
Рейтинг: 5730 / 34

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Сдэк, сука, постарался.

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать

16.06.2022, 10:33

#64635

basename ✓

Участник

Откуда: Из браузера
Сообщения: 21 088
Рейтинг: 3146 / 67

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Умник^практик 16.06.2022, 09:16

[игнорируется]

64585

basename 16.06.2022, 09:04

[игнорируется]

64578

Просто Трёп 16.06.2022, 08:56

[игнорируется]

basename 15.06.2022, 20:52

[игнорируется]

Ну какой-то слабый аргумент. Нужно искать способ как их заблочить 100%, вроде robots.txt они вроде игнорят.

Просто не вставлять их код на свои страницы.

basename 15.06.2022, 20:52

[игнорируется]

Никакие галочки я сделать не могу, я не дед. Используй inprivate browsing. Там нет трекинга.

Это не поможет, если ты в моем браузере запускаешь яндексовый код.

basename 15.06.2022, 20:52

[игнорируется]

И чем яндекс метрика мешает на дедофоруме, когда ты открываешь другие сайты где она так же присутствует?

Именно тем, что она идентифицирует меня и на других сайтах, и на дедофоруме.

Вроде решений по их блокировке полно. Попробую со стороны nginx заблочить. Толку нам от них точно нет, согласно их описанию.

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать

16.06.2022, 12:48

#64737

basename ✓

Участник

Откуда: Из браузера
Сообщения: 21 088
Рейтинг: 3146 / 67

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Умник^практик 16.06.2022, 09:16

[игнорируется]

64585

basename 16.06.2022, 09:04

[игнорируется]

64578

Просто Трёп 16.06.2022, 08:56

[игнорируется]

basename 15.06.2022, 20:52

[игнорируется]

Ну какой-то слабый аргумент. Нужно искать способ как их заблочить 100%, вроде robots.txt они вроде игнорят.

Просто не вставлять их код на свои страницы.

basename 15.06.2022, 20:52

[игнорируется]

Никакие галочки я сделать не могу, я не дед. Используй inprivate browsing. Там нет трекинга.

Это не поможет, если ты в моем браузере запускаешь яндексовый код.

basename 15.06.2022, 20:52

[игнорируется]

И чем яндекс метрика мешает на дедофоруме, когда ты открываешь другие сайты где она так же присутствует?

Именно тем, что она идентифицирует меня и на других сайтах, и на дедофоруме.

Забанил вот этих. Хотя список большой, но превентивно банить не буду по списку, буду наблюдать, кто появляется

Код

1.
2.
3.
4.
5.

#
    if ($http_user_agent ~* SemrushBot|MJ12bot|AhrefsBot|BLEXBot) {
        return 444;
    }
#

Во есть какая хрень ))

https://github.com/mitchellkrogza/nginx-ultimate-bad-bot-blocker

но ради 4 ботов ставить это не буду.

Педаль оставил, написано хуавейный какой-то.

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать

16.06.2022, 12:55

#64740

basename ✓

Участник

Откуда: Из браузера
Сообщения: 21 088
Рейтинг: 3146 / 67

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Умник^практик [игнорируется]

Хотя, посмотрел статистику, трафик у них тухлый и вроде ничего такого не делают. Ну раз все советуют от них избавляться, прислушаюсь к мнению.

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать | Ответы

16.06.2022, 15:18

#64826

Участник

Сообщения: 4 386
Рейтинг: 263 / 2

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

basename 16.06.2022, 12:55

[игнорируется]

64740

этим всем seo-фирмам, продвигающим одних и зытакающих других, уже более 10 лет, у них тысячи крутых, уровня хакеров, сотрудников и они развиваются и развиваются, их услуги сейчас стоят от $100 до $1000 в месяц, ...: что они делают и какие данные и зачем собирают, постоянно торча на сайте, на дедофоруме - неясно (но пришли от тех, кто их услуги оплатил), когда их услуги дедофорум не заказывал, ...

PS вот боты-пауки поиисковых машин - составляюшая часть поисковых машин, и если их не пускать на сайт, то сайт невозможно будет найти в поиске на этих машинах, аналогично с другими классами ботов, чьи задачи ясны

...

Изменено: 16.06.2022, 15:28 - Умник^практик

Рейтинг:

1 / 0

Нравится: in100gramm

| Ответить | Цитировать | Написать | Ответы

16.06.2022, 15:36

#64840

basename ✓

Участник

Откуда: Из браузера
Сообщения: 21 088
Рейтинг: 3146 / 67

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Умник^практик 16.06.2022, 15:18

[игнорируется]

64826

basename 16.06.2022, 12:55

[игнорируется]

64740

Хм, здесь же обычная болталка, ничего такого ценного и коммерческого нет. Кому это могло понядобиться?

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать

16.06.2022, 15:55

#64874

basename ✓

Участник

Откуда: Из браузера
Сообщения: 21 088
Рейтинг: 3146 / 67

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Пользователь назначен модератором темы: Умник^практик.

...

basename:

Пользователь назначен модератором темы: Умник^практик.

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать

25.08.2022, 17:33

#125846

Администратор

Сообщения: 0
Рейтинг: 0 / 0

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Тема была перенесена из форума 'Просто Трёп'.

...

Администратор:

Тема была перенесена из форума 'Просто Трёп'.

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать

26.08.2022, 06:14

#126497

eNose

Участник
[не активирован]

Сообщения: 21 404
Рейтинг: 6302 / 65

Базя, а почему ты пускаешь Semrush.bot и Ahrefs.bot? Этих SEO-гадов давить надо.

Умник^практик 16.06.2022, 08:53

[игнорируется]

64573

IT-Христ 16.06.2022, 08:31

[игнорируется]

64559

Умник^практик 16.06.2022, 08:27

[игнорируется]

basename 15.06.2022, 19:55

[игнорируется]

Умник^практик 15.06.2022, 15:31

[игнорируется]