Боты и рост отказов по прямым заходом
В Метрике в последнее время наблюдается рост отказов по прямым заходам на сайт 38-39%. Начал курить логи на сервере. Много ботов повылавливал, забанил. Отказы снизились до 19%. Видимо далеко не всех я забанил. Обнаружил в логах странные заходы, вот выжимка за день:
193.124.188.83 - - [28/May/2021:08:26:06 +0300] "HEAD / HTTP/1.0" 200 321 "https://load-file.su" "Mozilla/3.0 (compatible; MSIE6.00; Windows 2002)"
194.67.210.77 - - [28/May/2021:08:26:06 +0300] "HEAD / HTTP/1.0" 200 321 "https://krasnodar.beautyart.pro" "Mozilla/8.0 (compatible; MSIE2.00; Windows 2004)"
194.67.207.9 - - [28/May/2021:08:26:06 +0300] "HEAD / HTTP/1.0" 200 321 "https://www.startoff.info/zhenskaya-psihologiya/" "Mozilla/4.0 (compatible; MSIE4.00; Windows 2003)"
185.224.132.45 - - [28/May/2021:08:28:21 +0300] "HEAD / HTTP/1.0" 200 321 "https://k-chemu-snitsa.info/biznes/" "Mozilla/3.0 (compatible; MSIE3.00; Windows 2007)"
212.86.109.31 - - [28/May/2021:08:28:22 +0300] "HEAD / HTTP/1.0" 200 321 "https://zubz.ru" "Mozilla/8.0 (compatible; MSIE2.00; Windows 2003)"
185.241.52.68 - - [28/May/2021:08:30:19 +0300] "HEAD / HTTP/1.0" 200 321 "https://seopiter.biz" "Mozilla/2.0 (compatible; MSIE4.00; Windows 2008)"
185.203.240.129 - - [28/May/2021:08:30:19 +0300] "HEAD / HTTP/1.0" 200 321 "https://maslogid.com/proizvoditeli/snegoxod/" "Mozilla/5.0 (compatible; MSIE6.00; Windows 2004)"
77.220.215.153 - - [28/May/2021:08:30:19 +0300] "HEAD / HTTP/1.0" 200 321 "https://sizewheeltire.com" "Mozilla/6.0 (compatible; MSIE2.00; Windows 2004)"
185.209.20.147 - - [28/May/2021:08:30:19 +0300] "HEAD / HTTP/1.0" 200 321 "https://traktorbook.com/category/minitraktora/" "Mozilla/6.0 (compatible; MSIE2.00; Windows 2003)"
45.132.107.248 - - [28/May/2021:08:30:49 +0300] "HEAD / HTTP/1.0" 200 321 "https://diamondhairs.com.ua/binarnye-optsiony/" "Mozilla/2.0 (compatible; MSIE4.00; Windows 2003)"
193.124.190.18 - - [28/May/2021:08:41:32 +0300] "HEAD / HTTP/1.0" 200 321 "https://naytiparu.ru/city/belgorod_belgorodskaya_oblast_rossiya" "Mozilla/3.0 (compatible; MSIE2.00; Windows 2003)"
85.209.89.224 - - [28/May/2021:08:43:03 +0300] "HEAD / HTTP/1.0" 200 321 "https://kupime.kz/elektronika/" "Mozilla/3.0 (compatible; MSIE5.00; Windows 2003)"
85.209.89.216 - - [28/May/2021:08:43:03 +0300] "HEAD / HTTP/1.0" 200 321 "https://jantar.kiev.ua/izdeliya-iz-yantarya.html" "Mozilla/4.0 (compatible; MSIE2.00; Windows 2009)"
85.209.89.217 - - [28/May/2021:08:43:04 +0300] "HEAD / HTTP/1.0" 200 321 "https://infomagaz.xyz/kredit-onlayn/" "Mozilla/8.0 (compatible; MSIE3.00; Windows 2008)"
85.209.89.205 - - [28/May/2021:08:43:04 +0300] "HEAD / HTTP/1.0" 200 321 "https://webtime.com.ua/ideyi-dlya-biznesu/" "Mozilla/6.0 (compatible; MSIE7.00; Windows 2002)"
85.209.89.241 - - [28/May/2021:08:43:04 +0300] "HEAD / HTTP/1.0" 200 321 "https://www.lanet.ua/ru/internet/wifi_internet/" "Mozilla/5.0 (compatible; MSIE4.00; Windows 2008)"
194.67.207.94 - - [28/May/2021:08:46:27 +0300] "HEAD / HTTP/1.0" 200 321 "https://golden-job.com" "Mozilla/5.0 (compatible; MSIE3.00; Windows 2005)"
185.125.219.13 - - [28/May/2021:08:46:33 +0300] "HEAD / HTTP/1.0" 200 321 "https://kosmetychnyi-remont.com" "Mozilla/2.0 (compatible; MSIE6.00; Windows 2005)"
Все ip принадлежат вот этим подсетям:
AS35196 Ihor Hosting LLC
AS204601 Zomro B.V.
Все сайты в логах - сателлиты. Что это вообще за движуха с какими то странными USER_AGENT? Накручивают плохие поведенческие факторы?