Как запретить доступ к веб-странице

По User Agent.

заблокировать ip адрес в iptables

с разных айпишников

Постоянно разные агенты, с разных айпишников.

Ну так добавь отдельный локейшн для этого, типа такого

          location = /lalala/page.html {
                        allow 1.2.3.4;
                        deny all;
     }

location = /lalala/page.html {
    return 444;
}

Это в конфиг nginx'a прописывать, да?

А .htaccess в nginx есть?
Не пользовался nginx никогда.
А так все правильно написал.

В htaccess прописано такое:

RewriteEngine On
RewriteRule ^lalala/lalala/page.+$ - [F,L]

Прописывал в конфиг nginx'a, не помогло.

Да. Почитай документацию для приличия :)

Нету

Значит не туда прописал или криво. Или конфиг перечитать/рестарнтуть нгинкс забыл

Пробовал добавлять такое правило в iptables:

iptables -I INPUT 1 -p tcp --dport 80 -m string --string "GET /lalala/page" --algo kmp -j DROP

2014/05/17 23:08:29 [crit] 7685#0: *217047 open() "/var/www/site/main.css" failed (24: Too many open files), client: 99.99.99.99, server: example.ru, request: "GET main.css HTTP/1.1", host: "example.ru", referrer: "http://example.ru/support.html"

Пока сделал так, вроде работает без косяков:

iptables -A INPUT -p tcp -m tcp --dport 80 -m string --string "/lalala/page.html" --algo kmp -j DROP

Nginx на некоторых сайтах начинает то 500ю ошибку отдавать

А зачем ты это правило всем доменам добавляешь? Добавь только для нужного. Хотя эти правила не могут вызвать 500 ошибку, поэтому читай ниже.

В логах что-то типа:
Too many open files

Эта ошибка не имеет отношения к тому правилу, что я дал.
Читай http://arm1.ru/blog/oshibka-nginx-too-many-open-files

Для начала worker_rlimit_nofile 16384 в конфиг nginx, если не поможет - правь лимиты, как описано по той ссылке.

Добавь только для нужного.

В логах запрос идёт в виде:

GET /lalala/page.html

http://domain.com/lalala/page.html

worker_rlimit_nofile 16384

Это я уже поставил.

Пока вроде работает, буду дальше смотреть логи, пока чисто всё.

В логах запрос идёт в виде:

Ко всем вхостам что ли?

Похоже. То что я написал постом выше работает уже час без ошибок.

Похоже

Скорее всего - глупости. Назначь вхостам по отдельному логу и убедись сам.

То что я написал постом выше работает уже час без ошибок.

Помоему, это костыль, т.к. твою задачу предназначен решать именно фронтенд (иначе зачем он нужен?).

Что бы это значило? Опасно ли это (я думаю что нет)?

Это говорит что кто-то попросил эту страницу и получил в ответ статус 403. Ничего опасного нет. Решение с iptables это еще тот костыль

Можно ли сделать так, чтобы это не мозолило глаза в логах?

location /lalala/page.html {
    access_log  off;
}

А зачем смотреть в лог глазами? Там еще не такое бывает

Вот пример лога:

213.183.27.144 - - [18/May/2014:19:52:19 +0400] "GET /zakony/item/3-%D0%BE-%D0%B4%D0%B5%D1%8F%D1%82%D0%B5%D0%BB%D1%8C%D0%BD%D0%BE%D1%81%D1%82%D0%B8-%D0%BF%D0%BE-%D0%B2%D0%B7%D1%8B%D1%81%D0%BA%D0%B0%D0%BD%D0%B8%D1%8E-%D0%BF%D1%80%D0%BE%D1%81%D1%80%D0%BE%D1%87%D0%B5%D0%BD%D0%BD%D0%BE%D0%B9-%D0%B7%D0%B0%D0%B4%D0%BE%D0%BB%D0%B6%D0%B5%D0%BD%D0%BD%D0%BE%D1%81%D1%82%D0%B8/3-%D0%BE-%D0%B4%D0%B5%D1%8F%D1%82%D0%B5%D0%BB%D1%8C%D0%BD%D0%BE%D1%81%D1%82%D0%B8-%D0%BF%D0%BE-%D0%B2%D0%B7%D1%8B%D1%81%D0%BA%D0%B0%D0%BD%D0%B8%D1%8E-%D0%BF%D1%80%D0%BE%D1%81%D1%80%D0%BE%D1%87%D0%B5%D0%BD%D0%BD%D0%BE%D0%B9-%D0%B7%D0%B0%D0%B4%D0%BE%D0%BB%D0%B6%D0%B5%D0%BD%D0%BD%D0%BE%D1%81%D1%82%D0%B8.html?start=644 HTTP/1.1" 200 9372 "-" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/32.0.1700.102 YaBrowser/14.2.1700.12403 Safari/537.36"

При добавлении:

location /zakony/item/3-*.html {
access_log off;
}

Куда добавил то в конфиг?

В /etc/nginx/nginx.conf

server {
server_name example.com
...
location /zakony/item/3-*.html {
access_log off;
}
}

http://www.nginxtips.com/nginx-location-directive/

У тебя ошибка, надо наверное так (могу ошибаться, слегка нетрезв и не помню nginx регекспы)

location ~* /zakony/item/3-.*.html$

Вот скажи ты в документации на location хоть в одном месте видишь звездочки?

Ты что всё наугад настраиваешь?

Документация: http://nginx.org/ru/docs/http/ngx_http_core_module.html#location

Вот скажи ты в документации на location хоть в одном месте видишь звездочки?

Да.

Пробовал:

location ~* /zakony/item/3-*.html$

location ~* /zakony/item/3-*.html$

Точку перед звездочкой забыл. Ну и nginx рестартить/релоадить не забываешь, разумеется?

 location ~ ^/(wp-admin|wp-login\.php) {
                        deny all;
                }

Кусок из моего рабочего nginx конфига, например. Вобщем учи регекспы, или жди кого-то, кто напишет его за тебя.

А для чего точка перед звёздочкой нужна? Я этого не понял, вроде она там не нужна. nginx рестарчу.

fail2ban натрави на логи nginx'а.

Заранее уточню, что могу ошибаться, но все же: точка - любой символ, * - ноль или больше повторений паттерна.

Точно не помню, как работают регекспы в nginx, но если точку не поставить - у тебя будут искаться дефисы. Если точку поставишь - любое количество любых символов.

Проверил пхп регулярками
/zakony/item/3-.*.html - работает
/zakony/item/3-*.html - не работает

Спасибо. Оно.

location ~* /zakony/item/3-.*.html {
	access_log off;
	error_log off;
}