Re: запретить всех кроме ботов яндекса

[ulrith]

Sergey Smitienko Wrote:
-------------------------------------------------------
> Сделать location /robots.txt с allow from all.

Вот тут-то и загвоздка. Вот так у меня сейчас выглядит конфиг для этого
сайта:

<code>	server {
                server_name site.ru www.site.ru;

                deny all;
                listen xxx.xxx.xxx.xxx;
                charset CP1251;
                set $root_path /var/www/site/data/www/site.ru;
                location ~*
^.+\.(jpg|jpeg|gif|png|svg|js|css|mp3|ogg|mpe?g|avi|zip|gz|bz2?|rar|swf)$ {
                        root $root_path;
                        access_log /var/www/nginx-logs/site isp;
                        access_log /var/www/httpd-logs/site.ru.access.log ;
                        error_page 404 = @fallback;
                }
                location / {
                        proxy_pass http://xxx.xxx.xxx.xxx:81;
                        proxy_redirect http://xxx.xxx.xxx.xxx:81/ /;
                        proxy_set_header Host $host;
                        proxy_set_header X-Forwarded-For
$proxy_add_x_forwarded_for;
                        proxy_set_header X-Forwarded-Proto $scheme;
                        proxy_set_header X-Real-IP $remote_addr;
                }
                location ~* ^/(webstat|awstats|webmail|myadmin|pgadmin)/ {
                        proxy_pass http://xxx.xxx.xxx.xxx:81;
                        proxy_redirect http://xxx.xxx.xxx.xxx:81/ /;
                        proxy_set_header Host $host;
                        proxy_set_header X-Forwarded-For
$proxy_add_x_forwarded_for;
                        proxy_set_header X-Forwarded-Proto $scheme;
                        proxy_set_header X-Real-IP $remote_addr;
                }
                location @fallback {
                        proxy_pass http://xxx.xxx.xxx.xxx:81;
                        proxy_set_header Host $host;
                        proxy_set_header X-Forwarded-For
$proxy_add_x_forwarded_for;
                        proxy_set_header X-Forwarded-Proto $scheme;
                        proxy_set_header X-Real-IP $remote_addr;
                }
                include /usr/local/ispmgr/etc/nginx.inc;
        }</code>

Вот я и не соображу никак как мне изменить это чтобы достичь моей цели.

Posted at Nginx Forum: http://forum.nginx.org/read.php?21,243975,243979#msg-243979