Re: Хитрый учет скачиваемых по прямым ссылкам файлов (nginx + piwik)

Илья Шипицин chipitsine at gmail.com
Thu Apr 24 05:06:45 UTC 2014


можно через Lua снимать статистику (модуль сторонний, использовать его
или нет, решайте сами)

а) объявляем область памяти

    lua_shared_dict count 10M;

б) через log_by_lua делаем счетчик

            log_by_lua '
                local newval, err =
ngx.shared.count:incr(ngx.var.upstream_addr, 1)
                if not newval and err == "not found" then
                ngx.shared.count:add(ngx.var.upstream_addr, 1)
                end
            ';

}



в) через отдельный location отдаем собранную статистику

location /status {
    default_type 'text/html';


            content_by_lua '
                ngx.say("key xxx: ", ngx.shared.count:get("xxxx"))
            ';

}

по вкусу можно добавить timestamp (потому что shared memory обнулится
при рестарте). в примере ключом является upstream_addr (мы считали
обращения к бекендам при балансировке по least_conn), вам, наверное,
надо переделать на путь до файла


24 апреля 2014 г., 5:12 пользователь iprok <nginx-forum at nginx.us> написал:
> Здравствуйте!
>
> Есть сайт одной программы, на котором в частности выкладываются ее
> дистрибутивы.
> Пользователям они доступны следующими способами:
> 1) По ссылкам со страницы sitename.org/downloads/ (редактируемая авторами
> сайта html с ссылками)
> 2) Путем просмотра sitename.org/files (список файлов и папок автоматически
> генерируемый через fancyindex)
> 3) Прямые ссылки извне.
>
> Стоит задача учитывать скачивания файлов по всем трем ссылкам. Парсинг логов
> не подходит (используется piwik, а он через логи сильно меньше инфы
> получает). Поэтому выбрал способ через php скрипт с x-accel-redirect. При
> этом скачивания через пункт 1 учитываются из коробки, так что они должны
> быть исключены, чтобы избежать дублей.
>
> Посмотрите, пожалуйста, вырезку из конфигов. files.down - символическая
> ссылка на files (без этого был циклический редирект. Можно ли без нее?). Все
> ли я правильно сделал?
>
> nginx.conf:
> http {
> ...
> map $http_referer $direct_download {
>         default 1;
>         ~*sitename.org/files/.* 1;
>         ~*://sitename.org 0;
> }
> ...
> server {
> ...
> root /var/www/sitename.org/htdocs;
> ...
> location /files/ {
>                 location ~* /.*?[^/]$ { #Обрабатывает все файлы, но не
> директории, листинг которых через fancyindex (на конце uri не должен быть /
> )
>                         if ($direct_download) {
>                                 rewrite ^/files/(.*) /down.php?path=$1
> last;
>                         }
>                 }
> root /var/www/sitename.org/;
>
>                 fancyindex on;
>                 fancyindex_exact_size off;
>
>                 aio            on;
>                 directio       512;
>                 output_buffers 1 128k;
> }
> location /files.down/ {
>                 root /var/www/sitename.org/;
>
>                 aio            on;
>                 directio       512;
>                 output_buffers 1 128k;
>                 internal;
> }
>
> }}
>
> ну и down.php:
>
> <?php
> ...
> // And redirect user to internal location
> header("Content-Type: application/octet-stream");
> header("X-Accel-Redirect: /files.down/" . $path);
> ?>
>
> Заранее спасибо всем откликнувшимся.
>
> Posted at Nginx Forum: http://forum.nginx.org/read.php?21,249507,249507#msg-249507
>
> _______________________________________________
> nginx-ru mailing list
> nginx-ru at nginx.org
> http://mailman.nginx.org/mailman/listinfo/nginx-ru


Подробная информация о списке рассылки nginx-ru