Отчет за пользование интрнетом

Хотелось бы узнать есть ли еще у кого на работе такое как отчет за пользование интернетом? И кто как решает эти вопросы. Просто интересно, как объяснить позиции, которые похожи на счетчики, я ж на эти сайты не заходил сам, в общем отчитываться нужно до байта, такое у нас руководство...

Rogoff [105592]: я ж на эти сайты не заходил сам- у каждого пользователя свой пароль?

Rogoff [105592]:
Старый анек:
Летят Чапаев с Петькой на самолете. Чапаев пилот, Петька - штурман.
- Петька, приборы!
- 200!
- Че за "двести"???
- А че за "приборы"???

К чему я это - ваш вопрос слишком неконкретный, вы не указали как у вас организован доступ, как организован учет.
И я сильно сомневаюсь, что кто-то здесь владеет телепатией.

FreeBSD:trafd+MySQL

Rogoff [105592]: ты проще через телефон свой сотовый в интернет ходи и пиши что инетом не пользуешься в сто раз себе жизнь упростишь!
можешь поставить прогу типа winroute и печатать логи из неё на 50 листов мелкими буквами с двух сторон пусть бухгалтерия изучает :)

GuNeR [105603]: это если на фрюхе организован выход =)
Rogoff [105592]: есть ли админы у вас, каким образом организован выход в инет, есть ли пользователь/пароль для пользования услуги? все эти вопросы желательно знать! или же поставить считалку траффика на свой комп...

Rogoff [105592]: у нас авторизация каждого пользователя и лимит на месяц. Если не привышаешь лимит, то как правило и не смотрят куда ходил. По факту превышения принимаются меры. Отлучения от инета или было возмещение суммы предприятию. Если особо любопытно то просматривают ТОП20 сайтов.
При желании возможно запросить все странички по которым бегал тот или иной пользователь.

yumiha [105598]: у каждого пользователя свой пароль? а почему нет? Если пользоваться исой то можно юзать и доменную авторизацию.

v-amigo [105607]: А бухгалтерии не надо изучать - вычтет из зарплаты по коммерческим расценкам и больше подобных хитростей применять не захочется.

StarWind [105616]: Если - да, то кто заходит под его паролем? Кому давал пароль?

yumiha [105619]: не понял? Если кто-то заходил под паролем пользователем, то сам дал. Нарушение приказа о безопасности. Мало того, что сам виноват, так еще и второе нарушение.

StarWind [105620]: Так об этом и говорю: если сам не ходил, то кому-то сказал пароль - и какие теперь вопросы по отчетности?

Надо для начала уточнить, что за сайты. Возможно, что никто пароль ни у кого не крал, а просто это всякие банеры показывались.

Подождем автора темы :) а то тут уже оттенки криминала появились :)

так, спецы появились :) будем общаться.
Схема такая:
Сервер на линуксе подключен к инету, через него идет весь инет (сквид). Сквид как-то хитро (криво) настроен, а я в этом вопросе не спец, статистику показывает не всю (часть показывает, часть нет и еще как-то хитро, дальше объясню).
Для сбора альтернативной статистики поставил вингейт + проксиинспектор для него на своем компе, а вингейт направил на сервер. Пользователи выходят только те, у кого настроены браузеры на вингейт (авторизации на данный момент нет). Теперь по кривости статистики сервер. Т.к. мой комп собирают всю статистику, то по идее сервер тоже должен приблизительно такой же объем показывать, а он показывает в раз меньше. Из этого сделал вывод что сквид на сервере настроен очень хитро (криво), точно сказать не могу - не спец я в линуксе.

При выводе отчетов в проксиинспекторе ставлю галку показывать сайты, трафик по которым менее 1 % (для объемности отчетов), но отчеты максимум вышли на 4 страницы. Теперь есть проблема как обяснять трафик, который есть реклама, счетчики и пр. что я пока не знаю. На самом деле пользователь не ходит туда куда ссылаются все эти вещи...

Rogoff [105639]: не забывай еще про широковещательный трафик!

Rogoff: у нас работает система на сквиде, все показывает. Авторизацию не стали прикручивать из-за кривизны samba. Учет идет по IP-адресам.
По левым адресам могу следующее сказать, что много банеров на странице обращаются на разные адреса, чтобы найти куда - необходимо коды страниц смотреть. Также на сквид прикрутили резалку банеров и настроили всякие запреты на порно и др. ресурсы.

v-amigo [105646]: широковещательный трафик через http-прокси не ходит:)

Так как сквид кэширующий прокси, то внешний трафик на 20% может меньше быть.

bjohn [105649]: а резалка банеров на каком этапе режет? мне нафиг она не нужна если она режет локально на сервере скачав все банеры, но не показав пользователю

bjohn [105652]: На самом деле даже альтернативный трафик, который я собираю вингейтом, оказывается меньше того, который нам дает провайдер в 2 раза. Еще нюанс, у нас стоит почтовый сервер постфикс. Видимо все остальное есть почтовый трафик? Руки никак не дойдут поставить майл аксес монитор для постфикса. Точнее не успел я найти где хранятся логи постфикса и кончилось время пробной версии майл аксес монитора...

А где есть информация о том, из чего складывается интернет трафик, я бы нашему главбуху дал на изучение (она у нас главный цензор и контролер всея организации), чтобы не донимала почему у нас столько, а провайдера столько (типа они нас дурят и т.д. и т.п.)

Rogoff [105669]: а админ не может вам сказать, что куда ходит?

нафиг такую работу где еще надо отчитываться )))

creat [105719]: ага по порносайтам полазил, потом рассказывай, что стресс снимал:)

Rogoff [105669]: банеры режутся до скачивания

хехе ага порнуха хорошо стимулирует ))

creat [105719]: Действительно! И водителю не надо отчитываться: куда ездил, зачем - раз ездил, значит надо. И подотчетному лицу не надо отчитываться куда потратил деньги...
А зарплату - дай!

Rogoff [105639]: надо сразу заметить, что сквид сам по себе вообще статистику никакую не показывает и даже не собирает. Он просто пишет запросы в лог, по которому потом можно посчитать трафик, для этого есть множество разных утилит.

Логи постфикса обычно лежат в /var/log/mail/

А где есть информация о том, из чего складывается интернет трафик - это написано в договоре с провайдером. И там обычно сказано, что складывается из всего входящего , т.е. даже если кто-нибудь где-нибудь в Голландии настроит на вас флудилку, то вам это тоже пойдет в счет.
Как экономно пользоваться интернетом это отдельный вопрос, по нему могу немного пояснить, но лучше через почту mpenzin@gmail.com или icq:3861496

Антон, стучи завтра в асю, посмотрю на твои настройки.

bjohn [105649]: к сквиду отлично ldap авторизация через Самбу прикручивается, можно сказать - штатно.

Lost [105750]: мы прикручивали доменную аутентификацию, были проблемы с подвисанием сервисов самбы, что приводило к отказу сквида.

bjohn [105861]: подвисания самбы - это что-то странное, так-то оно обычно стабильно работает.

сквида(прозрачная)+лайтсквид+режик+апач все это вываливается просто для того что-бы видеть кто куда серфил по 80 порту, все остльное идет через трафд и валится мускул
авторизацию делал просто на самбе без всяких лапд, ща ее не юзаю, просто режу по ip

еще практический вопрос и возможно даже денежный. Нужно составлять такие отчеты как за телефонные переговоры %) Это серьезное требование нашего главбуха. Пусть экономия на инете выльется в расходы на бумагу %) Если есть уже готовые проги, которые могут по дням и часам по каждому ip адресу выдавать отчет, то буду рад узнать. Обычно все это дело суммируется за весь месяц, а сидеть и делать отчеты за каждый день по всем нет никакого желания...

Народ, подскажите, а на какой субд у сквида база данных сделана? и какой приблудой в нее залезть?

Очень надо :-)

MSpirit [105964]: это чтобы логи просмотреть? Если да, то я ставил прогу internet access monitor for squid и скармливал ей логи. В настройках можно даже указать папку логов чтобы прога сама их оттуда брала, а можно их с сервера скачать на свой комп

MSpirit [105964]: у Сквида база данных сделана по технологии plaintext, где основным методом запроса является grep.

maxp [106033]: т.е. особо в нее не залезешь? Интересно было бы лимитик на инет подправить :-)

Rogoff [105961]: Если готовы покупать прогу для подобного, а точнее довольно мощный программный комплекс, то можем поговорить. Есть софт, базируется на БД Оракл, имеется клиент для сбора отчетов, ввода лимитов и прочей требухи. Имеется генератор веб-страниц. В общем довольно много всего имеется на эту тему, что довольно успешно работает. Но подробности лучше аськой.

Ну или лицензионный биллинг покупаем

MSpirit [106153]: как раз наоборот, правится штатным текстовым редактором, если админские права есть, конечно.

А еще есть очень удобная и ОЧЕНЬ недорогая программа "Траффик Инспектор".
Прокси, нат + учет трафика, веб-статистика, кэширование, биллинг.

Работает под виндой, стоит неприлично мало, проста в настройке. Пробный период с полным функционалом - месяц, по просьбе продляется еще на две недели.

SteelWind [106212]: гы, у нас база занимает 500 гигов... хочу посмотреть на недорогу программу способную это переваривать в адекватное время и выдавать отчеты.

StarWind [106217]: 500 гигов база чего?
И что значит "переваривать это в адекватное время"?
А на каком железе это все крутится?

а "Траффик Инспектор" - удобное решение для организации доступа в интернет для небольших локальных сетей.

SteelWind [106294]: логов, инетовских ну и немного собирает с серверов. база оракловая. Записей конкретно в логах интернета 280,5 миллионов. А адекватное время... сколько вы готовы ждать результата запроса, отчета?

Для малых... может быть.

с программами проблем нет, есть проблема в следующем:

строки из отчета:
hit5.hotlog.ru
img.mail.ru
hit3.hotlog.ru
smarticon.geotrust.com
bs.yandex.ru
counter.rambler.ru
shared.live.com
u6071.52.spylog.com
baikalvisa.ru
hit2.hotlog.ru
u3979.94.spylog.com
crl.microsoft.com

что из этих строк что? интуитивно понятно, что часть это счетчики с страниц (u3979.94.spylog.com, counter.rambler.ru, hit2.hotlog.ru), а как объяснить такое как baikalvisa.ru - по размеру трафика в отчете это явно не посещение страницы, значит какой-то баннер или прочая подобная лабуда? или вот это img.mail.ru? там хранятся изображения для mail.ru ?

Rogoff [107360]: почему baikalvisa.ru это явно не посещение страницы?
Было бы неплохо еще и объемы указать, если смотреть на список счетчиков, то по ним объемы должны быть достаточно небольшие.

maxp [107363]: судя по трафику в Кб:

hit5.hotlog.ru 18
img.mail.ru 8
hit3.hotlog.ru 7
smarticon.geotrust.com 6
bs.yandex.ru 4
counter.rambler.ru 4
shared.live.com 4
u6071.52.spylog.com 3
baikalvisa.ru 2
hit2.hotlog.ru 2
u3979.94.spylog.com 2
crl.microsoft.com 1
hit4.hotlog.ru 1
index.babr.ru 1

Rogoff [107375]: если это действительно правильные цифры, то 2 кб может быть все что угодно -
начиная от редиректа или просто запроса If-Modified.

И мне не совсем понятно, что мы хотим выяснить? Вышеприведенный список не понятно каким способом посчитан, но его суммарный объем меньше 100 кб, соответственно, вся стоимость копеек десять-двадцать.

Может не отчитываться, а послать всех на... Вы - полезный для компании сотрудник! Поэтому немного развлечений и информационного обмена вам не повредит. Вам должно быть комфортно в офисе, но это не должно отражаться на показателях общего дела, результативность деятельности не должна снижаться!

Traveller [107581]: вот все бы руководители так думали, а руководителя не пошлешь - сказано - в своих целях инетом польоваться только дома, а не на работе. Так теперь за каждую строчку в отчете надо отчитаться, неважно сколько за эту строчку копеек натикало...

maxp [107398]: так вот за эти строчки надо отчитаться, а я не знаю как это грамотно и главное правильно описать. Пугают что пригласят специалистов, которые все распишут за 5 минут :) вроде на это копейки идет, а ты возьми и отчитайся. Объяснения не помогают, да и что можно объяснить, если человек не видит разницы между сайтом и элетронной почтой...