#!/bin/bash
#
# Copyright (c) 2003 Stefan Moeding <s.moeding@setuid.de>
# All rights reserved.
#
# Redistribution and use in source and binary forms, with or without
# modification, are permitted provided that the following conditions
# are met:
# 1. Redistributions of source code must retain the above copyright
#    notice, this list of conditions and the following disclaimer.
# 2. Redistributions in binary form must reproduce the above copyright
#    notice, this list of conditions and the following disclaimer in the
#    documentation and/or other materials provided with the distribution.
#
# THIS SOFTWARE IS PROVIDED BY THE AUTHOR AND CONTRIBUTORS ``AS IS'' AND
# ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
# IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
# ARE DISCLAIMED.  IN NO EVENT SHALL THE AUTHOR OR CONTRIBUTORS BE LIABLE
# FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
# DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
# OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
# HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
# LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
# OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
# SUCH DAMAGE.
#
#       $Id$
#


source /usr/local/lib/hostsharing/pac
source /root/etc/config

umask 022

#
# Datum von gestern für Suche und Ausgabe merken
#
REGEXP=`date --date=yesterday +"^%b %e"`
DATOUT=`date --date=yesterday +"%Y-%m-%d"`
DATFIL=`date --date=yesterday +"%Y-%m"`

LOGNAME=traffic-mail-${DATFIL}.log


#
# Temporäres Directory zur Ablage der einzelnen Logs pro Paket
#
TMPDIR=`mktemp -d /tmp/split-maillog-XXXXXX`
if [ $? -ne 0 ]; then
  echo 2>& "$0: Error creating temporary directory"
  exit 1
fi


#
# Einträge von gestern filtern, damit das Filtern für einzelne Pakete
# nicht über das komplette Log laufen muß. Das alte Log mail.log.0 wird
# immer mit ausgewertet, damit bei einem Logswitch am Tag trotzdem der
# komplette Tag gezählt wird.
#
grep -h "${REGEXP}" /var/log/mail.log-`date +"%Y%m%d"` /var/log/mail.log >${TMPDIR}/mail.log


for PAC in `pacs_by_name '*'`; do
  #
  # Log für das entsprechende Paket erzeugen. Hier werden erstmal nur
  # die Einträge für POP3/IMAP und die jeweiligen SSL-Protokolle
  # gefiltert. Dies ist einfach, da im Logfile der sich anmeldende User
  # vermerkt wird und aus dem Usernamen auch der Paketname extrahiert
  # werden kann.
  #
  # FIXME: hier müßten auch die Einträge für SMTP gefiltert werden.
  #
  REGEXP_DOVECOT=" dovecot: ((.* user=<${PAC}(-[^ >]+)?>,)|((IMAP|POP3)\(${PAC}(-[^ \)]+)?\):))"
  REGEXP_POSTFIX=" postfix/[a-z]+\[[0-9]+\]: .* (sasl_username=${PAC}(-[^ @]+)?@)|((from|to)=<${PAC}(-[^ @]+)?@)"
  REGEXP="(${REGEXP_POSTFIX})|(${REGEXP_DOVECOT})"
  egrep "${REGEXP}" ${TMPDIR}/mail.log >${TMPDIR}/${PAC}.log
  #
  # POP3 & IMAP
  #
  # Für den Traffic werden nur die nicht-lokalen Zugriffe gezählt. Per
  # sed werden danach die wesentlichen Felder (Username, Bytes Header,
  # Bytes Message) gefiltert und der Rest gelöscht.  Awk wandelt den
  # Usernamen in den Paketnamen um und summiert die Menge auf. Für den
  # Auf- und Abbau der Verbindung werde pauschal 1KB pro Verbindung
  # gezählt. Die Ausgabe wird als CSV-Datei mit Semikolon als Trenner
  # und den Werten (Datum, Paket, MB) erzeugt.
  #
  grep -v '127.0.0.1' ${TMPDIR}/${PAC}.log |
  sed '
s/^.* user=//;
s/headers=/top=/;
s/body=/retr=/;
s/, ip=.*, top=/ /;
s/, retr=/ /' |
  gawk -v datum=${DATOUT} '
NF==3 {
  pac=$1;
  sub(/-.*$/, "", pac);
  conn[pac]++;
  byte[pac] += 1.15 * ($2 + $3 + 1500); # 1.5KB Overhead pro Connection
}
END {
  for(pac in conn) {
    printf "%s;%s;%.3f\n", datum, pac, (byte[pac] / 1048576)
  }
}' >${TMPDIR}/${PAC}.traffic


  if [ -d /home/pacs/${PAC}/var ]; then
    #
    # Paketspezifische Config auslesen.
    #
    WANTLOG=`get-conf-parameter --pac=${PAC} --parameter=mail_log_generate`
    test "$?" -ne "0" && WANTLOG="no"

    case "${WANTLOG}" in
      [Yy][Ee][Ss])
	#
	# Paket soll Maillogs bekommen.
	# Logfile im temporären Verzeichnis komprimieren und per
	# secat in das Verzeichnis des Paketes schieben.
	#
	TARGET=`date +"mail-%Y%m%d-%H%M.log"`
        gzip --fast --stdout <${TMPDIR}/${PAC}.log |
	secat --user=${PAC} --umask=077 --output=/home/pacs/${PAC}/var/${TARGET}.gz
        ;;
      *)
        ;;
    esac
  fi
done


#
# Trafficstatistik für die Abrechnung aktualisieren
#
if [ -r /var/log/${LOGNAME} ]; then
  # Aktuelles Datum im existierenden Log ignorieren, damit das
  # Script auch ein zweites Mal am Tag gestartet werden kann
  grep -v "^${DATOUT}" /var/log/${LOGNAME} >${TMPDIR}/log
else
  # Neues Log mit Header anlegen
  echo "# Datum     Pac   MB" >${TMPDIR}/log
fi

if ls ${TMPDIR}/*.traffic >/dev/null 2>/dev/null; then
  sort ${TMPDIR}/*.traffic >>${TMPDIR}/log
fi

install --owner=root --group=adm --mode=640 ${TMPDIR}/log /var/log/${LOGNAME}

rm -rf ${TMPDIR}

exit 0
