Celery logs through syslog

Traducción del original en inglés. Léela en: CatalàEnglish

Los logs de Celery están coloreados por defecto; la primera gran idea es desactivar los logs con color. Es tan fácil como poner 'CELERYD_LOG_COLOR' a 'False' en 'celery.conf'. El código podría ser algo como esto:

celery.conf.update('CELERYD_LOG_COLOR' = False)

En segundo lugar, necesitamos una función donde configuramos un nuevo handler y otros ajustes en el sistema de logging de Celery. Por ejemplo, el código podría ser:

from __future__ import absolute_import
from logging import BASIC_FORMAT, Formatter
from logging.handlers import SysLogHandler
from celery.log import redirect_stdouts_to_logger

def setup_log(**args):
    # redirect stdout and stderr to logger
    redirect_stdouts_to_logger(args['logger'])
    # logs to local syslog
    hl = SysLogHandler('/dev/log')
    # setting log level
    hl.setLevel(args['loglevel'])
    # setting log format
    formatter = Formatter(BASIC_FORMAT)
    hl.setFormatter(formatter)
    # add new handler to logger
    args['logger'].addHandler(hl)

Prestad atención a 'redirect_stdouts_to_logger': se utiliza para enviar todas las salidas, como los print o cualquier otra cosa, al syslog.

En tercer lugar, queremos utilizar esos ajustes en nuestras tareas de Celery, así que tenemos que conectar el código de 'setup_log' a algunas señales de Celery. Esas señales se lanzan cuando se configuran 'task_logger' y 'logger'. Para conectar las señales:

from celery.signals import after_setup_task_logger, after_setup_logger

after_setup_logger.connect(setup_log)
after_setup_task_logger.connect(setup_log)

En cuarto lugar, tenemos que obtener el 'logger'; podemos tener más de uno si nos interesan registros con contexto de tarea o sin él. Por ejemplo:

logger = get_logger('just_a_name_for_internal_use')
logger_with_task_context = get_task_logger('name_of_the_task_to_be_recorded_in_logs')

Finalmente, solo tenemos que utilizar esos loggers con los métodos habituales DEBUG, INFO, WARN, ERROR y CRITICAL:

@celery.task
def the_task():
    logger.info('this is a message without task context')
    logger_with_task_context.debug('this record will have the prefix "name_of_the_task_to_be_recorded_in_logs" in syslog')