Единичное тестирование с использованием джанго-сельдерея?

Я пытаюсь разработать методологию тестирования нашего django-celery. Я прочитал примечания в документации, но это не дало мне хорошего представления о том, что на самом деле делать. Я не беспокоюсь о тестировании задач в реальных демонах, просто в функциональности кода my. В основном мне интересно:

Как мы можем обойти task.delay() во время теста (я пробовал настройку CELERY_ALWAYS_EAGER = True, но это не имело значения)?
Как мы используем рекомендуемые тестовые параметры (если это лучший способ) без фактического изменения наших настроек .py?
Можем ли мы по-прежнему использовать manage.py test или нам нужно использовать пользовательский бегун?

В целом любые подсказки или советы для тестирования с сельдереем будут очень полезны.

Ответ 1

Попробуйте установить:

BROKER_BACKEND = 'memory'

(Спасибо asksol комментарий.)

Ответ 2

Мне нравится использовать декоратор override_settings на тестах, которые нуждаются в результатах сельдерея.

from django.test import TestCase
from django.test.utils import override_settings
from myapp.tasks import mytask

class AddTestCase(TestCase):

    @override_settings(CELERY_EAGER_PROPAGATES_EXCEPTIONS=True,
                       CELERY_ALWAYS_EAGER=True,
                       BROKER_BACKEND='memory')
    def test_mytask(self):
        result = mytask.delay()
        self.assertTrue(result.successful())

Если вы хотите применить это ко всем тестам, вы можете использовать тест-драйв сельдерея, как описано в http://docs.celeryproject.org/en/2.5/django/unit-testing.html, который в основном устанавливает эти же настройки, кроме (BROKER_BACKEND = 'memory').

В настройках:

TEST_RUNNER = 'djcelery.contrib.test_runner.CeleryTestSuiteRunner'

Посмотрите на источник для CeleryTestSuiteRunner, и это довольно ясно, что происходит.

Ответ 3

Здесь выдержка из моего базового класса тестирования, который заглушает метод apply_async и записывает его на вызовы (включая Task.delay.) Это немного грубо, но мне удалось удовлетворить мои потребности за последние несколько лет месяцев я его использовал.

from django.test import TestCase
from celery.task.base import Task
# For recent versions, Task has been moved to celery.task.app:
# from celery.app.task import Task
# See http://docs.celeryproject.org/en/latest/reference/celery.app.task.html

class CeleryTestCaseBase(TestCase):

    def setUp(self):
        super(CeleryTestCaseBase, self).setUp()
        self.applied_tasks = []

        self.task_apply_async_orig = Task.apply_async

        @classmethod
        def new_apply_async(task_class, args=None, kwargs=None, **options):
            self.handle_apply_async(task_class, args, kwargs, **options)

        # monkey patch the regular apply_sync with our method
        Task.apply_async = new_apply_async

    def tearDown(self):
        super(CeleryTestCaseBase, self).tearDown()

        # Reset the monkey patch to the original method
        Task.apply_async = self.task_apply_async_orig

    def handle_apply_async(self, task_class, args=None, kwargs=None, **options):
        self.applied_tasks.append((task_class, tuple(args), kwargs))

    def assert_task_sent(self, task_class, *args, **kwargs):
        was_sent = any(task_class == task[0] and args == task[1] and kwargs == task[2]
                       for task in self.applied_tasks)
        self.assertTrue(was_sent, 'Task not called w/class %s and args %s' % (task_class, args))

    def assert_task_not_sent(self, task_class):
        was_sent = any(task_class == task[0] for task in self.applied_tasks)
        self.assertFalse(was_sent, 'Task was not expected to be called, but was.  Applied tasks: %s' %                 self.applied_tasks)

Вот пример "с верхней части головы", как вы его используете в своих тестовых случаях:

mymodule.py

from my_tasks import SomeTask

def run_some_task(should_run):
    if should_run:
        SomeTask.delay(1, some_kwarg=2)

test_mymodule.py

class RunSomeTaskTest(CeleryTestCaseBase):
    def test_should_run(self):
        run_some_task(should_run=True)
        self.assert_task_sent(SomeTask, 1, some_kwarg=2)

    def test_should_not_run(self):
        run_some_task(should_run=False)
        self.assert_task_not_sent(SomeTask)

Ответ 4

поскольку я все еще вижу, что это происходит в результатах поиска, переопределяют параметры с помощью

TEST_RUNNER = 'djcelery.contrib.test_runner.CeleryTestSuiteRunner'

работал у меня по Документы по сельдеру

Ответ 5

Для всех, кто попадет сюда в 2019 году: ознакомьтесь с этой статьей, в которой рассматриваются различные стратегии, включая синхронный вызов задач.

Ответ 6

Это то что я сделал

Внутри myapp.tasks.py у меня есть:

from celery import shared_task

@shared_task()
def add(a, b):
    return a + b

Внутри myapp.test_tasks.py у меня есть:

from django.test import TestCase, override_settings
from myapp.tasks import add


class TasksTestCase(TestCase):

    def setUp(self):
        ...

    @override_settings(CELERY_TASK_ALWAYS_EAGER=True,CELERY_TASK_EAGER_PROPOGATES=True)
    def test_create_sections(self):
        result= add.delay(1,2)
        assert result.successful() == True
        assert result.get() == 3