Arhn - архитектура программирования

Простой подход к запуску фоновой задачи в Django

У меня есть веб-сайт Django, и на одной странице есть кнопка (или ссылка), при нажатии на которую запускается несколько длительная задача. Очевидно, я хочу запустить эту задачу как фоновую и сразу вернуть результат пользователю. Я хочу реализовать это, используя простой подход, который не потребует от меня установки и изучения совершенно новой архитектуры обмена сообщениями, такой как, например, Celery. Я не хочу использовать сельдерей! Я просто хочу использовать простой подход, который я могу настроить и запустить в течение следующих получаса или около того. Нет ли простого способа сделать это в Django без добавления (еще одного) стороннего пакета?


  • Вы можете просто заставить сервер возвращать ответ типа Request Received. Затем, если опрос или веб-сокеты не подходят, просто попросите сервер обновить значение процента завершения, возможно, каждые 10% или 25%. И предоставьте пользователю специальную область для проверки любых запущенных процессов и отображения процента выполнения. Таким образом, браузер обращается к серверу только тогда, когда пользователь переходит на страницу запущенного процесса или обновляет ее. Затем, если процесс завершен на 100%, есть ссылка на результаты. Просто некоторые идеи. 22.02.2014
  • Примечание. Сервер, обновляющий значение процента выполнения, находится только на сервере [например, значение БД]. Это может быть запрошено, если пользователь переходит на данную страницу. Также это будет зависеть от того, как ваша инфраструктура может обрабатывать одновременные соединения. Запущенный процесс может заблокироваться, поэтому вам может понадобиться изучить что-то вроде торнадо. 22.02.2014
  • Я очень сомневаюсь, что все, что вы напишете сами, будет проще, чем просто установить Celery и покончить с этим. 22.02.2014
  • Я очень сомневаюсь, что все, что вы напишете сами, будет проще, чем просто установить Celery и покончить с этим. - давайте посмотрим - я могу придумать много вещей проще, чем Сельдерей. Это отличная часть программного обеспечения, но это большой кусок кода, который может обрабатывать крупномасштабные распределенные задачи большого объема. Это требует отдельной установки хранилища ключей и значений, брокера и бог знает чего еще. Если вы просто хотите запустить фоновую задачу, я бы поискал что-то еще. 12.12.2014

Ответы:


1

Если вы хотите установить стороннюю библиотеку, но хотите что-то намного проще, чем Celery, попробуйте Redis Queue. Для этого требуется Redis, что само по себе довольно просто, но также может дать много других преимуществ.

Сам RQ имеет практически нулевую конфигурацию. Это поразительно просто.

Рекомендации:

18.11.2015
  • На данный момент этому вопросу уже много лет, но теперь я использую RQ для многих таких задач. Это действительно поразительно просто и работает как шарм. Настоятельно рекомендуется. 31.01.2019

  • 2

    Просто используйте нить.

    import threading
    
    t = threading.Thread(target=long_process,
                                args=args,
                                kwargs=kwargs)
    t.setDaemon(True)
    t.start()
    return HttpResponse()
    

    См. этот вопрос для получения более подробной информации: Может ли Django работать с несколькими потоками?

    21.02.2014
  • Я думаю, что это требует большей наглядности. Недавно я создал проект на основе Celery и RabbitMQ, хотя на самом деле мне следовало просто использовать многопоточность. Я создал минимальный пример этого здесь: github.com/nbwoodward/django-async-threading 15.11.2018

  • 3

    Взгляните на django-background-tasks — он делает именно то, что вам нужно, и не не нужно запускать какие-либо дополнительные службы, такие как RabbitMQ или Redis. Он управляет очередью задач в базе данных и имеет команду управления Django, которую вы можете запустить один раз или как задание cron.

    03.03.2016
  • Хотя эта ссылка может ответить на вопрос, лучше включить сюда основные части ответа и предоставить ссылку для справки. Ответы, содержащие только ссылки, могут стать недействительными, если связанная страница изменится. – Из обзора 04.03.2016
  • @Rao Ссылка указывает на модуль, который решает проблему, а не на описание того, как решить проблему. Я бы не знал, как еще переписать пост, может быть, у вас есть какие-то советы? 04.03.2016
  • В настоящее время этот модуль работает только с Django 1.4–1.8. 12.08.2016
  • Сегодня мы добавили более стабильную и надежную версию (1.1.6) django-background-tasks в индекс пакетов Python. Это также поддерживает последнюю лучшую версию Django. Примечания к выпуску: github.com/arteria/django-background-tasks /релизы/тег/v1.1.6 29.03.2017
  • Кто-нибудь знает, как запустить фоновое задание сразу в представлении (но не ждать его завершения) с помощью django-background-tasks? 15.05.2019
  • @konstunn это именно то, что я пытаюсь понять! Какие-либо предложения? 12.05.2020
  • @datasplice, посмотрите здесь django-background- tasks.readthedocs.io/en/latest/. Вы можете сделать task(*args, schedule=1), например, чтобы запланировать задачу через 1 секунду. Возможно, можно сделать schedule=0, но я не уверен. 05.06.2020
  • @aboutaaron По состоянию на октябрь 2020 года я использую его с Python 3.6 и Django 3.1. 25.10.2020
  • @konstunn процессы запускаются из работника задания, который опрашивает, поэтому может случиться так, что задание запустится на 5 секунд позже запланированного, 25.10.2020
  • Проблема в том, что вам нужно запустить background-tasks для запуска запланированных задач, например, в другом терминале. 06.03.2021
  • Новые материалы

    Коллекции публикаций по глубокому обучению
    Последние пару месяцев я создавал коллекции последних академических публикаций по различным подполям глубокого обучения в моем блоге https://amundtveit.com - эта публикация дает обзор 25..

    Представляем: Pepita
    Фреймворк JavaScript с открытым исходным кодом Я знаю, что недостатка в фреймворках JavaScript нет. Но я просто не мог остановиться. Я хотел написать что-то сам, со своими собственными..

    Советы по коду Laravel #2
    1-) Найти // You can specify the columns you need // in when you use the find method on a model User::find(‘id’, [‘email’,’name’]); // You can increment or decrement // a field in..

    Работа с временными рядами спутниковых изображений, часть 3 (аналитика данных)
    Анализ временных рядов спутниковых изображений для данных наблюдений за большой Землей (arXiv) Автор: Рольф Симоэс , Жильберто Камара , Жильберто Кейрос , Фелипе Соуза , Педро Р. Андраде ,..

    3 способа решить квадратное уравнение (3-й мой любимый) -
    1. Методом факторизации — 2. Используя квадратичную формулу — 3. Заполнив квадрат — Давайте поймем это, решив это простое уравнение: Мы пытаемся сделать LHS,..

    Создание VR-миров с A-Frame
    Виртуальная реальность (и дополненная реальность) стали главными модными терминами в образовательных технологиях. С недорогими VR-гарнитурами, такими как Google Cardboard , и использованием..

    Демистификация рекурсии
    КОДЕКС Демистификация рекурсии Упрощенная концепция ошеломляющей О чем весь этот шум? Рекурсия, кажется, единственная тема, от которой у каждого начинающего студента-информатика..