Implementacja kolejki zadań dla Pythona

Question

Czy znasz/używasz dowolnej kolejki zadań rozproszonych dla Pythona? Czy możesz udostępniać linki lub narzędzia?

Answer 1

Oprócz wieloprocesorowe istnieje również projekt Celery, jeśli używasz Django.

Answer 2

Prawdopodobnie chcesz przyjrzeć się kolejce multiprocessingu. Zawarty w Pythonie 2.6, pobierz go na PyPI dla wcześniejszych wersji Pythona.

Dokumentacja standardowa biblioteka: http://docs.python.org/library/multiprocessing.html Na PyPI: http://pypi.python.org/pypi/multiprocessing

Answer 3

Jest też "bucker" Sylvain Hellegouarch które można znaleźć tutaj:

• http://trac.defuze.org/wiki/bucker

Opisuje się tak:

• bucker to system kolejek że podpory wiele pamięci dla kolejki (memcached, Amazon SQS na razie) i jest sterowany przez komunikaty XML wysyłane przez połączenia TCP między klientem a serwerem kolejki r.

Answer 4

Spójrz na beanstalkd

Answer 5

redqueue? Zaimplementowano go w strukturze Pythona + Tornado, posługuje się protokołem memcached i opcjonalnie jest trwały w plikach dziennika. Obecnie jest również w stanie zachowywać się podobnie jak beanstalkd, droga rezerwowa/kasowania w protokole memcache.

REDQUEUE

Answer 6

Jest to rok późno lub cokolwiek, ale to jest coś co hacked razem do kolejki procesów realizujących je wyłącznie numer X naraz. http://github.com/goosemo/job_queue

Answer 7

Pyres jest klonem resque wbudowanym w python. Resque jest używany przez Github jako kolejkę komunikatów. Oba używają Redis jako zaplecza kolejki i udostępniają internetową aplikację monitorującą.

http://binarydud.github.com/pyres/intro.html

Answer 8

Ponadto istnieje Unix „at”

o więcej informacji: człowiek w

Answer 9

Jeśli uważasz, że seler jest zbyt ciężki do swoich potrzeb, a następnie może chcesz spojrzeć na prosty rozprowadzane kolejka zadanie:

• https://github.com/rojkov/taskqueue
• http://simpletaskqueue.readthedocs.org/