Job queue

Misschien is Gearman wat voor je? Ik gebruik het overigens niet.

toevoeging op 2 juli 2014, 1926:
Overigens kun je cronjobs vaker per seconde laten uitvoeren, en die zijn ook synchroon.
Dus als je telkens een cronjob om de 15 seconden uit wil voeren dan kan dat gewoon.

Gearman ziet er goed uit, ik ga er eens mee spelen.

Zelfs al zou de cron om de seconde draaien, het blijft lastig om dat werkend te krijgen.

Stel er komen 6 tasks per seconde in Redis te staan, 6 * 500ms = 3000 ms (3 sec) dan zou de tweede cronjob ook die tasks erbij pakken die cronjob 1 al geselecteerd heeft. Je kan natuurlijk de status op working o.i.d. zetten zodat cron 2 ze niet oppakt maar dat zou wel erg omslachtig zijn t.o.v. Gearman of RabbitMQ.

Waarom geen RabbitMQ gebruiken zoals je in eerste instantie al noemde?

Ik ben verschillende methodes aan het testen. RabbitMQ is daar een van.

Zelf namelijk positieve ervaring met RabbitMQ

RabbitMQ is idd goed. Heb ook ervaring met beanstalk; maar vond RabbitMQ toch wat beter werken.

toevoeging op 5 juli 2014, 1713:
En cronjobs methode werkt wel; maar ik raad het niet aan. Iets met het heruitvinden van het wiel Er zijn heel wat goede libraries beschikbaar die met bepaalde services (o.a. RabbitMQ) kunnen werken.

Gekozen voor RabbitMQ omdat alternatieven vaak niet veel over te vinden is op Google en een groot voordeel tegenover Gearman is toch wel persistence en niet PHP afhankelijk.