История изменений

Для больших данных надо Go/C использовать. Python и многопоточность - это тупо костыли, и так... «чтобы было», не далеко от Си ушло, несмотря на то, что, казалось бы, Питон. Я бы из Python ставил задачу в очередь, и обрабатывал бы на Go или Сишке. Первое предпочтительное. Но на сишке можно нативный python module написать :)

Так что Python - RQ/Nats/Celery/ZeroMQ - Go engine

https://github.com/rq/rq

http://www.celeryproject.org/

https://nats-io.github.io/docs/

Для больших данных надо Go/C использовать. Python и многопоточность - это тупо костыли, и так... «чтобы было», не далеко от Си ушло, несмотря на то, что, казалось бы, Питон. Я бы из Python ставил задачу в очередь, и обрабатывал бы на Go или Сишке. Первое предпочтительное. Но на сишке можно нативный python module написать :)

Так что Python - RQ/Nats/ZeroMQ - Go engine

https://github.com/rq/rq https://nats-io.github.io/docs/