How to dynamically get new records from the database?

Question

Python

Есть приложение, в котором пользователи выбирают различные опции и пишут текст, все эти действия необходимо записывать, после чего отдельной функцией проверять их на наличие необходимых значений и удалять/изменять/дополнять в зависимости от значения. Поток данных не особо большой - на пике около 10 записей в минуту. Собственно сам вопрос - какие БД умеет отдавать информацию о новых записях, или как можно получать их самостоятельно? Я так полагаю просто циклом for бесконечно прогонять по всем записям - глупо, или?

Answer 1

PostgreSQL has a Pub/Sub mechanism. But usually such tasks are solved by organizing an event bus on some message broker, such as Apache Kafka or RabbitMQ.

Answer 2

I would do with MQ

Answer 3

I would use Celery for such tasks. when a user changes a record, the task with the record id parameter is triggered. and post-processing is performed according to the task ID. and the database, as usual, just does its job