Poderíamos simplesmente ir somando o total
... se não tivéssemos várias máquinas processando.
Poderíamos mandar todos os dados para um banco de dados e ir marcando os registros como processados
... se isso não significasse que o banco cresceria infinitamente.
... a não ser que registros antigos fosse apagados.
... que é o que serviços de mensageria fazem.