Descrição
Fornece estruturas de fila apoiadas em disco para aplicações Python. Ajuda crawlers, workers e ferramentas de processamento de dados a manter itens pendentes entre reinicializações em vez de guardar toda fila apenas na memória.
Filas persistentes podem conter URLs, caminhos de arquivo, trabalhos ou dados de usuário. Planeje limpeza, bloqueio e limites de armazenamento antes de usar em fluxos de longa duração.