📎 Webclip
Codificar vídeo com filas de trabalho MongoDB
O texto apresenta filas de trabalho como forma de separar a criação da tarefa da sua execução, para que aplicações web respondam ao usuário sem esperar por processos longos. Compara essa abordagem com RDBMS, Redis e intermediários de mensagem, e destaca o MongoDB pela capacidade de guardar dados aninhados e gerenciar tarefas com critérios arbitrários.
Fichamento#
- Filas de trabalho separam a descoberta ou criação de uma tarefa da execução real da tarefa.
- Essa separação é útil porque tarefas longas saem do ciclo solicitação-resposta e o usuário recebe feedback imediato.
- O texto diz que um RDBMS pode ser uma opção simples, mas tende a ter desempenho inferior nesse cenário.
- O Redis é apresentado como uma alternativa popular, mas com suporte limitado a primitivas simples e pouca flexibilidade para gerenciar itens na fila.
- Sistemas de mensagens como Apache ActiveMQ e RabbitMQ são citados como rápidos e escaláveis, mas voltados a mensagens simples.
- O MongoDB é descrito como adequado para filas com dados aninhados complexos, sem esquema e com recursos de consulta, atualização e exclusão mais ricos.
- O exemplo usa várias câmeras de segurança em sites remotos, coleta fotos em arquivos compactados e as codifica em vídeo em um local central.
- O monitor.rb usa rb-inotify para observar o diretório de entrada e inserir na coleção do MongoDB registros com caminho, tamanho, tipo de arquivo e estado da tarefa.
- O queue_runner.rb usa find_and_modify para pegar uma tarefa por vez, marcar in_progress e evitar que outros processos trabalhem no mesmo item.
- Quando encontra um registro, o processo chama encode_zip_file.rb, salva o caminho do vídeo gerado e registra informações do codificador no documento.
- O script encode_zip_file.rb descompacta as imagens, reorganiza os nomes dos arquivos para o padrão esperado pelo FFmpeg e então codifica o vídeo com libtheora.
- O texto conclui que filas de trabalho orientadas a MongoDB são uma abordagem eficiente, flexível e escalável para filas grandes.
