Periodicidade de Atualização
A capacidade de ter informações atualizadas regularmente pode ser a diferença entre se antecipar a uma tendência ou reagir a ela. Reconhecendo essa necessidade, a Looqlake oferece diversas opções para garantir que seus dados estejam sempre atualizados, alinhados com a dinâmica do seu negócio e com as particularidades da sua infraestrutura.
Abaixo, detalhamos as principais abordagens que você pode escolher de acordo com suas necessidades:
Scheduled/Agendamento: Permite definir uma programação regular para a atualização dos dados, desde uma vez por dia até a cada 30 minutos.
Webhook: Permite a sistemas externos notificar o Looqlake quando novos dados estão disponíveis ou mudanças nos dados existentes ocorrem.
Atualização Manual: Ideal para situações em que a periodicidade da atualização não é regular ou quando sistemas automatizados não são práticos.
Integração de Envio de Arquivos: Uma abordagem automatizada para enviar dados ao Looqlake, especialmente quando o acesso direto à fonte de dados original não é possível.
Scheduled/Agendamento
Aplicável para: Pipeline - DB, Pipeline - API
Descrição: O Scheduled/Agendamento é uma funcionalidade que permite configurar a atualização de dados em períodos específicos e automatizados. Com esse método, os clientes podem determinar quando e com que frequência seus dados serão atualizados no Looqlake, sem a necessidade de intervenção manual.
Aplicação: Esta abordagem é ideal para cenários em que há uma necessidade constante de dados atualizados. Dependendo da necessidade do cliente, os dados podem ser atualizados com frequências que vão desde uma vez por dia até a cada 30 minutos.
A configuração é estabelecida com base em critérios acordados entre o cliente e a plataforma, assegurando uma entrega de dados regular e confiável.
Webhook
Aplicável para: Pipeline - API
Descrição: O Webhook é uma técnica que permite que sistemas externos notifiquem o Looqlake automaticamente quando novos dados estão disponíveis ou quando ocorrem mudanças nos dados existentes. Funcionando como uma "chamada reversa", o sistema do cliente envia uma solicitação ao Looqlake indicando que uma atualização é necessária, eliminando a necessidade de verificações regulares ou agendadas.
Aplicação: Esta estratégia é especialmente útil em cenários onde os dados são atualizados em momentos não previsíveis ou em resposta a eventos específicos.
Ao invés de depender de agendamentos ou verificações periódicas, o Looqlake é notificado diretamente, permitindo uma resposta quase imediata às mudanças de dados. Isso garante que os dados no Looqlake estão sempre tão atualizados quanto possível, refletindo a realidade do sistema do cliente em tempo quase real.
Atualização Manual
Aplicável para: Bucket
Descrição: Neste método, os clientes manualmente fornecem seus arquivos para o Looqlake através de um link específico disponibilizado para eles. Este procedimento pode ser comparado a um upload de arquivos através de uma interface web ou portal. Ao invés de depender de processos automatizados ou sistemas que empurram os dados, depende-se da ação direta do cliente para fornecer as informações mais recentes.
Aplicação: Esta abordagem é particularmente útil em cenários onde a periodicidade da atualização não é regular ou onde sistemas automatizados não estão disponíveis ou não são práticos. É frequentemente empregado por empresas ou indivíduos que têm volumes de dados mais gerenciáveis, ou onde a atualização de dados não acontece frequentemente. Também pode ser uma solução temporária enquanto sistemas mais integrados estão sendo desenvolvidos ou implementados.
O tempo necessário para processar um arquivo varia com base em seu tamanho e formato. Arquivos maiores, por exemplo, são divididos em chunks de até 100.000 linhas para otimizar o processamento.
Vale notar que arquivos Excel são mais lentos para processar em comparação com arquivos CSV.
Integração de Envio de Arquivos
Aplicável para: Bucket
Descrição: A Integração de Envio de Arquivos permite que os clientes automatizem o envio de seus dados para o Looqlake, utilizando scripts ou outras ferramentas programáticas. Esta abordagem prescinde da necessidade de ação manual repetitiva, otimizando o fluxo de dados e garantindo um processo mais sistemático e confiável de atualização.
Aplicação: Essa opção atende cenários onde os dados necessitam ser atualizados regularmente, porém não é possível acessar o Banco de Dados ou API onde os dados são gerados/armazenados.
É possível programar, por exemplo, o envio automático de arquivos CSVs processados diariamente.
O processo é estabelecido com base em critérios combinados entre o cliente e a plataforma, garantindo assim que os dados sejam consistentemente fornecidos no formato e na periodicidade acordados.
Recomenda-se sempre validar a possibilidade de consultar diretamente a fonte original dos dados por meio de Pipelines - DB ou Pipelines - API, usando Scheduled/Agendamento
Last updated
Was this helpful?