Skip to end of metadata
Go to start of metadata

You are viewing an old version of this page. View the current version.

Compare with Current View Version History

« Previous Version 19 Next »


Nesta tela, é realizado a configuração da varredura, seja na criação de uma nova ou na edição de uma já existente.

Para acessar esse recurso, vá em ‘Varreduras > Gerenciar’ e clique no botão image-20240825-032551.png, para criar uma nova varredura ou clique no botão ‘Editar’ image-20240825-032703.png, para editar uma varredura já existente.

Para mais informações sobre o menu ‘Gerenciar’, acesse: Gerenciar - Data Finder


Índice:


  • Essa tela, em ‘Varreduras’, é separa por duas colunas, ‘Configurar Varredura' e 'Configurar Mecanismo’.


image-20240825-033530.png

Configurar Varredura

Na coluna ‘Configurar Varredura’, contém os seguintes campos para configuração:

  • O primeiro campo é a ‘Descrição’, nele é informado um nome ou alguma identificação para a varredura.

  • Em ‘Limpar dados anteriores’, caso alguma varredura já tenha sido executada, ativando esta opção, todos os dados coletados e classificados anteriormente, apenas nesta varredura, serão excluídos.

  • Em ‘Marcações de Varreduras anteriores’, se ativado esta opção, irá excluir todos os Save Points e iniciar a varredura do ‘zero’, porém, sem excluir nenhum dado.

O Data Finder utiliza Save Points para registrar o progresso da varredura. Dessa forma, se a varredura for cancelada por algum motivo, ao ser reiniciada, ela continuará do ponto exato onde parou.

  • Em ‘Escolha a precisão esperada na varredura’, ajuste conforme a necessidade, clicando e arrastando a barra, de acordo com a precisão configurada nos Modelos.

Para mais informações sobre os ‘Modelos’, acesse: Modelos - Data Finder


image-20240825-042500.png

Logo abaixo, após selecionar a credencial em ‘Configurar Mecanismo’, é exibido uma lista com os tipos de dados, cadastrados na ferramenta, para identificar os dados a serem coletados na varredura e, podendo selecionar se, na varredura, será coletado somente dados, metadados ou ambos.

Esses são os Modelos de dados padrões que já veem cadastrados na plataforma, eles podem ser editados, excluídos e adicionado novos.

Para mais informações sobre os ‘Modelos’, acesse: Modelos - Data Finder


image-20240825-043512.png

No campo ‘Agendamento’, pode-se configurar para a varredura iniciar imediatamente ou agendar uma execução. Escolhendo ‘Executar Agora’, ao clicar em 'Salvar varredura' no final da página, a varredura iniciará imediatamente.


image-20240825-044344.png

Caso escolha ‘Agendar Execução’, estará disponível algumas opções para configuração de agendamento, como Data inicial, hora inicial, hora final (opcional) e recorrência.

  • Data de início: Selecione a data para início do agendamento da varredura.

  • Hora inicial: Selecione a hora em que iniciará a primeira (ou única) varredura do agendamento.

  • Hora final (opcional): Esta opção é opcional, mas caso seja configurado, a varredura será interrompida quando chegar neste horário informado.

  • Recorrência: É a configuração a ser realizada para que o agendamento se repita conforme a necessidade. Existe 4 opções, são elas:

    • Diária: Quando selecionado, a varredura será executada todos os dias no horário informado.

    • Semanal: Ao selecionar esta opção, também estará disponível um novo botão ao lado para selecionar quais os dias da semana que entrará no agendamento.

    • Mensalmente: Quando selecionada, a varredura será executada automaticamente a cada 30 dias.

    • Não repetir execução: A varredura será agendada para ser executada uma única vez.

Quando selecionada alguma das opções de recorrência com repetição, estará disponível logo abaixo o campo ‘Data Final’, onde pode ser configurado (ou não), uma data para ser finalizado o agendamento. Caso não seja informado uma data, o agendamento continuará a ser executado conforme a recorrência configurada até que seja cancelado manualmente.


image-20240825-142639.png

Em ‘Janela de exclusão’, pode-se configurar uma janela com hora inicial e final, para que as varreduras não seja executadas nesse período, seja uma execução de forma imediata ou por agendamento. Quando estiver no período configurado nesta janela, a varredura irá aguardar o término desta janela para que seja iniciada. Caso uma varredura esteja em execução, quando iniciar esta janela, a mesma será pausada até o término da janela.

A varredura marcará um Save Point e continuará a coleta de dados quando iniciar novamente.


image-20240825-143424.png

image-20240825-143339.png


Configurar Mecanismo

Na coluna ‘Configurar Mecanismo’, contém os seguintes campos para configuração:

  • Credenciais: Para executar uma varredura, a mesma precisa ter as credenciais ao serviço cadastradas e configuradas, é neste campo que será selecionado a credencial a ser utilizada nesta varredura. Após selecionada a credencial, os campos abaixo estarão disponíveis.

De acordo com a credencial selecionada, os campos a seguir podem variar, especialmente entre bases de dados estruturadas e não estruturadas.

Em bases não estruturadas, é onde se tem mais variações, conforme o tipo do serviço (serviço de e-mails, serviços de armazenamento e compartilhamento em nuvem, File Server etc), cada um deles, contendo campos diferentes para configuração.

Abaixo, segue um exemplo dos campos presentes ao ser selecionado uma credencial de base estruturada (banco de dados):

  • Em ‘Pesquisa’, temos dois campos de preenchimento opcional, são eles:

    • Tabelas para incluir: Neste campo, informe apenas as tabelas que deseja incluir na varredura. As demais tabelas, não informadas, serão automaticamente ignoradas.

    • Tabelas para excluir: Aqui, devem ser especificadas as tabelas que serão ignoradas pela varredura. Dessa forma, a varredura irá processar todas as demais tabelas, exceto as que foram indicadas neste campo.

Caso o banco de dados seja Camel Sensitive (que faz diferenciação de maiúsculas e minúsculas), atente-se em informar o nome da tabela exatamente como está configurada no banco de dados.

Se os campos ‘Tabelas para incluir’ e ‘Tabelas para excluir’ não forem preenchidos, a varredura irá realizar a leitura de TODAS as tabelas que encontrar e tiver permissão.

  • Em ‘Quantidade de dados por conjunto’, o Data Finder realiza a análise dos dados em blocos. Assim, quanto maior o conjunto de dados, mais rápida tende a ser a varredura. No entanto, é importante ter cautela ao ajustar esse valor, pois, quanto maior o volume de dados processado por conjunto, mais recursos do servidor, como a memória RAM, serão exigidos. Isso pode resultar em sobrecarga no servidor caso não seja configurado de forma adequada.

Recomendamos que, o número de varreduras simultâneas seja ajustado de acordo com a configuração mencionada e a capacidade do servidor. Com base nisso, sugerimos um máximo de 2 varreduras simultâneas, considerando uma configuração de 3 mil dados por conjunto para garantir um equilíbrio entre desempenho e uso de recursos.

  • Em ‘Tempo em minutos de espera até o TimeOut’, é definido o período em minutos que a varredura aguardará antes de encerrar a conexão em caso de TimeOut. Configurar esse valor para diferente de 'zero', assegura que o aplicativo continue responsivo caso ocorra uma falha de rede ou na comunicação com o servidor. Se o valor for configurado como ‘zero’, isso indicará um tempo limite infinito, permitindo que a conexão permaneça indefinidamente aberta sem ser encerrada.

  • Em 'Quantidade de vezes que será feita a retentativa de conexão', é definido o número de tentativas adicionais que serão realizadas para restabelecer a conexão caso ela seja perdida por falha de rede ou qualquer outro motivo.

  • Em ‘Intervalo de tentativas de repetição’, é definido o intervalo de tempo para as tentativas de conexão com o banco de dados ou serviço, em caso de falha. O valor deve ser informado em segundos.


image-20240825-154127.png

Em ‘Opções Avançadas’, quando ativada, estará disponível algumas novas opções para configurações adicionais para a varredura, são elas:

  • Amostragem da varredura: Quando ativada, deve ser configurado, conforme a necessidade, o percentual de leitura das linhas das tabelas (de 1% até 20%), em cada uma das opções (até 100 mil linhas, 1 milhão de linhas, 10 milhões de linhas ou mais).

  • Ativar Limite de Amostra: Quando ativada, será limitado a quantidade máxima de coleta.

  • Limite da Amostragem: É definido um número de limite de amostragem dos dados.


image-20240825-160417.png

Por fim, clique em ‘Salvar varredura’, para finalizar a configuração e, caso tenha sido configurado ‘Executar Agora’, a mesma será executada imediatamente. Caso contrário, será executada conforme o agendamento configurado e, ficará disponível no menu ‘Agendadas’.

Para mais informações sobre o menu ‘Agendadas’, acesse: Agendadas - Data Finder

  • No labels