Copiando dados com Azure Data Factory de forma rápida

Azure Data Factory (ADF) é uma das melhores ferramentas para mover grandes volumes de dados, seja de um Azure File Share, um Storage Account Blob, ou até de ambientes on-premises.

Aqui vai um passo a passo técnico para você configurar essa movimentação de dados de um Container (ou Blob) para outro destino como Blob Storage, utilizando o ADF.

Vamos configurar uma pipeline que realizará a movimentação de arquivos entre os Blobs.

Passo 01

Vamor criar um Data Factory seguindo o padrão next, next e finish no Azure

Passo 02

Vamos acessar o Azure Data Factory Studio para configurar a pipeline que irá realizar a cópia entre Storage Account de duas regiões diferentes.

Vamos clicar na edição de Recursos para configurar Datasets e Pipelines

Vamos Arrastar a Opção Copy Data e levar para plano central para iniciar a configuração da Origem dos Dados e Destino

Vamos configura a origem dos dados, arquivos comuns de qualquer extensão e pastas pode sem copiados

ArquivosComuns são nome para o tipo de dados e vamos clicar na opção LinkedService para vincular ao storage de Origem

Na opção To File path, iremos colocar o nome do Blob Storage, que no caso ai chama-se pasta0001 e todo o seu conteúdo e clicar na opção de Create, ainda na janela de Propriedades clicar na Opção ou de uma pasta root ou de um patch específico.

Opção Root

e escolher pasta0001 e clicar em OK

Configuração da Origem foi finalizado

Passo 03 – Destino

Vamos agora configurar o destino, que será outro Storage de outra região com Container Diferente.

Vamos configurar um novo Caminho

Veja que agora estamos utilizando outro Storage como destino dos dados

O nome do container chama-se pastadedestino

clico em Create

4 – Passo – validar a Papiline

Abaixo segue os arquivos que estão no blob de origem

Vamos clicar na opção Debug para iniciar a cópia

Copia será iniciada e ficará em progresso. Clique no óculos para resumo da operação.

Copia realizada com sucesso.

Espero que tenha ajudado e que possa no seu dia-a-dia copia de forma rapida conteúdo de blobs de uma pasta para outra.