0

INGESTÃO DE DADOS – Introdução a Engenharia de Dados na Azure

Douglas Lima
Douglas Lima

Tendo como base que em uma conta de armazenamento do Azure é possível encontrar vários tipos de dados disponíveis, podemos afirmar que a conta em si fornece um namespace exclusivo para os dados que podem ser acessados em qualquer lugar do mundo (por HTTP ou HTTPS). Além disso, dentro do Azure é possível encontrar os tipos de armazenamentos, a redundância e os modelos de implantação. Em seguida irei citar alguns exemplos de redundância que podem ser usados nas aplicações dentro do Azure:


·        LRS (armazenamento com redundância local) à Se trata de uma opção de redundância simples de baixo custo, onde se tem a oportunidade dos dados serem copiados três vezes em uma localização física.


·        ZES (armazenamento com redundância de zona) à Onde nesse caso, a redundância abrange situações que podem exigir alta disponibilidade. Além disso, os dados são copiados em três zonas de disponibilidade do Azure.


·        GRS (Armazenamento com redundância geográfica) à Já a GRS se trata de uma redundância entre regiões, onde tem o objetivo a proteção contra interrupções regionais.


Para finalizar, irei abordar mais dois tópicos sobre o tema: Processamento de Dados e Azure Synapse Analytics.

Pois bem, o Processamento de dados, conhecido também pela abreviação ETL (extração, transformação e carregamento) é necessário quando se tem dados sem uma determinada “direção”. Já o Azure Synapse Analytics é justamente para esses tipos de casos de dados “sem direção”, onde usando o Apache Spark e pipelines automatizados, o Synapse pode executar tarefas de processamento paralelo em conjuntos de grandes dados e executar análise de Big Data. 

0
0

Comentários (9)

0
R

Rafael Souza

06/09/2021 12:49

Um tema de extrema importância principalmente em tempos em que a Segurança de Dados se torna tão crucial quanto o negocio em si.

0
Herton Andrade

Herton Andrade

25/08/2021 10:34

Parabéns pela iniciativa. Show!

0
J

Joao Souza

24/08/2021 15:39

Excelente artigo.

0
O

Oseias Santos

21/08/2021 22:14

Muito bom ver como a tecnologia tem cada vez mais avançado.

0
Carlos Matos

Carlos Matos

21/08/2021 13:37

No curso aqui da DIO Introdução a Engenharia de Dados na Azure, o instrutor Joel Lopes mostra os links para a parte de ensino da Microsoft sobre esse assunto. Eu ainda não vi com profundidade os materiais que estão disponíveis nesses links, mas em uma visão rápida me pareceram materiais muito bons e didáticos. Vale a pena conferir.



0
Ivan Cruz

Ivan Cruz

21/08/2021 11:13

Muito bom seu artigo parabéns!

0
Vagner Pereira

Vagner Pereira

21/08/2021 09:53

Massa! Informações importantes.

0
Vinicius Oliveira

Vinicius Oliveira

19/08/2021 11:47

Interessante.

0
L

Lucas Borelli

19/08/2021 10:42

Legal ver esse tema sendo cada vez mais discutido aqui!


Um ser apaixonado por engenharia e tecnologia.

Brasil