6

📈 📉O que faz um Engenheiro de Dados?

Thiago Guedes
Thiago Guedes
Engenheiro de dados é o profissional que, a partir de linguagens da ciência da computação, executa as tarefas sobre as quais falamos no tópico anterior.
Mais do que essas linguagens – como Java, Scala e Python, entre outras -, ele deve dominar amplamente toda a lógica e complexidade por trás de conceitos como big data e computação em nuvem.
A partir desses conhecimentos, o engenheiro de dados concebe, constrói e testa arquiteturas de sistemas de processamento de dados.
Ele será responsável pelas soluções de aquisição de dados e de combinação de fontes de dados.
A partir daí, o engenheiro cria o pipeline de dados, ou seja, o processo pelo qual a informação passa, incluindo a entrada no sistema, o processamento e o armazenamento, de modo a facilitar a consulta posterior.
É importante que o engenheiro de dados tenha também conhecimentos sobre análise preditiva e prescritiva, para facilitar ao máximo o trabalho que vem depois (falaremos sobre ele adiante).
Por outro lado, quanto mais linguagens ele conhecer e quanto maior for a sua especialização nelas, maior deve ser seu salário no mercado e mais amplas as oportunidades de trabalho.
Isso significa que a engenharia de dados é um campo com muito espaço de crescimento para quem gosta de estar sempre estudando (ou como chamamos por aqui, 'continuous-learning'.


What Is Data Engineering and Is It Right for You? – Real Python


O que é Big Data?

Big data é o nome que se dá ao universo enorme de informação que é produzida, coletada e armazenada atualmente.
Isso é possível graças às tecnologias que monitoram e guardam dados em tempo real sobre os mais diversos assuntos.
Por exemplo, se você quiser saber qual é média de temperatura anual em Angra dos Reis, ou qual semana foi mais quente nesse destino em 2018, é possível encontrar essa informação porque dados climáticos são medidos e armazenados o tempo todo.
Da mesma forma, você é informado por aplicativos como o Waze qual a rota mais rápida para chegar a determinado lugar, porque ele recebe e processa em tempo real informações sobre o deslocamento de outros usuários.
Mas veja bem: o big data diz respeito ao fato de esses dados existirem e estarem sendo guardados, e não ao que se faz com eles.
De qualquer maneira, são informações que, se bem usadas, podem facilitar muito nosso dia a dia.
Se isso acontece em nossa vida pessoal – para evitar um engarrafamento, como no exemplo do Waze -, imagine no mundo corporativo.
O big data fornece a gestores e profissionais de todas as áreas insumos importantes para reduzir a margem de erro em seu trabalho.
Por exemplo, permite compreender melhor o perfil do público consumidor da marca, para criar uma campanha de comunicação mais adequada às suas preferências.



Quanto ganha um analista de Big Data?

No mesmo Glass Door, citado anteriormente, a média dos salários informados pelos usuários identificados como analistas de big data é de R$ 6.005.
Já o analista de dados, com 112 usuários identificados com essa profissão informando seu salário, ganha em média R$ 4.310, de acordo com o site.
É importante destacar que, como essa é uma área ainda muito nova, os nomes dos cargos podem variar bastante.
Se você quiser fazer uma pesquisa, acesse o Glass Door, selecione a categoria “Salários” e navegue pelos nomes de profissões que lhe interessam.
Você verá que, entre os salários informados por cientistas de dados, a média é de R$ 9.053.
Mas tenha em mente que a média real do mercado pode ser bem diferente daquela que consta no Love Mondays, porque o site não faz nenhuma checagem quanto ao que é informado pelos usuários.
Se é para questionar esses dados, porém, podemos imaginar uma perspectiva ainda melhor para a área.
De acordo com reportagem de agosto de 2017 do site Convergência Digital, o salário para um cientista de dados pode ficar entre R$ 12 e R$ 15 mil.
Para um head de business intelligence (BI) e big data, profissional que faz a gestão e análise de dados, a remuneração ultrapassa os R$ 20 mil mensais.
Resumindo: qualificar-se para atuar na área de big data, ciência ou engenharia de dados de uma empresa é um passo promissor para qualquer um.


What's the difference between a data engineer, a data analyst and a data  scientist? | 7wData


Como aprender mais sobre Engenharia de Dados?

Agora que você já entendeu como a engenharia de dados é uma área profissional promissora, como é possível adquirir conhecimento nesse campo?
Enquanto para o cientista de dados é importante ter uma boa base de aprendizado em matemática e estatística, para o engenheiro de dados, uma formação superior em curso de TI é o primeiro passo recomendado.
Graduações em ciências da computação, análise de sistemas e sistemas de informação, entre outros, têm muito a ver.
A partir daí, para se especializar em engenharia de dados, há várias vias de conhecimento.

Data Scientist vs. Data Engineer - DATAVERSITY


Livros

Você encontra bons livros sobre ciência de dados em português, como o Data Science para Negócios, escrito por Tom Fawcett e Foster Provost.
Para quem domina bem o inglês, a oferta é bem mais ampla. Como a obra Big Data MBA: Driving Business Strategies with Data Science, de Bill Schmarzo.
Para encontrar outras opções, navegue pelas sugestões que aparecem nas páginas dos livros no site da Amazon.
Você verá que a maioria fala sobre data science, ou ciência de dados, mas dentro desse campo estão muitos conhecimentos que o engenheiro de dados utilizará.
Para complementar, você pode explorar livros sobre linguagens utilizadas na área, como Python e Scala.
--------------------------------------------------------------------------------------------------------------------
Aqui na DIO estamos com matriculas abertas para o Bootcamp Carrefour Data Engineer. Chame seus amigos, ajude alguém a chegar mais longe.
Você terá a oportunidade de aprender com grandes experts de mercado as principais habilidades que um engenheiro de dados precisa ter para criar soluções inteligentes através de grandes massas de dados.

A abertura será hoje (15/06) neste link:

Evento de Lançamento - Banco Carrefour Data Engineer





2
331

Comentários (7)

0
Wilson Junior

Wilson Junior

22/06/2021 19:33

Obrigado pela explicação!


0
Isac Vidal

Isac Vidal

22/06/2021 17:52

Ótimo Artigo Thiago! Muito Esclarecedor e de boa leitura!!!

4
Amanda Albuquerque

Amanda Albuquerque

15/06/2021 14:51

Texto muito claro e de leitura bem fluida.

0
Vagner Bellacosa

Vagner Bellacosa

20/06/2021 22:43

Pelo artigo, sucesso amigo, Area de Dados é o novo petróleo, aquele que saber surfar nesta onda esta feito.


toca a se inscrever no bootcamp

0
Luis Silva

Luis Silva

18/06/2021 20:51

Excelente texto.

1
Alan Silva

Alan Silva

18/06/2021 10:09

Estava a algum tempo esperando para aprender um pouco mais sobre a área de DADOS! Grande oportunidade... Essa eu não perco! #GoGoGo

4
Caio Negrão

Caio Negrão

15/06/2021 13:38

Shoow de informações, finalmente um bootcamp focado na área de dados aqui DIO, muito esperado!

👨‍💻Community Support Analyst at Digital Innovation One |Front-End Volunteer🌠

Brasil