Opa pessoa, eu sou engenheiro de dados e me chamo Felipe Bormann (vocês pode checar mais sobre mim na página About). # TODO: Adicionar link para página about e atualizar a página about com alguns links meus. O objetivo deste post são alguns: Mostrar meu ponto de vista sobre o que um engenheiro de dados … Continue lendo Como começar em engenharia de dados
Tag: data engineering
Bibliotecas aleatórias #01: PyJanitor
Em bibliotecas aleatórias o objetivo é explorar uma pequena lib (geralmente em Python mas podem ter outras que são só CLIs, etc) e ver o que ela faz, quais suas vantagens e como criar um pequeno código com ela para algum problema que você tenha. Objetivo O objetivo do pyjanitor é criar uma API de … Continue lendo Bibliotecas aleatórias #01: PyJanitor
Apache Airflow 02 – Conceitos principais
Os principais conceitos do Airflow que serão explicados neste artigo serão: DAGs, operators, sensors e hooks. O que vou explicar será sobre como eles se encaixam no Airflow e como utilizá-los no seu dia a dia, até mesmo vamos construir nossa primeira DAG. Eu vou tentar ensinar a partir dos partes ao invés de destrinchar … Continue lendo Apache Airflow 02 – Conceitos principais