Esta edição de 2026 de foi integralmente revisada e estruturada segundo o protocolo de escrita técnica aplicada TECHWRITE 2.3, voltado à escalabilidade, precisão conceitual e aplicabilidade prática em ambientes profissionais, prevendo Resolução de Erros Comuns, Boas Práticas e Resumo Estratégico nos principais tópicos e capítulos.
Indicado para estudantes e profissionais que buscam domínio prático na construção, automação e operação de pipelines de dados em ambientes corporativos, cloud e distribuídos. O livro apresenta uma abordagem técnica e operacional para engenharia de dados moderna, cobrindo desde ingestão e processamento até consultas SQL escaláveis, orquestração e integração com sistemas analíticos.
O conteúdo explora o uso profissional de Python e SQL aplicados a dados, com foco em bibliotecas, frameworks e ferramentas amplamente adotadas no mercado, como pandas, numpy, sqlalchemy, pyspark, dask, Apache Airflow, dbt, além de integração com bancos de dados, data lakes, APIs e plataformas de nuvem como AWS e Google Cloud. São abordados aspectos críticos de performance, versionamento, qualidade de dados, automação, segurança e governança.
Você aprenderá:
* Projetar e operar pipelines de dados confiáveis com Python e SQL
* Escrever consultas SQL performáticas e escaláveis para ambientes analíticos
* Automatizar e orquestrar fluxos de dados com Airflow e ferramentas similares
* Integrar pipelines com data lakes, data warehouses, APIs e sistemas externos
* Aplicar práticas de versionamento, testes, monitoramento e CI/CD
*Operar pipelines de dados em ambientes cloud e distribuídos
* Garantir qualidade, rastreabilidade, segurança e governança de dados
Ao final, você estará apto a utilizar Python e SQL como ferramentas de engenharia, entregando pipelines de dados robustos, auditáveis e preparados para escala em projetos analíticos e corporativos.
engenharia de dados, python, sql, pipelines de dados, pandas, numpy, pyspark, dask, airflow, dbt, etl, elt, data lake, data warehouse, cloud, aws, google cloud, orquestração, automação, performance, qualidade de dados
Diego Rodrigues
Autor Técnico e Pesquisador Independente
ORCID: https://orcid.org/0009-0006-
StudioD21 Smart Tech Content & Intell Systems
E-mail: studiod21portoalegre@gmail.com
LinkedIn: linkedin.com/in/diegoexpertai
Autor técnico internacional (tech writer) com foco em produção estruturada de conhecimento aplicado. É fundador da StudioD21 Smart Tech Content & Intell Systems, onde lidera a criação de frameworks inteligentes e a publicação de livros técnicos didáticos e com suporte por inteligência artificial, como as séries Kali Linux Extreme, SMARTBOOKS D21, entre outras.
Detentor de 46 certificações internacionais emitidas por instituições como IBM, Google, Microsoft, AWS, Cisco, META, Ec-Council, Palo Alto e Universidade de Boston, atua nos campos de Inteligência Artificial, Machine Learning, Ciência de Dados, Big Data, Blockchain, Tecnologias de Conectividade, Ethical Hacking e Threat Intelligence.
Desde 2003, desenvolveu mais de 200 projetos técnicos para marcas no Brasil, EUA e México. Em 2024, consolidou-se como um dos maiores autores de livros técnicos da nova geração, com mais de 180 títulos publicados em seis idiomas. Seu trabalho tem como base o protocolo próprio de escrita técnica aplicada TECHWRITE 2.3, voltado à escalabilidade, precisão conceitual e aplicabilidade prática em ambientes profissionais