Éxito de ventas en Brasil (Bestseller de Amazon) ¡ahora disponible en español!
Con lenguaje accesible y orientado a la práctica, este libro presenta veinte modelos de pipelines para ingeniería de datos, listos para personalización y aplicación en proyectos profesionales. Los ejemplos abarcan ingestión, transformación, integración, automatización, orquestación, monitoreo y entrega operativa, siempre utilizando Python, SQL y frameworks consolidados del mercado. Cada modelo sirve como punto de partida para adaptaciones según las necesidades de entornos cloud, locales o híbridos, garantizando flexibilidad y adecuación a diferentes escenarios técnicos.
El contenido incluye integración con bases relacionales y NoSQL, rutinas de ETL/ELT, persistencia en Data Lake y Data Warehouse, workflows con Airflow y Prefect, ingestión por lotes y streaming, mensajería con Kafka y RabbitMQ, automatización de despliegues, monitoreo con Prometheus y Grafana, exportación a Power BI, además de prácticas de validación, compliance y trazabilidad.
Usted podrá:
* Implementar (personalizando) pipelines con Python, SQL, Pandas, Airflow, dbt, Luigi, Prefect
* Integrar bases PostgreSQL, MySQL, SQL Server, Oracle, MongoDB, BigQuery, Redshift, Snowflake
* Automatizar ingestión, transformación, validación, exportación, monitoreo y despliegue
* Operar ETL/ELT, streaming, integración de APIs, web scraping, mensajería con Kafka, RabbitMQ
* Monitorear y entregar resultados vía dashboards, Power BI, FTP y automatización de reportes
* Aplicar rutinas de seguridad, versionado, compliance, enmascaramiento y trazabilidad de datos
Al final, contará con modelos que facilitan la estructuración, adaptación y ejecución de pipelines de datos, utilizando las principales herramientas y prácticas del mercado.
#pipelines #ingenieriadedatos #python #sql #etl #elt #pandas #sqlalchemy #airflow #dbt #luigi #prefect #docker #kubernetes #aws #googlecloud #azure #postgresql #mysql #sqlserver #oracle #mongodb #bigquery #redshift #snowflake #kafka #rabbitmq #apirest #scrapy #prometheus #grafana #elkstack #ci #cd #backup #seguridad #compliance #masking #pseudonymization #monitoreo #datalake #datawarehouse #powerbi #ftp #webscraping #streaming
Diego Rodrigues
Autor Técnico e Investigador Independiente
ORCIDE: https://orcid.org/0009-0006-
StudioD21 Smart Tech Content & Intell Systems
E-mail: studiod21portoalegre@gmail.com
LinkedIn: linkedin.com/in/diegoexpertai
Autor técnico internacional (tech writer) con enfoque en la producción estructurada de conocimiento aplicado. Es fundador de StudioD21 Smart Tech Content & Intell Systems, donde lidera la creación de frameworks inteligentes y la publicación de libros técnicos didácticos y con soporte de inteligencia artificial, como las series Kali Linux Extreme, SMARTBOOKS D21, entre otras.
Poseedor de 46 certificaciones internacionales emitidas por instituciones como IBM, Google, Microsoft, AWS, Cisco, META, Ec-Council, Palo Alto y la Universidad de Boston, actúa en los campos de Inteligencia Artificial, Machine Learning, Data Science, Big Data, Blockchain, Tecnologías de Conectividad, Ethical Hacking y Threat Intelligence.
Desde 2003 ha desarrollado más de 200 proyectos técnicos para marcas en Brasil, EE. UU. y México. En 2024 se consolidó como uno de los mayores autores de libros técnicos de la nueva generación, con más de 180 títulos publicados en seis idiomas. Su trabajo se basa en su propio protocolo de escritura técnica aplicada TECHWRITE 2.3, orientado a la escalabilidad, precisión conceptual y aplicabilidad práctica en entornos profesionales.