Clayton Campos

Sou formado em ADS e Pós graduado em Engenheira de dados.
Apaixonado por inovação e tecnologia.
Focado principalmente na resolução de problemas de negócios dos clientes, entregando valor através de resultados e insights baseados em análises e construção de pipelines de dados.

Saiba mais

Sobre Mim

Pós graduado em engenharia de dados, + de 5 anos de experiiência com big data, análise e engenharia de dados, criação e manutenção de pipelines.
Possuo Experiência com Plataforma Cloudera, Teradata, Azure e Data Bricks.
Apache: Airflow, Hue, Hive, Hbase, Impala, Kudu, Kafka, Sqoop e Spark.
Teradata: Tdch, Bteq, FastExport, FastLoad, Mload e Multiload.
Desenvolvimento de pipelines e scripts para consumo de API's, processos de ETL e ELT, utilizando Shell Script, Python e Pyspark em Ambientes Big Data e TERADATA.
Experiência com sustentação, suporte, gerenciamento e monitoramento de ambiente Teradata e Cloudera HDP e CDP, Clusters hadoop e seu ecossistema de ferramentas. Criação de processos de automação, observabilidade com grafana, prometheus e ELK.

Formação

Sou Graduado em Comércio Exterior, Análise e Desenvolvimento de Sistemas e Pós Graduado em Engenharia de Dados.

Certificações:

Microsoft Azure: AZ-900, DP-900, AI-900, SC-900 e PL-900 estou estudando para tirar a Certificação Data Engineer DP-203.

Oracle: Oracle Cloud Infrastructure Foundations Associate (1Z0-1085-23), Oracle Cloud Data Management Foundations Associate (1Z0-1105-22) e Oracle AI Certified Foundations Associate (1Z0-1122-23)

Outras Certificações: Apache Airflow Fundamentals, IBM Cloud Essentials V3, MongoDB (M103) Basic Cluster Adminstration

Treinamentos: Participei do Programa de Treinamento (Data Engineer) da Semantix, Bootcamps da DIO Banco Carrefour e Cognizant referente a imersão nas tecnologias de Big Data. Santander Coders 2023 Trilha Engenharia de Dados

—

⇿

Clayton@root: ~$ . printCertificates

Certificações

Azure

AZ-900, DP-900, AI-900, SC-900, PL-900

OCI

1Z0-1085-23, 1Z0-1105-22, 1Z0-1122-23

MongoDB

M103

Airflow

Apache Airflow Fundamentals

| Credly |

—

⇿

Clayton@root: ~$ . printskills

Tecnologias

Hadoop

Python

Cloudera

MySql

Teradata

Spark

Hbase

Hive

MongoDB

DBT

OCI

GCP

Azure

DataBricks

Airflow

Habilidades

Big data, Cloudera, Teradata, Azure Data Factory, Databricks, Spark, Pyspark, Python, ETL, ELT, SQL, NoSQL, Data Warehouse, Data Lake, Data Lake House, Docker, Ansible, Git, Azure DevOps e Metodologias ágeis.

Portfolio

DBT + Postgres + ELT + Modelagem

Projeto de ELT com DBT, Postgres, Python e Docker, realizando toda modelagem e transformação para o DW

Github Demo

ETL + Airflow + API Twitter

Extração de dados da API do Twitter usando Apache airflow e carregando dados no data lake.

Github Demo

Web Scraping + ETL + M Livre

Projeto de ETL com Web scraping do Mercado livre utilizando o framework scrapy e apresentando o resultado com streamlit, faz a raspagem de 2 produtos Tenis masculino e fraldas

Github Demo

Validador de Schema Excel

Validador de schema de arquivos excel para ingestão de dados, utilizando, Pydantic, Pytest e StreamLit

Github Demo

Coffe Store

Laboris ex laboris mollit esse fugiat aute cillum nostrud enim dolor sit. Reprehenderit et non nulla irure aute nostrud commodo aute.Laboris ex laboris mollit esse fugiat aute cillum nostrud enim dolor sit. Reprehenderit et non nulla irure aute nostrud commodo aute.Laboris ex laboris mollit esse fugiat aute cillum nostrud enim dolor sit. Reprehenderit et non nulla irure aute nostrud commodo aute.

Github Demo