disponível para projetos & palestras Sumaré · SP · Brasil SENAI Docência Ativa

Data Engineer Cloud and AI Specialist

> jefferson.focus = "Data Engineer"

Concebendo plataformas de dados escaláveis, construindo sistemas inteligentes e transformando dados em soluções orientadas a decisões.

Foto de perfil de Jefferson Savidotti
Jefferson Savidotti Data Engineer · Cloud & AI Specialist · Instrutor Sênior SENAI Sumaré
LAKEHOUSE TELEMETRY · LIVE AZURE / ADLS GEN2
Throughput Ingestão
1.84M rec/s
Kafka + Spark Streaming
Latência IA (Laya)
0.38 ms
System 1 Non-Autoregressive
ESTADO DO PIPELINE MEDALLION 100% HEALTHY
lakehouse
45%
ia & ml
25%
nuvem
18%
educação
12%

SELECT * FROM jefferson.tools_carousel ORDER BY proficiency DESC;

Airflow
Apache Airflow
orquestração
Spark
Apache Spark
processamento distribuído
Databricks
Databricks
lakehouse & delta
Python
Python
dados & IA
Power BI
Power BI
analytics & BI
PostgreSQL
PostgreSQL
SQL relacional
MySQL
MySQL
SQL relacional
MongoDB
MongoDB
NoSQL documental
Airflow
Apache Airflow
orquestração
Spark
Apache Spark
processamento distribuído
Databricks
Databricks
lakehouse & delta
Python
Python
dados & IA
Power BI
Power BI
analytics & BI
PostgreSQL
PostgreSQL
SQL relacional
MySQL
MySQL
SQL relacional
MongoDB
MongoDB
NoSQL documental
Airflow
Apache Airflow
orquestração
Spark
Apache Spark
processamento distribuído
Databricks
Databricks
lakehouse & delta
Python
Python
dados & IA
Power BI
Power BI
analytics & BI
PostgreSQL
PostgreSQL
SQL relacional
MySQL
MySQL
SQL relacional
MongoDB
MongoDB
NoSQL documental
Microsoft Azure
Microsoft Azure
cloud platform
Oracle Cloud
Oracle Cloud
cloud platform
IBM Cloud
IBM Cloud
enterprise cloud
Azure DevOps
Azure DevOps
CI/CD & pipelines
AWS
AWS
cloud computing
Google Cloud
Google Cloud
cloud computing
Docker
Docker
containers
Linux
Linux
infraestrutura
PowerShell
PowerShell
automação
.NET Core
.NET Core
backend
C#
C#
backend & APIs
Java
Java
serviços corporativos
Swagger
Swagger
APIs REST
Angular
Angular
frontend
Tailwind CSS
Tailwind CSS
frontend
Microsoft Azure
Microsoft Azure
cloud platform
Oracle Cloud
Oracle Cloud
cloud platform
IBM Cloud
IBM Cloud
enterprise cloud
Azure DevOps
Azure DevOps
CI/CD & pipelines
AWS
AWS
cloud computing
Google Cloud
Google Cloud
cloud computing
Docker
Docker
containers
Linux
Linux
infraestrutura
PowerShell
PowerShell
automação
.NET Core
.NET Core
backend
C#
C#
backend & APIs
Java
Java
serviços corporativos
Swagger
Swagger
APIs REST
Angular
Angular
frontend
Tailwind CSS
Tailwind CSS
frontend
Microsoft Azure
Microsoft Azure
cloud platform
Oracle Cloud
Oracle Cloud
cloud platform
IBM Cloud
IBM Cloud
enterprise cloud
Azure DevOps
Azure DevOps
CI/CD & pipelines
AWS
AWS
cloud computing
Google Cloud
Google Cloud
cloud computing
Docker
Docker
containers
Linux
Linux
infraestrutura
PowerShell
PowerShell
automação
.NET Core
.NET Core
backend
C#
C#
backend & APIs
Java
Java
serviços corporativos
Swagger
Swagger
APIs REST
Angular
Angular
frontend
Tailwind CSS
Tailwind CSS
frontend
In [01]:jefferson.describe()

Engenharia de dados com visão de produto e alma de educador.

Sou Engenheiro de Dados especializado em ecossistemas de Big Data, arquiteturas cloud-native e integração de Inteligência Artificial.

O meu foco profissional é o desenvolvimento de plataformas modernas de dados baseadas na arquitetura Lakehouse, processamento distribuído e pipelines fiáveis capazes de suportar analítica à escala empresarial e aplicações inteligentes.

Áreas de especialidade:

  • Engenharia de Dados e Processamento de Big Data
  • Arquitetura Cloud e Práticas de DevOps
  • Integração de Machine Learning e IA
  • Qualidade de Dados, Governação e Fiabilidade
  • Educação Técnica e Partilha de Conhecimento
Lakehousearquitetura
ML · LLMintegração de IA
SENAIdocência
df_expertise.head()5 rows × 3 cols
áreaproficiênciafoco
0Data Engineering & Big Data
0.95
ETL/ELT
1Cloud Architecture & DevOps
0.85
Azure
2Machine Learning Integration
0.82
ML/RAG
3Data Quality & Governance
0.88
Data Vault
4Technical Education
0.96
SENAI
dtype: expertise · memory usage: ∞ curiosidade
In [02]:data_view.query(live=True)

Data View: Observabilidade & Telemetria em Tempo Real.

Explore as tabelas simuladas e a telemetria do ambiente de dados, modelos de IA e turmas de formação técnica.

Data View Interactive Console

SQL > SELECT layer, dataset_name, record_count, freshness_sec, data_quality_pct FROM lakehouse.observability WHERE status = 'HEALTHY';
Domínio / Layer Dataset / Componente Throughput / Registos Latência / Atualização Confiabilidade
Gold fact_daily_financial_kpis 4.820.190 12s ● 99.98%
Silver dim_customer_credit_risk 1.250.040 35s ● 99.94%
Silver fct_order_stream_events 12.340.900 4s ● 100.0%
Bronze raw_telemetry_iot_packets 48.910.000 1s ● 99.85%
Nós de Processamento 32 Spark Workers
SLA do Pipeline 99.99% Uptime
Incompatibilidade de Schema 0 Bloqueios
Alunos Capacitados 500+ Especialistas
In [03]:lakehouse.run(arch="medallion")

Como transformo dados brutos em inteligência.

Clique em cada etapa da arquitetura Medallion para ver o que acontece e as ferramentas que uso em cada camada.

Fontes de dados

In [04]:stack.groupby("domínio").agg(list)

Tecnologias que uso para escalar dados e entregar valor.

AirflowAirflow
SparkSpark
PythonPython
MySQLMySQL
PostgreSQLPostgreSQL
MongoDBMongoDB
Power BIPower BI
DatabricksDatabricks

Data Engineering and Analytics

Do dado bruto ao insight corporativo: ingestão robusta, orquestração e data marts analíticos.

Competências centrais:

  • Pipelines ETL e ELT
  • Processamento Distribuído de Dados
  • Modelagem de Dados (Dimensional, Data Vault)
  • Bancos de Dados SQL e NoSQL
  • Analytics e Business Intelligence
Microsoft AzureMicrosoft Azure
AWSAWS
Google CloudGoogle Cloud
Oracle CloudOracle Cloud
IBM CloudIBM Cloud
Azure DevOpsAzure DevOps
DockerDocker
LinuxLinux
PowerShellPowerShell

Cloud and DevOps

Infraestrutura em nuvem resiliente, esteiras de automação e governação de plataformas multi-cloud.

Experiência comprovada em:

  • Microsoft Azure, Oracle Cloud & IBM Cloud
  • AWS e Google Cloud Platform
  • Contentorização e Automação
  • Pipelines de CI/CD
  • Engenharia de Infraestrutura e Plataforma
PythonPython
.NET Core.NET Core
C#C#
JavaJava
SwaggerSwagger

Backend and Programming

Tecnologias aplicadas no desenvolvimento de serviços, APIs e integração de sistemas distribuídos.

  • APIs RESTful de alta performance
  • Microsserviços distribuídos e mensageria
  • Serving e inferência de modelos de Machine Learning
  • Integração robusta com contratos Swagger / OpenAPI
AngularAngular
JavaScriptJavaScript
HTML5HTML5
CSS3CSS3
Tailwind CSSTailwind CSS
BlazorBlazor

Frontend (Competências Complementares)

Tecnologias frontend aplicadas primariamente na integração de produtos analíticos e colaboração full-stack.

  • Desenvolvimento de portais analíticos e interfaces de BI
  • Colaboração full-stack com squads de produto
  • Construção de aplicações reativas e landing pages de dados
In [05]:catalog.list_projects(author="jefferson")

Projetos que saíram do notebook para o mundo real.

📦 laya/README.md

Laya : Decision Engine

Motor de decisão “System 1” não-autoregressivo: decisões tipadas de escolha, score e sim/não sobre qualquer texto em um único forward pass, em 100+ idiomas, com roteador que escolhe o checkpoint ideal por requisição.

typeAI · NLP
langPython
serveREST · MCP · LangChain
📦 ai-generative-prometeu

IA Generativa Prometeu

Busca inteligente em PDFs com IA: respostas imediatas e relevantes a partir de documentos, simplificando o acesso à informação e aumentando a produtividade das equipes com arquitetura RAG.

typeGenAI · RAG
langPython
inputPDF corpus
📦 credit-risk-analysis

Risco de Crédito · Medallion + ML

Pipeline ETL com camadas Bronze, Silver e Gold para dados financeiros do Yahoo Finance, alimentando um modelo de Machine Learning que prevê inadimplência e apoia decisões de crédito.

typeData Eng · ML
archBronze → Silver → Gold
domainFintech
📦 rodoviasCV

RodoviasCV

Visão computacional com OpenCV e Python para detecção e anotação de objetos em imagens e vídeos de rodovias com métricas de fluxo de tráfego.

typeComputer Vision
langPython · OpenCV
inputimagem · vídeo
📦 vyzorbox

VyzorBox Hypervisor

Hypervisor Tipo 2 (Windows/Linux) com <5% de overhead e isolamento rigoroso: VMs em menos de 3 cliques, discos dinâmicos, 3 modos de rede, snapshots e CLI.

typeSistemas · Infra
overhead< 5%
featuressnapshots · CLI
📦 Stories.API · CRM

Stories.API & CRM Vaadin

APIs e aplicações corporativas com Java, Spring Boot e Vaadin, estrutura organizada e suporte a Docker para construção de sistemas personalizados.

typeBackend · APIs
langJava · C#
deployDocker
In [06]:educacao.train(students, methodology="hands_on")

Technical Education and Knowledge Sharing.

Como Instrutor Sênior no SENAI Sumaré, aplico engenharia ao ensino: fundamentos sólidos, laboratórios com cloud real e formação com impacto na indústria.

learning_pipeline.yaml

01

Fundamentos Sólidos

Lógica, SQL, Python e modelagem: a base que sustenta qualquer ecossistema moderno.

02

Laboratórios em Cloud

Ambientes reais (Azure, Databricks, Spark) desde a primeira aula prática.

03

Projetos Industriais

Desafios reais conectados às demandas das empresas de tecnologia da região.

04

Autonomia & Carreira

Formação para certificações oficiais, portfólio GitHub e senso crítico contínuo.

“Democratizar o ensino de tecnologia é escalar talento: o dado mais valioso de qualquer organização.”
In [07]:credentials.verify(provider=["Microsoft", "Databricks"])

Certifications & Credenciais Oficiais.

Validação formal de competências em ecossistemas de dados, nuvem e inteligência artificial.

Badge Microsoft Azure Data Fundamentals
DP-900

Microsoft Azure Data Fundamentals

Dados relacionais, não relacionais e analytics na nuvem Microsoft Azure.

→ Ler Artigo-Guia
Badge Microsoft Azure AI Fundamentals
AI-900

Microsoft Azure AI Fundamentals

Machine Learning, visão computacional, NLP e IA generativa na plataforma Azure.

→ Ler Artigo-Guia
Badge Microsoft Certified Fundamentals
AZ-900

Microsoft Azure Fundamentals

Conceitos de nuvem, arquitetura, serviços core, segurança e governança Azure.

→ Microsoft Learn
Badge Databricks Lakehouse Fundamentals
LAKEHOUSE

Databricks Lakehouse Fundamentals

Arquitetura Lakehouse, Delta Lake, orquestração e a plataforma unificada Databricks.

→ Databricks Academy
In [08]:spark.sql("SELECT * FROM scientific_publications")

Scientific Article & TechData Connect.

Artigos técnicos e produções acadêmicas traduzindo tecnologia em conhecimento aplicável.

In [09]:github.insights("jeffersonsavidotti")

GitHub Insights & Constância Observável.

profile_details theme: tokyonight Resumo do perfil GitHub de Jefferson Savidotti
contribution_grid · snake github.com/jeffersonsavidotti ↗ Grade de contribuições com snake do GitHub
Out [∞]:vision
Os dados devem operar como um ativo estratégico capaz de viabilizar inteligência escalável, tomada de decisão confiável e impacto mensurável no negócio.

O objetivo é projetar plataformas onde o dado flui com eficiência, escala com consistência e suporta transformações reais.

In [11]:jefferson.connect(you)

Tem um desafio de dados ou IA? Vamos conversar.

Professional Links & Conexão

Projetos, consultorias, palestras, mentorias educacionais ou uma conversa sobre dados e IA.

Enviar Mensagem Direta

Abre seu aplicativo de e-mail com a mensagem pré-configurada para envio imediato.