Channel Title: Stack Channel Description: Aprenda e se atualize sobre projetos e tecnologias Dados e Inteligência Artificial (Data & AI)! Aqui, você encontra conteúdos ricos e objetivos produzidos por especialistas apaixonados pelo que fazem: 🎥 Rodrigo Santana – Especialista em Engenharia de Dados, compartilha insights e boas práticas para a construção de pipelines robustos, modelagem de dados eficiente e otimização de plataformas de dados. 🎥 Felipe Santana – Especialista em Data Science, Machine Learning e Inteligência Artificial, traz tutoriais práticos, estudos de caso e tendências para ajudá-lo a transformar dados em decisões e geração de valor. Nosso objetivo é simplificar temas complexos estratégias que estão moldando o futuro da tecnologia. 💡 Inscreva-se agora no canal e acompanhe também no linkedin. 🔗 Rodrigo Santana (https://www.linkedin.com/in/rodrigosantanaf/) 🔗 Felipe Santana (https://www.linkedin.com/in/felipesf/) <video> Engenharia de Dados com Databricks e Azure (projeto LatamFusion) com Hugo Rafael Description: Neste episódio do DataCast, recebemos Hugo Rafael, engenheiro de dados e especialista em Databricks e Azure, para uma conversa sobre o projeto LatamFusion. Hugo compartilha insights sobre como ele utilizou o poder do Azure Functions em Batch mode para realizar a ingestão de dados através de crawlers, um componente essencial para capturar grandes volumes de informações de maneira eficiente. Durante o episódio, exploramos o processo de transformação e processamento de dados utilizando a arquitetura medallion do Databricks, que envolve as camadas bronze, silver e gold. Hugo detalha como essas etapas foram fundamentais para organizar e otimizar o fluxo de dados, trazendo resultados significativos para o projeto LatamFusion. Além disso, Hugo fala sobre sua experiência em adquirir a certificação Databricks Data Engineer Associate, destacando a importância dessa conquista para sua carreira. Ele compartilha como a certificação abriu novas portas e reforçou suas habilidades em engenharia de dados, tornando-o um profissional ainda mais preparado para lidar com os desafios do mundo moderno de dados. Não perca! Entrevistado: Hugo Rafael https://www.linkedin.com/in/hugo-r-vallejo-angulo/ Host: Rodrigo Santana https://www.linkedin.com/in/rodrigo-santana-0ab041128/ </video> <video> Uma plataforma moderna na GCP para processamento de eventos. Description: No episódio de hoje do DataCast, recebemos Bruno Cesar, especialista em plataformas de dados na Google Cloud Platform (GCP), para uma conversa aprofundada sobre a construção de uma plataforma moderna para processamento de eventos. Bruno compartilha sua experiência na implementação de arquiteturas robustas usando tecnologias como CDC com Kafka Confluent, Cloud Storage, Dataflow, BigQuery, Airflow, Looker e Qlik. Durante o episódio, exploramos como esses serviços podem ser integrados para criar um pipeline de dados escalável e eficiente, permitindo o processamento em tempo real de eventos e a análise de grandes volumes de dados. Bruno detalha as vantagens de usar Cloud Storage para armazenamento, Dataflow para processamento distribuído, e como o BigQuery facilita consultas rápidas e análises avançadas. Além disso, discutimos como ferramentas de orquestração como o Airflow e plataformas de visualização de dados como Looker e Qlik podem transformar insights em ações, melhorando a tomada de decisões dentro das organizações. Esse episódio é essencial para quem quer entender como construir uma infraestrutura de dados moderna e eficiente na GCP. Entrevistado: Bruno Cesar https://www.linkedin.com/in/bruno-cesar-motta/ Host: Rodrigo Santana https://www.linkedin.com/in/rodrigo-santana-0ab041128/ </video> <video> ROI e Otimização: Estratégias para Maximizar o Retorno da Sua Plataforma de Dados Description: Neste episódio do DataCast, recebemos Rafael Gutierres para uma conversa profunda sobre como maximizar o retorno sobre o investimento (ROI) de uma plataforma de dados. Rafael compartilha estratégias valiosas para equilibrar as expectativas da área de negócios em relação às demandas de dados, abordando como as equipes de engenharia de dados podem priorizar o que realmente gera valor para a empresa. Discutimos as armadilhas comuns que muitas empresas enfrentam, como a "pastelaria" de demandas excessivas e sem foco claro. Rafael nos mostra como dizer "não" para demandas que não trazem retorno significativo, além de explorar como defender de maneira eficaz os investimentos em plataformas de dados. Ele também compartilha dicas práticas para otimizar uma plataforma e reduzir os custos operacionais, sem comprometer a qualidade e a performance. Se você busca insights sobre como garantir que sua plataforma de dados esteja alinhada com os objetivos de negócio e maximizar seu ROI, este episódio traz uma visão completa, recheada de boas práticas e conselhos práticos para lideranças e equipes técnicas. Entrevistado: Rafael Gutierres https://www.linkedin.com/in/rafaelgutierres/ Host: Rodrigo Santana https://www.linkedin.com/in/rodrigo-santana-0ab041128/ </video> <video> Databricks Data Intelligence Platform Description: Evento online exclusivo que reunirá líderes e especialistas em dados para explorar tecnologias avançadas, arquiteturas modernas e soluções inovadoras com a plataforma Databricks. A plataforma Databricks pode transformar sua abordagem à gestão de dados. Líderes e especialistas de diversas áreas discutirão as tendências emergentes, desafios da digitalização e as soluções inovadoras que estão moldando o futuro da tecnologia de dados. Através de estudos de caso e demonstrações práticas, você terá insights sobre como otimizar e modernizar suas plataformas de dados, gerenciar custos de nuvem, e integrar soluções de Inteligência Artificial Generativa. Tópicos abordados: • Plataforma de Inteligência de Dados com Databricks: Soluções para modernização e otimização de dados. • Otimização de Custos: Estratégias para maximizar investimentos em nuvem. • Modernização de Plataformas de Dados: Atualização de infraestruturas com casos de sucesso. • Soluções para Plataformas de Dados: Comparação entre as funcionalidades e benefícios do Databricks e outras plataformas de dados proprietárias e open-source • Governança e Conformidade: Garantindo segurança e conformidade com a plataforma. • Maximização do ROI: Alinhando plataformas de dados aos objetivos estratégicos de negócios, maximizando o retorno sobre o investimento. • Inteligência Artificial Generativa: Tecnologias para gerar valor com IA. </video> <video> Sistema Inteligente de Reconhecimento de Documentos com Machine Learning. Description: No episódio de hoje do DataCast, recebemos Bruno Gomes, um especialista em Machine Learning com uma vasta experiência no desenvolvimento de sistemas inteligentes de reconhecimento de documentos. Bruno nos guia através dos desafios e soluções envolvidos na criação de algoritmos que automatizam e otimizam o processamento de documentos, um componente crítico para muitas empresas na era digital. Durante a conversa, exploramos como o Machine Learning está revolucionando o reconhecimento de documentos, desde a extração precisa de informações até a classificação automatizada de grandes volumes de dados. Bruno compartilha casos práticos de projetos em que trabalhou, destacando as tecnologias e abordagens que utilizou para superar obstáculos e alcançar resultados significativos. Se você está interessado em saber como a inteligência artificial pode transformar o gerenciamento de documentos e otimizar processos empresariais, este episódio é indispensável. Aprenda com Bruno Gomes como levar o reconhecimento de documentos a um novo patamar utilizando o poder do Machine Learning. Entrevistado: Bruno Gomes https://www.linkedin.com/in/bruno-gomes-733481b/ Host: Rodrigo Santana https://www.linkedin.com/in/rodrigo-santana-0ab041128/ </video> <video> Engenharia de Dados e Analytics com Databricks: Lições e Experiências de Nilton Ueda Description: No episódio de hoje do DataCast, temos a honra de receber Nilton Ueda, um profissional experiente em projetos de Engenharia de Dados e Analytics que utiliza o Databricks para transformar dados em insights valiosos. Com uma vasta experiência na liderança e execução de projetos complexos, Nilton compartilha suas lições aprendidas, desafios superados e as melhores práticas para extrair o máximo do Databricks em ambientes de dados modernos. Durante a nossa conversa, Nilton explora como o Databricks tem sido um diferencial em sua abordagem para soluções de dados, desde o desenvolvimento de pipelines eficientes até a implementação de análises avançadas. Ele também revela as estratégias que adotou para otimizar o desempenho de suas equipes e maximizar o impacto dos projetos de dados em negócios reais. Este episódio é imperdível para quem deseja entender o papel do Databricks na Engenharia de Dados e Analytics, aprendendo diretamente com as experiências de um especialista que vive o dia a dia desses desafios. Não se esqueça de seguir o DataCast para mais episódios repletos de insights sobre o mundo dos dados e AI! Entrevistado(a): Nilton Ueda https://www.linkedin.com/in/niltonkazuyukiueda/ Host: Rodrigo Santana https://www.linkedin.com/in/rodrigo-santana-0ab041128/ </video> <video> De Especialista a Head de Engenharia de Dados com Bruno Almeida. Description: Neste episódio do DataCast, recebemos Bruno Almeida, atual Head de Engenharia de Dados, para compartilhar sua inspiradora trajetória de especialista a líder de equipe. Bruno nos conta como foi sua ascensão na carreira e oferece dicas valiosas para profissionais de dados que buscam acelerar seu crescimento e assumir posições de liderança. Durante o bate-papo, exploramos os desafios de liderar times de dados, desde como estruturar uma equipe eficiente, até como manter a motivação e oferecer feedbacks construtivos. Bruno também fala sobre a importância de ser visto como um líder inspirador e não apenas como um chefe, além de dividir suas estratégias para se destacar como gestor. Se você está interessado em saber como alavancar sua carreira em Engenharia de Dados e obter insights sobre o futuro das áreas de Engenharia e AI, este episódio é essencial. Bruno Almeida compartilha sua visão sobre liderança, motivação e os desafios de gerir equipes em um setor dinâmico e em constante evolução. Entrevistado: Bruno Almeida https://www.linkedin.com/in/brunoalsantos/ Host: Rodrigo Santana https://www.linkedin.com/in/rodrigo-santana-0ab041128/ </video> <video> FinOps no BigQuery com Marcelo Costa. Description: No episódio de hoje do DataCast, recebemos Marcelo Costa para uma discussão sobre FinOps no BigQuery. Marcelo compartilha sua vasta experiência em otimização de custos e gestão financeira em ambientes de dados, focando em como as organizações podem obter uma visão clara dos gastos no BigQuery e controlar seus custos de maneira eficiente. Exploramos o uso das tabelas de metadados do BigQuery para observar métricas de custo e identificar oportunidades de economia. Durante a conversa, Marcelo explica como entender as estruturas de custo do BigQuery, tanto para pipelines de dados quanto para o armazenamento. Ele oferece insights sobre práticas recomendadas para otimizar custos, como o uso de particionamento, clustering e bucketing, além de estratégias para evitar consultas ineficientes, como o famoso "Select *", que podem aumentar significativamente as despesas sem gerar valor. Se você está procurando maneiras de implementar uma governança eficaz de custos no BigQuery ou quer aprender como identificar workloads que podem estar impactando seus gastos sem o devido controle, este episódio é imperdível. Marcelo também compartilha como ferramentas como Alvin podem ajudar a detectar anomalias nos custos e como o uso de cotas pode ser uma solução prática para manter as despesas sob controle. Entrevistado: Marcelo Costa https://www.linkedin.com/in/mesmacosta/ Host: Rodrigo Santana https://www.linkedin.com/in/rodrigo-santana-0ab041128/ 1 - focus finops: https://focus.finops.org/ 2 - artigo big data is dead: https://motherduck.com/blog/big-data-is-dead/ 3 - artigo aws redshift estudo big data: https://www.amazon.science/publications/why-tpc-is-not-enough-an-analysis-of-the-amazon-redshift-fleet Maximize o impacto do seu ambiente de dados e comece sua jornada FinOps, conecte sua Data Warehouse free: https://console.alvin.ai/auth/signup </video> <video> Data Experience for Leaders Description: O workshop Data Experience for Leaders é um evento online essencial para profissionais de dados que desejam explorar e implementar as mais recentes tecnologias na construção de plataformas de dados eficientes e econômicas. Durante este evento, abordaremos uma gama de tópicos essenciais para a modernização e otimização de plataformas de dados, incluindo uma visão abrangente de tecnologias e soluções inovadoras. Tópicos abordados: Gerenciamento de Custos de Cloud: Estratégias para otimizar investimentos em nuvem com ferramentas e técnicas para monitoramento e controle de custos. Modernização de Plataformas de Dados: Abordagens e melhores práticas para atualizar suas infra estruturas de dados através de estudos de caso sobre modernizações bem-sucedidas. Discussões sobre Plataformas de Dados (Proprietárias e Open-Source): Comparação de soluções proprietárias e de código aberto com benefícios e desafios de cada abordagem. Governança de Dados: Importância da governança na era dos dados com estruturas, soluções e políticas para garantir conformidade e segurança. Boas Práticas para Maximizar ROI de Plataformas de Dados: Estratégias para criação de plataformas de dados modernas para maximizar o retorno sobre o investimento através do alinhamento de iniciativas de dados com objetivos estratégicos de negócios. Quem deve participar: Diretores e Executivos de Dados. Chief Data Officers (CDOs). Chief Information Officers (CIOs). Líderes, gestores/coordenadores e líderes técnicos de projetos de dados. </video> <video> Construindo uma plataforma de dados do zero com Diogo Kamikoga Description: No episódio "Construindo uma plataforma de dados do zero," o convidado Diogo Kamikoga compartilha sua experiência em liderar a criação de uma plataforma de dados robusta e escalável, partindo do zero até um sistema que gera valor real para o negócio. Ele explora como estruturar uma plataforma com alta observabilidade e manter a eficiência, mesmo com o crescimento contínuo de dados e usuários. Diogo também fala sobre os desafios e aprendizados de construir uma plataforma que suporta mais de 1 mil clientes recorrentes, processando aproximadamente 50 eventos por fim de semana, tudo com uma equipe enxuta. Ele destaca as melhores práticas para otimização de recursos e manutenção da escalabilidade enquanto garante a confiabilidade do sistema. Além disso, o episódio aborda como é possível alinhar a tecnologia às necessidades do negócio, mantendo a plataforma em constante evolução para suportar novas demandas. Se você quer entender mais sobre como construir uma plataforma de dados sólida desde o início, este episódio é essencial! Entrevistado(a): Diogo Kamikoga Linkedin: https://www.linkedin.com/in/kamikoga/ Host: Rodrigo Santana https://www.linkedin.com/in/rodrigo-santana-0ab041128/ </video> <video> O que é Ingestion Ops? e qual a sua importância para construção de plataforma de dados. Description: No episódio de hoje do DataCast, contamos com a participação de Marcus Félix para discutir um tema crucial na construção de plataformas de dados: Ingestion Ops. Marcus explica o que é Ingestion Ops e como essa prática se torna essencial para garantir que os dados sejam capturados, processados e disponibilizados de forma eficiente e escalável. Exploramos a importância de uma arquitetura robusta de ingestão de dados como parte fundamental de uma plataforma de dados moderna. Ao longo da conversa, Marcus compartilha sua experiência no uso de diferentes tecnologias para ingestão em batch e real time, como Apache Airflow e Apache Kafka. Ele nos explica como essas ferramentas possibilitam uma integração contínua e confiável de grandes volumes de dados, além de destacar as melhores práticas para gerenciar esses fluxos de informações em tempo real. Além disso, discutimos uma questão importante: por que é crucial focar na construção de uma plataforma de dados em vez de apenas criar pipelines individuais? Marcus também oferece sua visão sobre as diferenças entre processamento de dados em ferramentas como Databricks e Amazon EMR, destacando as vantagens e desafios de cada uma em diferentes cenários. Entrevistado(a): Marcus Felix https://www.linkedin.com/in/marcus-felix/ Host: Rodrigo Santana https://www.linkedin.com/in/rodrigo-santana-0ab041128/ </video> <video> Engenharia e Analytics: O Caminho para Produtos de Dados Lucrativos Description: Neste episódio do DataCast, mergulhamos no mundo da Engenharia de Dados e Analytics com um convidado especial que é referência na criação de produtos de dados que geram valor real para as empresas. Vamos explorar, junto com o Anderson, a jornada desde a concepção até a implementação de soluções que não apenas organizam e analisam dados, mas também impulsionam a receita e transformam a maneira como os negócios operam. Anderson Dourado compartilha insights valiosos sobre como utilizar a ciência de dados para construir produtos que entregam resultados concretos para os clientes. A conversa passa por casos de sucesso, como o desenvolvimento de análises profundas de dados até virar produtos de dados para as empresas em setores como Telecom e Financeiro com impactos direto para os usuários finais. Se você está interessado em entender como a combinação de engenharia de dados e analytics pode ser usada para criar soluções inovadoras e rentáveis, este episódio é imperdível. Aprenda com a experiência de quem já trilhou esse caminho e descubra as estratégias para transformar dados em produtos que fazem a diferença. Entrevistado: Anderson Dourado Linkedin: https://www.linkedin.com/in/anderson-dourado/ Host: Rodrigo Santana https://www.linkedin.com/in/rodrigo-santana-0ab041128/ Convidado: Nilton Ueda https://www.linkedin.com/in/niltonkazuyukiueda/ </video> <video> Alteryx como Plataforma de Dados Moderna Description: Neste episódio do DataCast, recebemos Paulo Gallo, um especialista em Data e AI com vasta experiência no uso do Alteryx como uma plataforma de dados moderna. Durante a conversa, Paulo compartilha sua visão sobre como o Alteryx tem se destacado no mercado, facilitando a transformação e análise de dados em um ambiente cada vez mais complexo e dinâmico. Exploramos as funcionalidades que tornam o Alteryx uma ferramenta poderosa para profissionais de dados, desde a automação de processos até a capacidade de integrar diversas fontes de informação em análises avançadas. Paulo também nos conta sobre suas experiências práticas, revelando como ele tem utilizado o Alteryx para resolver desafios reais em diferentes indústrias. Se você está interessado em entender melhor o papel do Alteryx na modernização das plataformas de dados, este episódio é essencial. Não perca as dicas e insights valiosos que Paulo Gallo compartilha sobre como tirar o máximo proveito dessa ferramenta em seus projetos de dados. Entrevistado: Paulo Henrique Gallo https://www.linkedin.com/in/paulohgallo/ Host: Rodrigo Santana https://www.linkedin.com/in/rodrigo-santana-0ab041128/ </video> <video> Simplificando a Engenharia de Dados com Mageai e DuckDB na Nuvem AWS Description: Neste episódio do DataCast, conversamos com Davi Gomes, um especialista em engenharia de dados com vasta experiência em simplificar processos complexos na nuvem AWS. Davi compartilha suas abordagens inovadoras utilizando Mageai e DuckDB para transformar a maneira como as empresas lidam com grandes volumes de dados, tornando as operações mais eficientes e acessíveis. Davi detalha como a combinação dessas tecnologias está revolucionando o cenário de data engineering, desde a ingestão até a análise dos dados. Exploramos como o Mageai facilita a automação e o gerenciamento de pipelines de dados, enquanto o DuckDB oferece uma solução poderosa e leve para consultas analíticas, tudo isso em um ambiente cloud-native na AWS. Se você está buscando maneiras de otimizar seus processos de engenharia de dados e quer entender como essas ferramentas podem ser aplicadas para maximizar o valor dos seus dados, este episódio é imperdível. Davi Gomes traz insights práticos e exemplos do mundo real que certamente irão inspirar profissionais da área a repensarem suas estratégias de dados. Entrevistado: Davi Gomes https://www.linkedin.com/in/davigs/ Host: Rodrigo Santana https://www.linkedin.com/in/rodrigo-santana-0ab041128/ </video> <video> Delta Lake, o que não te falam sobre a Modern Data Stack. Description: Neste episódio do DataCast, temos o prazer de receber Henrique Villela, um experiente especialista em Data Engineering e Arquiteto de Soluções, para uma conversa profunda sobre as verdades e os mitos da Modern Data Stack, com um foco especial em Delta Lake. Henrique compartilha sua experiência prática e revela o que muitas vezes não é dito sobre a adoção do conceito de Data Lakehouse. Durante a entrevista, Henrique discute detalhadamente a arquitetura de Data Lake em sua empresa, explorando desde a quantidade de pipelines e tabelas até as tecnologias que suportam essa estrutura. Ele aborda de forma franca as razões que levaram sua equipe a adotar o Data Lakehouse, comparando-o com o Data Lake convencional, e compartilha insights sobre os desafios e vantagens dessa transformação, incluindo a escolha pelo Delta Lake após testar outras engines. Se você quer entender os principais desafios, custos e tendências futuras do Data Lakehouse, este episódio é essencial. Henrique não hesita em compartilhar suas experiências reais, incluindo os maiores problemas enfrentados, as features favoritas de sua equipe, e como ele vê a evolução contínua do Data Lakehouse para atender às demandas crescentes das empresas. Não perca! Entrevistado(a): Henrique Villela https://www.linkedin.com/in/henrique-v-136846bb/ Host: Rodrigo Santana https://www.linkedin.com/in/rodrigo-santana-0ab041128/ </video>

Contacts and Links

Description

Aprenda e se atualize sobre projetos e tecnologias Dados e Inteligência Artificial (Data & AI)!

Aqui, você encontra conteúdos ricos e objetivos produzidos por especialistas apaixonados pelo que fazem:

🎥 Rodrigo Santana – Especialista em Engenharia de Dados, compartilha insights e boas práticas para a construção de pipelines robustos, modelagem de dados eficiente e otimização de plataformas de dados.

🎥 Felipe Santana – Especialista em Data Science, Machine Learning e Inteligência Artificial, traz tutoriais práticos, estudos de caso e tendências para ajudá-lo a transformar dados em decisões e geração de valor.

Nosso objetivo é simplificar temas complexos estratégias que estão moldando o futuro da tecnologia.

💡 Inscreva-se agora no canal e acompanhe também no linkedin.
🔗 Rodrigo Santana (https://www.linkedin.com/in/rodrigosantanaf/)
🔗 Felipe Santana (https://www.linkedin.com/in/felipesf/)

Videos from channel