Publicação de Vinicius Rotondo

Estava refletindo o quanto a escolha do modo de armazenamento dos dados são importantes e as vezes ignorada, causando aumento de custos com softwares e hardwares, na live conseguimos ter uma pequena noção de impactos de gastos, incluindo tempo de processamento e espaço de armazenamento, que podem ser bastante significativos no final do mês e maiores ainda ao final do ano.

Que live foi essa! Amassamos o Databricks e o DuckDB em mais de 4 horas de conteúdo técnico. Exploramos as vantagens e desvantagens de cada solução, discutimos engenharia de dados e aprendemos juntos com muita troca de experiência. Isso é a Jornada de Dados! Espero que tenha feito sentido para você, e agradeço a todos que acompanharam até o final. Se não conseguiu assistir ao vivo, o link estará disponível no YouTube / vou deixar aqui nos comentários. Seja bem-vindo à Jornada de Dados

Conteúdo gratuito e de excelente qualidade. Téo Calvo é o cara!

Ontem participei de um live code imperdível na Jornada de Dados conduzido pelo Luciano e pelo Fábio. Durante a live code , foi realizado um comparativo prático entre duas ferramentas poderosas para processamento de grandes volumes de dados: DuckDB e PySpark no Databricks. O desafio era claro: processar 1 bilhão de linhas e avaliar aspectos como desempenho, facilidade de uso, custo e outros pontos essenciais de cada solução. #jornada #Dados

No Lab 10 do Curso Engenharia de Dados com Airbyte, DBT e SQL você vai trabalhar em um projeto de DataOps totalmente prático e bastante completo, integrando diferentes ferramentas e plataformas para implementar uma solução que vai levar os dados brutos do ambiente local para uma área de Staging na nuvem, limpar e transformar os dados e automatizar a criação do Data Warehouse também na nuvem, usando um Modern Data Stack com Airbyte, dbt, SQL e Plataforma Snowflake. Boa aula. #airbyte #dbt #sql #dataops #datascienceacademy

Participei hoje do webinar da Databricks "Delta Lake Uniform: Unificando os Formatos de Tabelas Iceberg, Hudi e Delta Lake", onde foi apresentado o Delta Lake UniForm, uma solução inovadora para unificar os principais formatos de tabelas abertas. Foi incrível aprender mais sobre como essa tecnologia elimina a fragmentação e oferece mais flexibilidade para data lakehouses modernos. E pra fechar com chave de ouro, tivemos até um momento divertido com o jogo Kahoot! Momentos como esse mostram como é valioso acompanhar as tendências e avanços no mundo de dados. #DataLakehouse #DeltaLake #Interoperabilidade #Aprendizado

Pra quem quer aprender a usar Databricks, segue o Téo Calvo que ele vai ensinar dia 29/07 de forma gratuita com um projeto de data science.

Eu e Marcos Haraoka Morais vamos apresentar uma jornada prática sobre Governança de Dados com o Databricks Unity Catalog, especialmente para o setor financeiro.    Neste webinar, vamos explorar como você pode governar seus dados estruturados e não estruturados, modelos de Machine Learning, caso prático e muito mais.    Não perca a oportunidade de fazer perguntas ao vivo! Também estará presente um convidado especial da Databricks - André Barbosa Garanta o seu lugar se inscrevendo agora! https://lnkd.in/dPxDyDK6     #Databricks #Webinar #GovernançaDeDados #UnityCatalog #IA  

🚀Hoje estarei ao vivo com vocês, às 20h, para ensinar como construir seu primeiro pipeline de dados no Databricks com Delta Live Tables {DLT}. 🔥 Você vai aprender: ➡Fundamentos do Databricks e sua interface; ➡ Introdução às Delta Live Tables; ➡ Passo a passo para construir seu primeiro pipeline de dados, desde a ingestão até a análise; ➡Melhores práticas e dicas para otimizar seu pipeline com DLT. Essa é a oportunidade perfeita para aprender, tirar dúvidas em tempo real e conectar-se com uma comunidade de entusiastas de dados. 📅 10 de abril ⏰ 20h 🔗https://lnkd.in/d3ADHYxv 🔔 **Inscreva-se agora** e ative as notificações para não perder a live! #Databricks #DeltaLiveTables #PipelineDeDados #EngenhariaDeDados #AnaliseDeDados

Eu e Willian de Sousa Cavalcante vamos apresentar uma jornada prática sobre Governança de Dados com o Databricks Unity Catalog, especialmente para o setor financeiro.    Neste webinar, vamos explorar como você pode governar seus dados estruturados e não estruturados, modelos de Machine Learning, caso prático e muito mais.    Não perca a oportunidade de fazer perguntas ao vivo! Também estará presente um convidado especial da Databricks - André Barbosa   Garanta o seu lugar se inscrevendo agora!  https://lnkd.in/d3UQbBT7   #Databricks #Webinar #GovernançaDeDados #UnityCatalog #IA