Entenda o que é Data Mesh e como implementar em sua empresa 🌐

Fala Data Hackers! Bora abrir mais uma semana com as notícias do mundo dos dados?

Essa é a newsletter do Data Hackers, a melhor forma de iniciar a semana por dentro das principais novidades do mundo dos dados e AI.

Aproveitando, esses são alguns dos destaques de hoje:

P.S.: Ainda não é assinante da newsletter? Clique aqui para se inscrever gratuitamente

Para desvendar os mistérios da Inteligência Artificial e seu impacto na criação de conteúdo, recebemos Leandro Conti e Ahirton Lopes para uma conversa imperdível sobre o uso da IA e os avanços relacionados com a Creator Economy.

Neste episódio do podcast Data Hackers, feito em parceria com a Compasso Coolab no Hacktown 2024, conheçam: Leandro Conti — Vice presidente global de Assuntos Corporativos na Hotmart; e Ahirton Lopes — Head of Data na TIVIT. Eles também contam insights poderosos para turbinar sua produtividade e impulsionar seus conteúdos nessa era digital.

O Briefer (YC S23) ajuda cientistas e analistas de dados a criar visualizações interativas e aplicativos de dados usando uma interface semelhante à do Notion.

Conecte-se às suas fontes de dados, escreva SQL ou Python, colabore por meio de comentários e edição multijogador e execute código em qualquer ambiente de computação que você precisar.

Venha participar com a gente com Lucas da Costa, um dos criadores da ferramenta.

📅 Data: 24.09
🕒 Horário: 20h.

Mais um supletivo essa semana! Desta vez, vamos mergulhar fundo na segurança em projetos de Inteligência Artificial. 🌐🔒

Com a participação especial de Julio S., vamos explorar como é possível hackear modelos de linguagem (LLMs) e discutir as melhores práticas para proteger suas aplicações. Entenda os riscos envolvidos, aprenda a mitigar vulnerabilidades e eleve a segurança dos seus projetos de AI.

📅 Data: 26.09
🕒 Horário: 20h

Data Mesh tem sido o assunto mais hypado em dados nos últimos tempos. Mas afinal, o que é Data Mesh e o que ele traz de diferente? Só pra deixar claro: Data Mesh é um paradigma para arquitetar dados que pode levar a escalabilidade e a democratização desses dados a um novo patamar. Entenda neste guia como esse paradigma funciona e como ele pode ser implementado na sua empresa. (em Inglês)

O Google acaba de lançar o NotebookLM, um assistente de pesquisa personalizável que, usando IA, aprende com as fontes indicadas pelo usuário e é capaz de criar guias de estudo, briefings e muito mais. A IA do NotebookLM é fornecida pelo Gemini 1.5, mais moderno modelo já produzido pelo Google até agora, e o assistente tem tudo pra mudar a forma como lidamos com pesquisas na internet. Confira mais detalhes nesse artigo. (em Inglês)

Artigo interessantíssimo em que o engenheiro e arquiteto de dados Bernd Wessely expõe uma série de questionamentos sobre como a Engenharia de Dados é definida hoje - o que passa pela forma como se espera que os engenheiros façam uso da lógica de cada negócio é ajam quase como desenvolvedores de aplicativos - e porque talvez devêssemos redefini-la. (em Inglês)

O YouTube acabou de anunciar uma série de novos recursos de IA voltados para auxiliar criadores de conteúdo, incluindo geração de vídeos a partir de texto, ferramentas de inspiração impulsionadas por IA e dublagem automática de conteúdos. Confira neste post mais detalhes sobre as novidades, que segundo o YouTube devem turbinar a criatividade dos criadores de conteúdo e não substituí-la. (em Inglês)

Quando não é possível usar um grupo de controle para medir o impacto de uma intervenção, uma boa alternativa é usar a análise de séries temporais para estimar o que teria acontecido sem aquela interferência, o que chamamos de contrafactual. Este artigo apresenta em que situações é possível fazer isso, como o processo é feito passo a passo e ainda quais podem ser suas eventuais limitações. (em Português)

A quantidade de recursos demandada pelos modelos de IA tem sido assunto recorrente nas notícias sobre tecnologia, e um novo estudo feito por pesquisadores da Universidade da Califórnia em parceria com o jornal The Washington Post trouxe um novo dado: para escrever um email de apenas 100 palavras, um data center usando o GPT-4 consome 519 ml de água e 0,14 kWh, energia suficiente para manter 14 lâmpadas LED acesas por uma hora. Confira algumas projeções que foram feitas com base nesse dado. (em Português)

A fintech sueca Klarna encerrou os contratos que mantinha com duas das maiores fornecedoras de software as a service do mercado: a Salesforce, que tem seu programa para dados de venda e marketing como principal produto, e a plataforma de RH e contratação Workday. A intenção da empresa é usar IA para automatizar esses serviços, e a ideia é que outros fornecedores sejam cortados no futuro. (em Inglês)

Nas empresas, muitos engenheiros de dados perdem tempo tentando resolver problemas que outros já resolveram. A ideia deste livro é ser um guia prático que orienta a construção de projetos confiáveis ​​de engenharia de dados de ponta a ponta, da ingestão dos dados até sua observabilidade, com base em padrões de design já testados para diversos problemas de negócio. Cada padrão inclui uma descrição do problema, soluções e consequências. Bem útil para usar frente aos cenários da vida real. (em Inglês)

Acesse nosso canal do slack para mais memes como esse!

Considerando todas as ações dos mercados de capitais do mundo, qual seria a fatia que cada país detém? E como era essa divisão em 1900? Esse Dataviz, feito pelo pessoal do Visual Capitalist, faz justamente essa comparação. Bem interessante para constatar o quanto o mundo mudou em pouco mais de 100 anos (spoiler: as diferenças só se acirraram). (em Inglês)

Meetup: Apache Kafka x Apache Pinot

Meetup: ElasticSearch + Jusbrasil

Python Brasil 2024 (Cupom 10% = DATAHACKERS_NA_PYBR24 )

Obs: gostaria de ter seu evento divulgado aqui? Basta compartilhar ele em nosso canal do slack.