Uma Proposta de Padronização de Aplicações Spark
Aprimorando a forma como desenvolvemos, testamos e mantemos aplicações Spark
panini-tech-lab
Um life long learner na jornada de dados e um difusor de tecnologia para a comunidade. Neste espaço, espero sinceramente que você, caro leitor, tenha uma incrível experiência de consumo de conteúdo 🚀
Latest articles
Arquitetura e Composição de uma Aplicação Spark
Olá, caro leitor! Seja muito bem vindo a mais um post desta série sobre o Apache Spark! O Apache Spark é, indubitavelmente, uma ferramenta extraordinária capaz de proporcionar uma série de funcionalidades à seus usuários de acordo com as mais variada...
Criando e Submetendo Aplicações Spark: spark-submit
Olá, caro leitor! Seja muito bem vindo a mais um post desta série sobre o Apache Spark! Transformar dados em Spark através de suas APIs estruturadas é, sem dúvidas, uma ação fundamental dentro da dinâmica de construção de pipelines em cenários prátic...
Funções Window: Aplicações em Cenários Práticos
Olá, caro leitor! Seja muito bem vindo a mais um post desta série sobre o Apache Spark! Em uma dinâmica prática de obtenção, preparação e carregamento de dados, atuar de modo a garantir uma eficiente análise para os tomadores de decisão é, sem dúvida...
Trabalhando com Tipos Primitivos Complexos
Olá, caro leitor! Seja muito bem vindo a mais um post desta série sobre o Apache Spark! Em qualquer ambiente ou ferramenta, trabalhar com tipos primitivos complexos pode ser considerada uma tarefa desafiadora. À primeira vista, ao deparar-se com elem...
O Guia Definitivo de Transformações em Spark
Um resumo completo sobre métodos de funções utilizadas para criar fluxos de transformações via pyspark
Cruzando Dados com Joins
Olá, caro leitor! Seja muito bem vindo a mais um post desta série sobre o Apache Spark! No último artigo publicado, foi possível navegar em múltiplas funções de agregação capazes de serem utilizadas na construção de conjuntos agregados de dados. No u...
Agregações e Agrupamentos de Dados
Olá, caro leitor! Seja muito bem vindo a mais um post desta série sobre o Apache Spark! No momento atual da jornada de aprendizado, uma série de funções e métodos já foram apresentados aos leitores como elementos capazes de serem aplicados nos mais v...
Filtrando e Ordenando Registros
Olá, caro leitor! Seja muito bem vindo a mais um post desta série sobre o Apache Spark! No ultimo artigo, a criação de literais e a transformação de tipos primitivos foram os temas abordados e representados, respectivamente, através da função lit() e...