Programa do Curso
Introdução ao Google Colab e Apache Spark
- Visão geral do Google Colab
- Introdução ao Apache Spark
- Configurando o Spark no Google Colab
Processamento de Dados com o Apache Spark
- Trabalhando com RDDs e DataFrames
- Carregando e processando grandes conjuntos de dados
- Usando o Spark SQL para consultar dados estruturados
Análise Avançada com o Spark
- Aprendizado de máquina com o Spark MLlib
- Realizando análise de dados em tempo real
- Computação distribuída com o Spark
Visualização e Colaboração no Google Colab
- Integração do Colab com bibliotecas de visualização populares
- Fluxos de trabalho colaborativos com cadernos do Colab
- Compartilhamento e exportação de resultados
Otimização de Fluxos de Trabalho de Big Data
- Ajuste do Spark para melhor desempenho
- Otimização do uso de memória e armazenamento
- Escalando fluxos de trabalho para grandes conjuntos de dados
Big Data na Nuvem
- Integração do Google Colab com ferramentas baseadas em nuvem
- Utilizando armazenamento em nuvem para big data
- Trabalhando com o Spark em ambientes distribuídos na nuvem
Estudos de Caso e Melhores Práticas
- Revisão de aplicações reais de big data
- Estudos de caso usando o Apache Spark e o Colab
- Melhores práticas para análise de big data
Resumo e Próximos Passos
Requisitos
- Conhecimento básico de conceitos de ciência de dados
- Familiaridade com o Apache Spark
- Habilidades de programação em Python
Público-Alvo
- Cientistas de dados
- Engenheiros de dados
- Pesquisadores que trabalham com big data
Testemunhos de Clientes (3)
Como usar dados de satélites abertos para aplicações reais
Tshering Dorji - Druk Holding and Investments
Curso - Advanced Geographic Information Systems (GIS)
Máquina Traduzida
Fazendo Exercício
Joe Pang - Lands Department, Hong Kong
Curso - QGIS for Geographic Information System
Máquina Traduzida
Exemplos práticos nos permitiram ter uma experiência real de como o programa funciona. Boas explicações e integração de conceitos teóricos e como eles se relacionam com aplicações práticas.
Ian - Archeoworks Inc.
Curso - ArcGIS Fundamentals
Máquina Traduzida