Programa do Curso

Introdução

Visão geral das características e da arquitetura da Apache Spark.

  • Módulos do Apache Spark: Spark SQL, Spark Streaming, MLlib, GraphX
  • RDD, Dataframes, drive-workers, DAG, etc.

Configurar Apache Spark em .NET

  • Preparando a VM Java
  • Executando o .NET para o Apache Spark usando o .NET Core

Começar a trabalhar

  • Criar uma aplicação de consola .NET de amostra
  • Adicionando o driver do Spark
  • Inicializando uma SparkSession
  • Executando a aplicação

Preparação de dados

  • Criar um pipeline de preparação de dados
  • Execução de ETL (Extrair, Transformar e Carregar)

Machine Learning

  • Criar um modelo de aprendizagem automática
  • Preparar os dados
  • Treinar um modelo

Processamento em tempo real

  • Dados de fluxo contínuo processados em tempo real
  • Estudo de caso: monitorização de dados de sensores

Consulta interactiva

  • Trabalhar com o Spark SQL
  • Analisar dados estruturados

Visualização de resultados

  • Representação gráfica dos resultados
  • Utilização de ferramentas de terceiros para visualizar resultados

Resolução de problemas

Resumo e conclusão

Requisitos

  • Experiência de programação em .NET utilizando C# ou F#

Público

  • Desenvolvedores
 21 horas

Número de participantes



Preço por participante

Declaração de Clientes (11)

Cursos Relacionados

Categorias Relacionadas