Pular para o conteúdo

Curso Hadoop Spark Hive Big Data Admin Class Bootcamp

Hadoop Spark Hive Big Data Admin

O instrutor Shivgan Joshi está disponibilizando GRATUITAMENTE na Udemy o curso Hadoop Spark Hive Big Data Admin Class Bootcamp Course NYC.

Abaixo a descrição do curso

Introdução Curso Hadoop Big Data

  • Introdução ao Curso
  • Principais comandos do Ubuntu
  • Compreender NameNode, DataNode, YARN e infraestrutura Hadoop

Instalação do Hadoop

  • Instalação do Hadoop e comandos HDFS
  • Mapreduce baseado em Java
  • Hadoop 2.7 / 2.8.4
  • Aprenda os comandos do HDFS
  • Configurando Java para mapreduce

Introdução ao Cloudera Hadoop e estudo da certificação Cloudera

SQL e NoSQL

  • Instalação SQL, Hive e Pig (mundo RDBMS e mundo NoSQL)
  • Mais Hive e SQOOP (Cloudera – Sqoop e Hive na Cloudera.
  • Drivers JDB.
  • Pig
  • Introdução ao NoSQL, MongoDB, instalação do Hbase

Entendendo os diferentes bancos de dados

Hive

  • Partições e Bucketing do Hive
  • Tabelas externas e internas do Hive

Spark Scala Python

  • Instalações e comandos do Spark
  • Planilhas Spark Scala Scala
  • Hadoop streaming e Map Reducing Python
  • PySpark – (Python – Básico).
  • RDDs.

Executando o Spark-shell e importando dados de arquivos csv

PySpark – Executando RDD

Projetos de médio prazo

  • Extraia dados do csv online e mova para o Hive usando a importação do hive
  • Extraia dados do spark-shell e execute a redução do mapa para a primeira página do fox news
  • Crie dados no MySQL e, usando SQOOP, mova-os para o HDFS
  • Usando o Jupyter Anaconda e o Spark Context, execute a contagem no arquivo que tem a primeira página do Fox news
  • Salve dados brutos usando vírgula delimitadora, espaço, tabulação e barra vertical e mova-os para o contexto de faísca e o shell de faísca

Dados de transmissão – fluxo de dados

  • Transmissão de mensagens Kafka

Para começar o seu aprendizado, é simples ! Basta ter uma conta na Udemy e CLICAR AQUI para ser redirecionado ao curso !

Essa foi uma dica do Rodinei Ferreira

O curso é em inglês. Caso você ainda não domine o idioma, agora é a hora de começar ! Há diversos cursos excelentes que também são gratuitos, como divulgado no link abaixo:

https://www.profissionaloracle.com.br/2019/05/25/usa-learns-curso-gratuito-de-ingles/

Quão útil foi este post ?

Clique em uma estrela para classificar o post

nota média 5 / 5. Contagem de votos: 4

Sem votos ! Seja o primeiro a classificar !

Deixe um comentário

O seu endereço de e-mail não será publicado. Campos obrigatórios são marcados com *

plugins premium WordPress