François Chung, Ph.D.

Tag: yarn

Fonaments de Hadoop

Fonaments de Hadoop

Formació Cognitive Class, MOOC (2020). Aquesta ruta d'aprenentatge presenta Hadoop, que és un marc de codi obert per a l'emmagatzematge distribuït i el processament de big data. La formació cobreix contingut que és fonamental per a l'èxit de qualsevol persona en aquest àmbit, explicant el disseny conceptual d’Hadoop, introduint MapReduce, YARN (Yet Another Resource Negotiator) i Hive, i després explicant com utilitzar Hadoop i manipular dades sense l’ús de codificació complexa.

Curs 1: Hadoop 101

Temes principals:

  • Introducció a Hadoop;
  • Arquitectura de Hadoop i HDFS;
  • Administració de Hadoop;
  • Components de Hadoop.

Curs 2: MapReduce i YARN

Temes principals:

  • Introducció a MapReduce i YARN;
  • Limitacions de Hadoop v1 i MapReduce v1;
  • Arquitectura de YARN.

Curs 3: Moviment de dades en Hadoop

Temes principals:

  • Escenaris de càrrega;
  • Ús de Sqoop;
  • Descripció general de Flume;
  • Ús de Data Click.

Curs 4: Accés a dades de Hadoop usant Hive

Temes principals:

  • Introducció a Hive;
  • Hive DDL - Llenguatge de definició de dades;
  • Hive DML - Llenguatge de manipulació de dades;
  • Operadors i funcions de Hive.

Referències

Formació

Hadoop 101 (certificat del curs)
Hadoop Foundations – Level 1 (insígnia de certificació)
MapReduce and YARN (MapReduce i YARN, certificat del curs)
Hadoop Programming – Level 1 (insígnia de certificació)
Moving data into Hadoop (Moviment de dades en Hadoop, certificat del curs)
Hadoop Administration – Level 1 (insígnia de certificació)
Accessing Hadoop data using Hive (Accés a dades de Hadoop usant Hive, certificat del curs)
Hadoop Data Access – Level 1 (insígnia de certificació)
Hadoop Foundations – Level 2 (insígnia de certificació)

Articles relacionats

Fonaments de Spark (formació Cognitive Class)
Especialització en ciència de dades (formació Coursera)

Més informació