Curs Online de Tecnologies de Batch Processing

Programa acadèmic

El curs de Tecnologies de batch processing és de 6 crèdits ECTS, preveu una dedicació de l'estudiant de 150 hores (25 hores per crèdit) i té una durada aproximada de 4 mesos.

• Continguts

En aquest curs es donen a conèixer les tecnologies de processament per lots (batch processing), que responen a l'emmagatzematge, el processament i l'anàlisi de grans volums de dades en llargs períodes de temps. Aquestes tecnologies es presenten tant des d'un punt de vista conceptual com des d'un punt de vista pràctic, a través de la resolució d'un cas pràctic per al qual s'utilitzen diverses eines especialitzades.

1. Mòdul 1. Introducció als sistemes i el processament batch
2. Mòdul 2. Introducció al big data
3. Mòdul 3. Captura, preprocessament i emmagatzematge de dades massives
4. Mòdul 4. Gestors de recursos per al processament de dades massives
5. Mòdul 5. Processament batch de dades en entorns big data
6. Mòdul 6. Planificació i automatització de processos

• Resultats d'aprenentatge

En aquest curs adquiriràs els coneixements, les habilitats i les competències següents:

Knowledge [K]  -  SKill [S]  -  Competence [C] 

1. [K] Identificar el sistema d'emmagatzematge de dades més adequat per a un determinat projecte o tipus d'informació.
2. [K] Comprendre els mecanismes d'extracció i transformació de dades, ja sigui a partir d'una única font de dades o fent ús de múltiples fonts de dades.
3. [K] Identificar els punts crítics en un projecte d'intel·ligència de negoci, big data o anàlisi de dades, així com les febleses principals que puguin dificultar la finalització reeixida del projecte.
4. [S] Conceptualitzar i dissenyar un flux de treball que permeti resoldre problemes específics entorn d'un projecte d'intel·ligència de negoci, big data o anàlisi de dades.
5. [S] Analitzar, conceptualitzar, dissenyar i desenvolupar aplicacions per a la resolució de problemes específics en el context d'un projecte d'intel·ligència de negoci, big data o anàlisi de dades.
6. [S] Treballar en un entorn virtual per a la realització d'aplicacions en el context d'un projecte d'intel·ligència de negoci, big data o anàlisi de dades.
7. [C] Desenvolupar el pensament crític i autocrític en l'anàlisi, la conceptualització i el disseny de projectes d'intel·ligència de negoci, big data o anàlisi de dades.
8. [C] Dissenyar, desenvolupar i gestionar projectes d'intel·ligència de negoci, big data o anàlisi de dades, tenint en compte l'evolució de les tecnologies, els llenguatges de programació i les necessitats d'empreses, d'institucions i, en general, de la societat.
    

Pots consultar el pla docent del curs a través d'aquest enllaç.

Aquest curs correspon al nivell 7 del Marc europeu de qualificacions (EQF), equivalent a un nivell de màster.

Objectius

L'objectiu central del curs de Tecnologies de batch processing és proporcionar als estudiants una visió profunda del processament per lots, concretament de com funciona, quines són les seves aplicacions pràctiques i com s'integra amb altres tecnologies.

Objectius específics

• Entendre l'evolució històrica dels sistemes batch.

• Entendre el context en què es fan servir aquests sistemes.

• Conèixer les tècniques bàsiques per a l'ús de sistemes batch en entorns clàssics.

• Entendre els conceptes i les definicions formals associades als conceptes de big data i afins.

• Identificar els elements tecnològics necessaris en qualsevol projecte basat en l'ús de big data.

• Conèixer les metodologies més adequades per a la implementació de sistemes de big data.

• Conèixer les principals eines disponibles en l'ecosistema de big data, especialment dels ecosistemes Apache Hadoop i Apache Spark.

• Construir models que generin coneixement com a resultat d'una anàlisi basada en tecnologia big data.

• Conèixer el funcionament bàsic de les eines i els entorns (frameworks) principals de big data, com ara HDFS o Apache Spark.