CPD (Centro de procesamientos de datos)

Evaluación del sistema Yahoo! S4 Para Proceso
Masivo de Datos en Tiempo Real
Memoria proyecto fin de carrera

03/06/2013

Evaluación del sistema Yahoo! S4 Para Proceso Masivo de Datos en Tiempo Real

A Juanjo y Pepe.
A mi hermana y mis hijos. Para que les sirva de inspiración.
A mi mujer, mi madre, y mi suegra. Por hacer la vista gorda y permitirme
escaquear de mis obligacionespaternales para cerrar esta etapa.
A Fatos por proponer un proyecto tan interesante como éste.
A mis amiguetes, y a los compañeros de Zeus por las ideas.
A mi padrino por meterme en esto de la informática.
A Indra por el tiempo desasignado.
A Oriol, por la pelota.
Al sistema planetario, por darme más horas de luz en mayo.

Proyecto Fin de Carrera

Página: 2 / 137

Evaluación del sistemaYahoo! S4 Para Proceso Masivo de Datos en Tiempo Real

Títol: Evaluación del sistema Yahoo! S4
Para Proceso Masivo de Datos en Tiempo Real
Autor: Víctor Naranjo
Data: 10 de juny de 2013
Director/Ponent: Fatos Xhafa
Departament: Llenguatges i Sistemes Informàtics
Titulació: Enginyeria informàtica (2003)
Centre: Facultat d’Informàtica de Barcelona (FIB)
Universitat:

Proyecto Fin de CarreraUniversitat Politècnica de Catalunya (UPC) BarcelonaTech

Página: 3 / 137

Evaluación del sistema Yahoo! S4 Para Proceso Masivo de Datos en Tiempo Real

DADES DEL PROJECTE
Títol del projecte

Evaluación del sistema Yahoo! S4 Para Proceso Masivo de Datos en
Tiempo Real

Nom de l’estudiant:

Víctor Naranjo Rubio

Titulació:

Enginyeria informàtica (2003)

Crèdits:

37,5Director/Ponent:

Fatos Xhafa

Departament:

Llenguatges i Sistemes Informàtics

MEMBRES DEL TRIBUNAL (nom i signatura)
President:

Jordi Delgado Pin

Vocal:

Raimón Elgueta Monto

Secretari:

Fatos Xhafa

QUALIFICACIÓ
Qualificació numèrica:
Qualificació descriptiva:
Data:

10 de juny de 2013

Proyecto Fin de Carrera

Página: 4 / 137

Evaluación del sistema Yahoo!S4 Para Proceso Masivo de Datos en Tiempo Real

1. Contenidos

Proyecto Fin de Carrera

Página: 5 / 137

Evaluación del sistema Yahoo! S4 Para Proceso Masivo de Datos en Tiempo Real

1.1. Índice
1.

Contenidos ........................................................................................................................5
1.1.

Índice.............................................................................................................................6

1.2.

Figuras ...........................................................................................................................8

1.3.

Tablas ............................................................................................................................9

1.4.

Fórmulas yfunciones ...................................................................................................10

1.5.

Glosario ........................................................................................................................11

1.6.

Acrónimos y abreviaturas ............................................................................................15

2.Introducción ....................................................................................................................16
2.1.

Descripción del proyecto ..............................................................................................17

2.2.

Objetivos ......................................................................................................................182.3.

Motivación y necesidad................................................................................................19

3.

Procesamiento masivo paralelo en tiempo real: Contexto ..............................................20
3.1.

Paralelismo: conceptos, hardware, e infraestructuras .................................................21

3.1.1.

Antecedentes: Taxonomía de...