UNIDAD ZACATENCO DEPARTAMENTO DE ... - Cinvestav

proceso NameNode del sistema de archivos HDFS.
MapReduce 19
En el archivo mapred-site.xml se puede configurar, entre otros aspectos, el
nodo y el puerto donde se va a ejecutar el proceso JobTracker, a través de la
propiedad mapred.job.tracker. Además, se puede configurar la cantidad de memoria
heap que pueden utilizar las tareas map y reduce, a través de la propiedad
mapred.child.java.opts. La memoria heap es el área de memoria dinámica donde se
cargan los programas mapreduce y los datos a procesar. Por defecto, se asignan 200
Megabytes a cada tarea map o reduce. Ver código 2.4.
1
2
3 mapred . job . t r a c k e r
4 nodo s e r v i d o r : p u e r t o
5
6
7 mapred . c h i l d . java . opts
8 −Xmx200m
9
10
Código 2.4: Estructura interna del archivo de configuración mapred-site.xml
En el archivo hdfs-site.xml se puede especificar, entre otros aspectos, el tamaño de
cada split de un archivo, a través de la propiedad dfs.block.size (por defecto el valor
es de 67108864 bytes que corresponden a 64MB). Por otra parte, también se puede
configurar el factor de replicación de los splits (por defecto el valor es de 3), a través,
de la propiedad dfs.replication. Ver código 2.5.
Cinvestav Departamento de Computación