Infrastructure for Big Data

Authors

  • Javier Salazar Argonza Universidad Nacional Autónoma de México, Dirección General de Cómputo y de Tecnologías de Información

Keywords:

Big Data, Infrastructure, work frame, analytics, Hadoop, Clusters, Distributed system, Hardware architecture

Abstract

It explores the infrastructure needed to implement a Big Data platform in an institution. The main elements of hardware and software for integrating an architecture solution for Big Data are explored. It also explains the main differences between the commercial distributions of Apache Hadoop for its adoption and use. General suggestions are given for the acquisition of its components.

Author Biography

Javier Salazar Argonza, Universidad Nacional Autónoma de México, Dirección General de Cómputo y de Tecnologías de Información

Responsable de Tecnologías de Información y Comunicación en el área de Acervos Digitales de la Dirección General de Cómputo y de Tecnologías de Información de la UNAM y Técnico Académico de la misma dependencia.

References

ALFOCEA, J. Detenido por amenazas a su alcalde en Redes Sociales, Delitos informáticos. 2015. Revista legal. [en línea]. Fecha de actualización 22 septiembre 2015. [Consulta: 6 de octubre de 2016]. Disponible en: http://www.delitosinformaticos.com/09/2015/ delitos/amenazas-2-delitos/detenido-amenazar-alcalde-redes-sociales

CACHEIRO, Javier. Requisitos Hardware Big Data. Fundación Pública Galega Centro Tecnolóxico de Supercomputación de Galicia, CESGA. [en Línea]. Fecha de actualización: 16 de Marzo de 2015. [Consultado: 25 de Mayo de 2016]. Disponible en: https:// www.cesga.es/es/biblioteca/downloadAsset/id/775

Enauro engineering services, BIG DATA. [En Línea]. [Consultado: 14 de Noviembre de 2016]. Disponible en: http://www.enauro.com/2016/06/10/big-data/

HURTADO, Gork. Big Data y Hadoop. Cloudera vs Hortonworks. Mondragon Unibertsitatea, Investigación en TICs, [en Línea]: [Consultado: 3 Mayo de 2016]. Disponible en: http://mukom.mondragon.edu/ict/big-data-y-hadoop-cloudera-vshortonworks/

JCASANELLA. Introducción a Hadoop y su ecosistema, Ticout Outsourcing Center, Tutoriales de Yellowfin y BI. [En Línea]: Fecha de actualización: 01 de Abril de 2013 [Consultado: 19 Mayo de 2016]. Disponible en: http://www.ticout.com/ blog/2013/04/02/introduccion-a-hadoop-y-su-ecosistema/

LOSHIN, David. Explorando distribuciones Hadoop para gestionar big data. TechTarget S.A. de C.V., Guía Escencial. [En Línea]: Enero de 2016. [Consultado: 14 Abril de 2016]. Disponible es: http://searchdatacenter.techtarget.com/es/cronica/Explorandodistribuciones-Hadoop-para-gestionar-big-data

LURIE, Marty. Big data de código abierto para el impaciente, Parte 1: Tutorial Hadoop: Hello World con Java, Pig, Hive, Flume, Fuse, Oozie, y Sqoop con Informix, DB2, y MySQL. IBM, IBM deveoperWorks. [en línea] 20 de Marzo de 2013 [Consultado: 14 Abril de 2016]. Disponible en: https://www.ibm.com/developerworks/ssa/data/ library/techarticle/dm-1209hadoopbigdata/

MATTHEW, Mayo . Top Big Data Processing Frameworks. KdnuggetsTM, KDnuggets News. [en Línea]: Marzo de 2016. [Consultado: 14 Abril de 2016]. Disponible en: http:// www.kdnuggets.com/2016/03/top-big-data-processing-frameworks.html

O´DELL, Kevin. How-to: Select the Right Hardware for Your New Hadoop Cluster. Cloudera Inc., Cloudera Engineering Blog. [en Línea]: 28 de Agosto de 2013. [Consultado: 28 Mayo de 2016]. Disponible en: https://blog.cloudera.com/blog/2013/08/how-toselect-the-right-hardware-for-your-new-hadoop-cluster/

STEVE, Dertien. Defining the Infrastructure for Big Data Analytics. PTC Inc., El Divan Digital. [en Línea]: 22 de Mayo de 2015 . [Consultado: 11Abril de 2016]. Disponible en: http://blogs.ptc.com/2015/05/22/defining-the-infrastructure-for-big-data-analytics/

The apache software foundation Hadoop. Web site the Apache Software Foundation, Apache Hadoop Project. [en Línea]: 13 de Febrero de 2016. [Consultado: 17 Mayo de 2016]. Disponible en: http://hadoop.apache.org/

TIRADOS, Marible. ¿Es Hadoop el fin del almacenamiento de datos tradicional? Big Data Hispano. [en Línea]. 10 de febrero de 2014. [Consultado: 07 Mayo de 2016]. Disponible en: http://www.bigdatahispano.org/noticias/es-hadoop-el-fin-delalmacenamiento-de-datos/

SÁNCHEZ, José Manuel . ¿QUÉ ES BIG DATA? T2O AdMedia Services, S.L. 2015 [en Línea]. 02 de julio de 2016 [Consultado: 14 Noviembre de 2016]. Disponible en: http:// www.t2omedia.com/ideas/actualidad/que-es-big-data-2/ en maricultura. México: Secretaría de Medio Ambiente, Recursos Naturales y Pesca, 1997. 192-207pp.

Published

2017-03-15