Rethink by ESIC | #Big data

La protección de datos y la privacidad son una de las verticales más importantes de un programa global de ética y compliance. Tradicionalmente, vemos las violaciones a la privacidad como un riesgo regulatorio que las empresas deben mitigar para evitar multas de miles o millones de euros. Esto es absolutamente correcto. Sin embargo, como verás más adelante, proteger nuestros datos también es un asunto estratégico para conseguir nuestros objetivos de negocio.

Personalmente tengo una visión clara de que el Big Data no es un fin en sí mismo sino un medio para tener mayor inteligencia económica en nuestras compañías. Obviamente no debemos caer en los errores del pasado, en el que cada departamento intentaba implementar los desarrollos técnicos por su cuenta.

Descubrir conocimiento de este enorme volumen de datos es un reto en sí mismo. El avance de la tecnología para la gestión de bases de datos hace posible integrar diferentes tipos de datos, tales como imagen, video, texto, y otros datos numéricos, en una base de datos sencilla, facilitando el procesamiento multimedia.

A continuación se muestra el último landscape de Big Data que se ha publicado:

Tecnologías Big Data. Aunque hay soluciones propietarias, la mayoría de las soluciones que hay se basan en software libre. Técnicamente es lo más complejo, pues debes conocer el ecosistema de programas que componen Big Data y sus usos. Una gran parte se basa en HDFS de Hadoop y en procesamiento distribuido en decenas de servidores. Debido a la complejidad de software existen distribuciones que se encargan de alinear las distintas versiones que van surgiendo.

Antes de fijar la mirada en concreto en la formación en Big Data, es necesario un poco de contexto. Desde hace muchos años, recién titulados y profesionales nos hemos ido formando en diferentes ámbitos con la finalidad de especializarnos, bien sea para profundizar en los conocimientos adquiridos o bien para optar a diferentes puestos o empresas.

En los últimos años, se ha popularizado el uso de tecnologías cognitivas, como la computación cognitiva, en el ámbito empresarial. Podríamos situar un hito histórico en 2011, con el triunfo del ordenador IBM Watson en el programa televisivo Jeopardy, un concurso de preguntas y respuestas al que hasta ese momento sólo podían acceder humanos.

El modelo entidad relación es una herramienta que permite representar de manera simplificada los componentes que participan en un proceso de negocio y el modo en el que estos se relacionan entre sí. El modelo entidad relación tiene tres elementos principales:

El Big Data ya es una realidad en nuestras empresas. En mayor o menor medida la mayoría de los sectores están incorporando una estrategía de datos en sus corporaciones, pero el Big Data sólo es una pieza más a incluir en el puzzle que complica la arquitectura de sistemas, incluso en algunos casos, convirtiéndola en un sudoku.

Cada milisegundo se generan ingentes cantidades de datos provenientes de los miles y miles de dispositivos conectados. Estos datos, que aparecen constantemente en la nube, contienen potencialmente gran valor de negocio. Para acceder a ese valor y descubrir los insights ocultos en este océano de unos y ceros necesitamos realizar un procesamiento efectivo de los datos.