Construido en la década de 1950, el acueducto de California es una maravilla de la ingeniería que transporta agua desde las cordilleras del norte de California hasta las sedientas comunidades costeras. Pero, ante una sequía potencialmente prolongada, el acueducto de California funciona por debajo de su capacidad, ya que no llega suficiente agua de las fuentes. En lo que respecta al big data, es probable que ocurra justo lo contrario en su organización: demasiado big data, que desborda las orillas del río y causa estragos. Y la situación no hace más que empeorar.
El acueducto de California es una obra de gran belleza. Según describe un artículo de la revista Atlantic:
«Una red de ríos, afluentes y canales lleva la escorrentía del manto de nieve de la cordillera de Sierra Nevada hasta enormes bombas en el extremo sur del delta de San Joaquín». Desde allí, estas bombas hidráulicas impulsan el agua hasta las ciudades de California a través de un acueducto de cuarenta y cuatro millas que atraviesa el estado y vierte el agua en varios embalses locales.
Es probable que su organización tenga algo análogo a un acueducto de big data. Por ejemplo, los sistemas de origen generan datos en diversos formatos, que probablemente pasan por algún proceso de depuración y terminan en formato relacional. Es posible que el exceso de residuos digitales se conserve comprimido en un almacenamiento local o en una ubicación remota. Es un proceso continuo por el que los datos se incorporan, almacenan, trasladan, procesan, supervisan y analizan continuamente en toda la organización.
Pero, con el big data, sencillamente hay demasiado en camino. El autor James Gleick lo describe así: «La información que producía y consumía la humanidad solía desaparecer: esa era la norma, lo habitual. Las imágenes, los sonidos, las canciones y las palabras pronunciadas simplemente se desvanecían. Ahora las expectativas se han invertido. Todo puede registrarse y conservarse, al menos potencialmente: cada interpretación musical; cada delito en una tienda, un ascensor o una calle de la ciudad; cada volcán o tsunami en la costa más remota». En resumen, todo lo que puede registrarse es válido y probablemente se encuentra en algún servidor del mundo.
Así que lo que nos ha traído hasta aquí en términos de arquitectura de TI no podrá manejar la inmensa avalancha de datos que se avecina sin una mejora sustancial de la capacidad y la alineación.
La arquitectura de TI puede concebirse, en esencia, como una vista desde arriba o un plano de diversas estructuras y componentes, y de cómo funcionan en conjunto. En este contexto, nos interesa cómo es hoy el plano general de la empresa, la información, las aplicaciones y los sistemas, y cómo debe ser para satisfacer las necesidades empresariales futuras.
Debemos replantearnos nuestros enfoques arquitectónicos para el big data. Sin duda, algunas empresas —quizá el 10 %— nunca necesitarán aprovechar tipos de datos con estructuras múltiples. Tal vez nunca necesiten experimentar con tecnologías de código abierto ni implementarlas. Recomendar algún tipo de arquitectura de «big data» a este tipo de empresas es contraproducente.
Sin embargo, el otro 90 % de las empresas está despertando y dándose cuenta de que la arquitectura y la infraestructura de TI actuales no podrán satisfacer sus necesidades futuras. Estas empresas necesitan evaluar urgentemente su situación actual y sus necesidades empresariales futuras, y luego diseñar una arquitectura que permita obtener información útil de todos los tipos de datos, no solo de los que encajan perfectamente en filas o columnas relacionales.
La avalancha de big data continuará en el futuro previsible y solo se intensificará a causa del crecimiento exponencial de los datos. Pero este es el desafío: la mente humana tiende a pensar de forma lineal; sencillamente, no sabemos cómo planificar este crecimiento exponencial de los datos, y mucho menos cómo sacarle partido. Por ello, las infraestructuras empresariales, de información, de aplicaciones y de sistemas de la mayoría de las empresas no están preparadas para afrontar la próxima avalancha de big data, y mucho menos para aprovecharla.
¿Quiere estar preparado? Es importante revisar a fondo la arquitectura de TI existente y asegurarse de que la gestión y el procesamiento de datos, las herramientas de desarrollo, la integración y los sistemas analíticos estén a la altura. Y sean cuales sean sus planes de futuro, considere redoblar sus esfuerzos para llevarlos a cabo.
Hasta que pruebas convincentes demuestren lo contrario, es demasiado arriesgado no contar con un plan bien pensado para afrontar los días tormentosos que se avecinan, con demasiado big data.
Este artículo se publica en colaboración con SmartData Collective. La publicación no implica que el Foro Económico Mundial respalde estas opiniones.
Para mantenerse al día con Forum:Agenda, suscríbase a nuestro boletín semanal.
Autor: Paul Barsch dirige los programas de marketing de servicios en la nube, alojamiento y servicios gestionados de Teradata, líder en almacenamiento de datos y analítica.
Imagen: En esta ilustración, tomada en Varsovia el 24 de enero de 2012, se ve un cable de internet en una sala de servidores. REUTERS.