13 Errores típicos al implementar herramientas y software BigData

Se calcula que un porcentaje alto de proyectos de Big Data fracasan o no llegan a cumplir la función para la que fueron creados. En España se calcula que alrededor del 65% de los proyectos basados en Big Data no cumplen con las expectativas y acaban pereciendo antes de tiempo.

¿Los motivos? De distinta naturaleza y todos muy importantes, de ahí que sea esencial valorar todas las cuestiones relacionadas con el presupuesto, la falta de talento especializado y el nivel de calidad de los datos para no dar la razón a estudios que ponen de manifiesto estas realidades.

En la actualidad, según el ‘Worldwide Global DataSphere IoT Devices and Data Forecast’ de IDC, un 30% fracasa en la fase de prueba de concepto, normalmente, porque su implementación es bastante costosa o porque los beneficios finales no están claros.

Asimismo, según Gartner  y New Vantage Partners, en torno a un 80% de los proyectos de Big Data no culminan.

Por todo ello, es necesario identificar posibles problemas antes de llegar a un punto sin retorno en el proyecto e identificar posibles errores en el desarrollo del mismo. Lo mejor para ello, contar con una buena planificación.

¿Cuáles son los errores que pueden llevar al fracaso de un proyecto BigData?

En la actualidad existen múltiples problemáticas que afectan a la selección de una u otra herramienta a veces poco relacionadas con el problema y derivadas de políticas de empresa que complican la tarea de selección.

No identificar los posibles beneficios directos, impacto económico y tiempo de rentabilización de la inversión. Estudios previos que determinen la viabilidad del proyecto propuesto.
Un mal dimensionamiento del problema es intentar abarcar datos no relevantes o de generación manual.
Identificar y seleccionar correctamente las herramientas y sistemas que necesita cada problemática del amplio catálogo existente en la actualidad.
Comprar una herramienta simplemente porque es la más conocida o porque existen otras empresas que la utilizan sin tener en cuenta su conocimiento o evaluar sus verdaderas necesidades u objetivos.
La integración con sistemas preexistentes en la organización no orientados a BigData y la utilización de herramientas no planificadas que incrementen el coste inicial.
La selección de herramientas deberá permitir un escalado dinámico del sistema mediante la inserción de nuevos nodos a los clusters según las necesidades de procesamiento. Deberán poder desplegarse en nubes híbridas para dar más versatilidad.
No realizar un cálculo previo de los costes de subir y procesar todos los datos a la nube lo cual es uno de los factores que escalan el coste de implantación de un sistema de este tipo.
Considerar que la recolección de datos desde diferentes fuentes (máquinas, corporaciones, usuarios) no requieren de preprocesamiento, limpieza o filtrado para su posterior uso. Este uno de los puntos donde más recursos humanos se utilizan.
Falta de cultura de analítica de datos. Si no está arraigado el estudio de los datos preexistente mediante técnicas básicas de estadística como por ejemplo regresiones, desviaciones, no van a introducirse en el campo del análisis a niveles de BigData.
No consultar a los usuarios finales por sus necesidades y que finalmente no se utilicen las herramientas desplegadas. Esto puede deberse a un desconocimiento de las funcionalidades y beneficios que se puede obtener de ella. Falta de formación en el nuevo sistema, tecnologías o algoritmos.
No invertir en expertos que puedan impulsar los proyectos de forma rápida y proporcionen formación al resto de la empresa, evitando la subcontratación ya que el conocimiento obtenido nunca repercutirá positivamente en la empresa.
Dar por hecho que por contar con un proyecto o herramientas BigData los problemas de la empresa quedan resueltos o que la información y los resultados van a obtenerse inmediatamente y que se detectarán los futuros problemas de forma automática.
Pensar que una vez terminado el proyecto no se requieren mejoras continuas ni modificaciones. No utilizando las herramientas adquiridas para continuar mejorando y aprendiendo. Dejando que la inversión realizada por la organización tanto en materiales como en formación quede en el olvido.

Soluciones profesionales Big Data

Son múltiples, como hemos analizado los posibles errores, pero también muchas las soluciones para conseguir el sobresaliente en la implementación de herramientas de Big Data.

Nunca hay que olvidar que si se inicia un proyecto BigData con alguno de estos problemas existe un alto porcentaje de posibilidades de fracasar, pero también son una guía para identificar posibles problemas y cuellos de botella con el fin de alcanzar la meta y sacar un proyecto BigData que esté en continua mejora dando los mejores rendimientos.

En ITCL Centro Tecnológico trabajamos con expertos en Big Data que pueden ayudarte a identificar posibles problemas y a poner solución a los mismos. No hay que olvidar que la información es poder y que ese es el principal elemento diferenciador que deben de cuidar empresas y negocios. Esa información está presente en esos datos que, con seguridad, pueden explotar de la mejor forma.

El cómo, de la mano de profesionales en Big Data y de los que más experiencia atesoren. https://itcl.es/investigacion/electronica-e-inteligencia-artificial/