二、企业大数据痛点分析
多年前,企业关注信息化和互联网化,近几年关注更多的是云计算、移动化和社交化。无论哪种技术趋势,都给企业的数据处理和分析带来不少难题。数据量的激增、数据多样性和复杂性、数据安全的问题,都成为企业面临的挑战。为了进一步了解企业的真实需求,此次调查针对大数据时代的企业痛点进行分析。
从上图来看,企业在大数据存储和处理上的难点分布比较均匀,所占比例最高的为数据安全(18.98%),排在第二的是系统性能瓶颈(18.42%),第三位的是数据类型多样化(18.01%)。其他还有数据分析效率低(15.24%)、数据读写瓶颈(14.96%)和存储压力(14.40%)。
选项之间的差距非常小,也说明这六项都被认为是企业数据存储和处理的难点,其中数据安全是企业最关注的问题。在大数据环境下,很多企业正在重新思考信息安全策略,保护数据资源不被侵犯。
在大数据时代,企业面临的挑战可以从上图中看出一些端倪。缺乏专业的大数据人才(26.99%)成为企业面临的最大挑战,其次是非结构化数据的分析和处理(26.65%)、传统技术难以处理大数据(25.27%)以及新技术门槛过高(21.13%)。
大数据相关人才的欠缺将会成为影响大数据市场发展的一个重要因素。据Gartner预测,到2015年,全球将新增440万个与大数据相关的工作岗位,且会有25%的组织设立首席数据官职位。大数据的相关职位需要的是复合型人才,能够对数学、统计学、数据分析、机器学习和自然语言处理等多方面知识综合掌控。未来,大数据将会出现约100万的人才缺口,需要社会、高校和企业共同努力去培养和挖掘。
面对文本、图片、视频等非结构化数据,企业并不擅长处理。从上图的调查结果可以看出,企业目前最迫切需要解决的是如何对这些数据进行分析,所占比例达到38.96%。其次是与其他数据源进行集成(32.50%)、如何保存这些数据(14.72%),以及数据安全问题(13.82%)。
《驾驭大数据》一书曾写到,数据的核心是发现价值,而驾驭数据的核心是分析。分析是大数据最关键的环节,尤其对于传统方式难以应对的非结构化数据,人们最先想到是把它们转化为结构化数据,然后再处理和分析。
与企业对结构化数据安全性的关注不同,非结构化数据的安全问题在企业中缺乏应有的重视。但据统计,高达80%的商业数据均以非结构化的形式保存。非结构化数据的安全问题也迫在眉睫,企业需要提前做好预警和规划。