互联网的快速发展,尤其是存储技术和设备的发展,让传统统计学上的数据和信息成长为今天的大数据。对很多人来说,大数据是新奇而陌生的。有人盲目排斥,有人则盲目崇拜。对于当前的大数据的发展状态或者其发展特性,中培教育专家对此发飙了自己的看法。
他表示,目前我们要正确认识大数据,首先就应该认清以下事实:
基本事实1:人才是最重要的
大数据虽然带来很多变革,影响深远,但这并非全是数据的功劳。大数据只是个宾语,如果缺少主语,则构不成一个完整的句子,而人就是主语。任何大数据项目都是由人提出、由人审核、由人实施、由人完善、由人监督甚至由人结束的。可以说,大数据完全是由人推动的。
数据本身确实存在价值,大数据技术也很重要,计算机处理能力也重要,但这些都不是关键要素,重要的是人,尤其是那些面对繁琐杂乱的数据仍有清醒头脑,能提出明确需求和目标之人。在未来,首席信息官(CIO)可能比首席CEO更重要,决策也可能由CIO在进行数据分析的基础上进行,而且这些人还可能决定着未来大数据的发展方向。
对企业来说,收集数据很重要,但更重要的是培养大数据人才,尤其是CIO,数据人才将是企业未来竞争中的利器。
基本事实2:目前收集到的大数据只是很少的一部分
信息处理能力有限时期,人们普遍采用采样方式来收集数据,这种方式难免会忽略掉很多数据,而随着计算机技术发展和云计算的兴起,信息处理能力大幅提升,采样获得的少量数据已经没多大作用,因为人们可以采集到海量的数据。在海量数据基础上进行分析,所得出的结论准确度更高,因而这种方式渐渐成为主流。不过很显然,人们处理数据的方法并未跟上时代进步,在处理数据时难免会忽略掉很多数据。
根据某家大数据研究公司的调查:大多数企业在进行数据分析时,其分析数据量只占据他们所拥有的总体数据量的12%。被忽视掉的数据量占比近九成。企业之所以这么做原因可能是避免被“煮沸海洋”战略拖累,减少数据分析成本,也可能缺少相关专业的数据分析工具。可以说这种方式好处是成本低,但其风险很高,被忽视掉的数据里可能隐藏着对企业发展至关重要的信息。
基本事实 3:大数据的发展离不开技术人员的推动
数据分析有数据、数据分析、数据分析结果三部分,数据是本来就存在的,关键是如何对其进行整理、分析,然后找出关联性,将数据转化为有价值的信息。而这一切都离不开数据人才。根据麦肯锡预测,2019年,全球将缺少至少19万能对大数据进行分析的科学家。
目前大数据领域对数据专家的需求量猛增,而且随着大数据越来越普及,数据专家的需求量必然会更多。与大数据相关的岗位也会兴起,如未来建设智能社会的人才等。而且根据目前数据专家的薪酬来看,在美国,基础类的薪酬为12万美元/每年,那些更为高级的岗位其薪酬更高。薪酬高,需求量大,将来必然会吸引众多人。
基本事实 4:大数据涉及到多种技术
数据处理是个相当复杂的过程,需要有各种不同的技能,虽说借助工具(如Hadoop)的帮助,能大大简化数据处理过程,减轻人们的负担,但就拿常用的Hadoop工具来说,人们需要掌握Java 编程技能、理解MapReduce、linux系统等,而且还需将数据转化为有价值的信息,还可能需要了解统计知识、业务流程、图表设计、SQL技能等。
因此,要成为一个大数据人才并不容易,至少得深入钻研,懂得各种必备的技能,同时也要灵活运用,还要善于发现数据的关联性等。
基本事实 5:每个人都与大数据密切相关
目前,很多政府都使用大数据进行管理,传统的管理在面对海量数据时显得很笨拙且臃肿,而使用大数据管理则做到有得放矢,能轻松处理各种数据,理清思路,让管理变得轻松且高效。
企业使用大数据寻找潜在客户,对客户全方位定位、分析,找出客户喜好,以及最近的购买倾向。如企业生产了某种新型设备,而又通过大数据得知某客户正打算扩大生产,急需设备,因而企业就可以用电子邮件通知客户;或者某酒商刚从外国运回了一批质量高等的葡萄酒,那么,则可以运用大数据挖掘出潜在客户,并对他们予以提醒;又或者某家化妆品通过数据分析显示,上次某客户在店内购买的口红快用完了,则可以通过电子邮件向该客户推荐口红。
大数据对个人的影响更是深远,事实上,不管政府、企业还是机构使用大数据,最终都会落实到个人上。所以大数据涉及所有人。
当然,关于大数据的事实还有很多,而且随着人们对大数据的认识加深,也会有更多的大数据事实暴露出来。