hadoop是什么意思?跟大数据有什么关系?
1.hadoop是什么意思?
Hadoop是一个具体的开源框架,是存储和计算海量数据的工具。
二、hadoop与大数据的关系
首先,大数据本身涉及到一个庞大的技术体系。从学科来看,涉及到数学、统计、计算机,还有社会学、经济学、医学等学科,所以大数据本身的知识面还是很大的。
从目前大数据领域的产业链来看,大数据领域涉及数据采集、数据存储、数据分析和数据应用,不同的环节需要不同的技术,但这些环节往往依赖于大数据平台,Hadoop是目前比较流行的大数据平台之一。
经过多年的发展,Hadoop平台已经形成了一个比较完整的生态系统,而且由于Hadoop平台是开源的,很多商业大数据平台也是基于Hadoop搭建的,所以对于初接触大数据的技术人员来说,开始学习Hadoop是一个不错的选择。
目前,Hadoop平台的功能正在不断完善,不仅涉及数据存储,还涉及数据分析和数据应用。因此,对于当前的大数据应用开发者来说,整体知识结构往往是围绕大数据平台来组织的。随着大数据平台逐渐开始在传统行业落地,大数据技术人员会越来越依赖大数据平台。
目前从事大数据开发的工作可以分为两类。一个是大数据平台开发,这通常是R&D级别的工作。不仅岗位附加值比较高,未来发展空间也比较大,但是大数据平台的发展对从业者的要求比较高。目前很多研究生毕业后都会从事大数据平台开发工作。
另一类是大数据应用开发岗位,其任务是基于大数据平台(Hadoop等)开发行业应用。).在产业互联网时代,大数据应用开发岗位的数量还是比较多的,大数据应用开发岗位对从业者的要求也比较低。