大数据主要涉及的内容有哪些?可以从事哪些岗位
大数据主要涉及的内容有哪些?可以从事哪些岗位
大数据发展趋势一路向好,尤其是在实现落地之后,大数据在各个行业的应用,开始快速扩展,行业人才需求也由此开始增长。大数据处理的流程,从数据获取、到存储、计算、分析、展现等各个环节,都需要专业的技术支持,对应到不同的岗位,各个岗位共同组成一个完整的数据团队。
大数据工作岗位及技能要求
1、大数据项目经理
工作内容:项目需求、进度、质量、成本管理。
岗位要求:有IT项目管理经验,尤其是数据项目的实施经验。
2、大数据开发工程师
工作内容:主要是基于Hadoop、Spark等平台上面进行开发,各种开源技术框架平台很多,需要看企业实际的选择是什么,但目前Hadoop、Spark仍然占据广大市场。
岗位要求:精通Java技术知识,熟悉Spark、kafka、Hive、HBase、zookeeper、HDFS、MR等应用设计及开发。
3、大数据产品经理
工作内容:大数据相关产品规划设计,需要与需求部门及技术部门沟通协调。
岗位要求:首先要对行业了解,(比如说如果是银行业,需要对银行的业务要非常懂,如果是能源化工业,需要对能源化工行业的业务要非常懂),其次还要懂大数据方法论。
4、数据分析师
工作内容:收集,处理和执行统计数据分析;运用工具,提取、分析、呈现数据,实现数据的商业意义,需要业务理解和工具应用能力。
岗位要求:掌握专业数据分析工具和数据分析方法。
5、数据挖掘工程师
工作内容:主要负责数据建模、机器学习和算法实现;商业智能,用户体验分析,预测流失用户等。
岗位要求:需要过硬的数学和统计学功底以外,对算法的代码实现也有很高的要求。
6、数据架构师
工作内容:平台选择,技术架构设计,应用设计和开发,测试和部署;需要平台级开发和架构设计能力。
例如(Hadoop方向架构师):懂Hadoop生态圈,基本上所有的产品都得熟悉,要懂得性能调优,能够结合业务选择合适的产品,给出合理的技术架构方案。