大数据开发工程师岗位分析

最近一年大数据火爆异常,各类培训班开课广告满天飞,不少作开发的朋友也想转到大数据这一行,在投递简历的时候进场被几个岗位搞迷糊,他们是大数据分析师,大数据研发工程师,大数据建模工程师,大数据挖掘工程师。我会根据前同事所在公司的相应岗位,列出岗位职责和要求,供你们借鉴。web

大数据开发工程师

腾讯 大数据研发工程师

职位描述:面试

岗位职责:

负责数据接入、数据清洗、底层重构,业务主题建模等工做;数据库

负责金融大数据总体的计算平台开发与应用;编程

岗位要求:

计算机或相关专业本科以上学历;svg

有5年及以上大数据平台开发方面相关工做经验;工具

熟悉数据仓库和数据建模的相关技术细节,有编程经验,熟悉JAVA语言;熟悉SQL/Hadoop/Hive/Hbase/Spark等大数据工具oop

具备海量数据处理经验,或有互联网行业数据挖掘工做经验者优先;学习

有第三方支付或金融业务经历者优先考虑;大数据

顺丰科技

职位描述:spa

岗位职责:

一、负责大数据系统的开发工做;
二、指导协助同事解决平常工做中的问题
三、对系统存在的问题进行跟踪和定位并及时解决;
四、严格执行工做计划,主动汇报并高效完成任务保证部门及我的工做目标实现。

任职要求:

一、计算机、软件工程等相关专业,本科及以上学历,具备3年及以上Java开发经验;1年及以上互联网或大数据分析工做经验优先;
二、 熟悉Hadoop或Spark生态相关技术,包括MapReduce、hdfs、Hive、Spark等,1个以上大数据平台项目实施经验; 熟悉Oracle或MySQL数据库技术;
三、具备BI系统的开发实施经验,可以独立开发设计数据仓库、ETL设计、Cube建模、OLAP开发、报表开发等;必定的应用系统分析与设计能力,有良好、规范的编程习惯和文档编写习惯;
四、有较强的学习能力,对技术有钻研精神,并有较高的热情,热衷于新技术、新理论、新开发实践的学习和实践。

平安科技

职位描述:

工做年限:2年以上

职位描述:

一、负责hadoop/spark平台技术引进和推广,并能结合用户需求快速落地推广;

二、负责大数据分析需求设计和开发,包括数据集市、实时分析、数据展现等的开发,并交付生产,确保输出成果;

三、负责项目成果在公司内的推广应用、培训,以及对外对内合做交流,不断提高公司的技术和应用能力。

招聘要求:

一、计算机科学、应用数学、物理学等相关专业,本科以上学历;

二、具备2年以上BI/报表相关工做经验,熟练掌握hadoop hive开发,有必定调优经验;

三、能熟练使用sqoop等做为etl工具,有tableau/qlikview开发经验;

四、有良好的口头和书面表达能力;

五、良好的结构化问题解决能力。

注:以上岗位要求国家统招学历,本科及以上学历须要有学位证书。

横向对比

相同的大数据开发工程师职位在不一样的互联网公司,岗位职责不同,相应的岗位要求差别也比较大。不过,核心技能要求相近:
1. 熟悉hadoop集群
2. 熟悉hive
3. 熟悉Java
4. 有必定的BI开发经验
5. 善于沟通,善于分析(软技能,须要不断培养和提高)

以上应该是大数据开发岗位的基本要求。所以,在面试该岗位前,首先基础技能必定要知足,而后在看岗位职责中还有哪些其余技能要求。