书信之家 > 职责 >

大数据开发工程师岗位职责

时间: 新华 职责

明确职责可以建立员工之间的有效沟通机制,避免因职责不清而推卸责任,从而建立良好的工作关系。写大数据开发工程师岗位职责有什么要注意的呢?这里给大家带来大数据开发工程师岗位职责,希望对大家有所帮助。

大数据开发工程师岗位职责篇1

职责:

1.负责金融银行大数据系统相关模块的数据架构及研发实施工作

2.依据业务场景、分析需求提供技术解决方案并加以实现;

3.与客户业务部门对接,解决数据建模、报表和报告在系统开发遇到的问题;

任职资格:

1.具备3年以上DW系统建设经验,了解BI系统,有数据管理经验,有维度建模相关经验,了解数据仓库建设过程中的挑战与问题

2.精通多系统数据融合、清洗、转换、整合,具备海量数据加工处理相关经验

3.熟悉业界数据仓库建模方法、元数据管理、数据质量体系管理

4.掌握大型数据库开发技术(ORACLE/DB2等),有丰富的数据库模型设计和优化经验

5.熟练掌握Unix/Linux常规命令、工具及Shell编程

6.掌握一门或多门编程语言优先,如Java、Python、scala等

7.熟悉Hadoop、spark、kafka等大数据生态相关技术,有相关实践经验着优先8.良好的语言沟通与表达能力和自我驱动动力9.具备银行项目设计、开发、优化等经验者加分

大数据开发工程师岗位职责篇2

职责

1、负责公司产品运营相关网站后端快速响应开发;

2、负责公司运营支持相关系统开发;

3、负责设计和开发一些内部工具,提高网站整体性开发效益,保证一定的质量;

4、负责相关APP接口开发;

5、配合移动部门与产品部门实现服务器端相关接口开发。

任职资格

1、计算机或相关专业。

2、熟练使用PHP进行程序开发,至少一年以上的PHP项目开发经验,有模板开发经验;

3、熟悉Linux系统,至少一年以上Linux平台开发经验;

4、掌握WEB编程相关知识JavaScript,CSS,XML,HTTP协议;

5、熟悉大数据量下数据库(MSSQL、MySQL)的性能管理及优化,具有一定的数据库规划能力;

6、有大型网站开发经验者优先;

7、较强的责任心及团队合作精神,有独立解决问题的能力。

大数据开发工程师岗位职责篇3

职责:

1、完成日常任务开发及代码优化;

2、完成公司现有项目(tp5开发)的更新迭代;

3、参与公司产品的设计,以及完成相应功能模块的开发,调试;

4、保质保量完成团队分配的任务。

任职资格:

1、3年以上php开发经验,从事过电信增值业务者优先;

2、熟练使用thinkphp5或laravel框架;

3、熟悉Unix/Linux操作系统,会使用git或svn等版本控制工具;

4、熟悉mysql数据库,熟练sql查询语句;

5、熟悉memcache或redis等缓存技术;

6、熟悉html、css、javascript、jquery框架和ajax等前端技术。

大数据开发工程师岗位职责篇4

1、家电产品内部结构及装配设计,有智能家电开发经验者优先;

2、负责参与新产品整体结构设计方案设计,确定产品的结构设计方案和项目计划,完成样机试制,确定零部件的详细设计;

3、能够结合工业设计、市场反馈、用户体验、产品品质综合确定产品的结构设计方向;

4、负责样品分析,参与试产、对产品可靠性、工艺性、合理性负责。

大数据开发工程师岗位职责篇5

职责:

1、负责大数据平台的技术和产品的设计、开发、优化和维护;

2、负责大数据平台设计文档编写,线上产品的维护;

3、负责系统性能优化,解决各类潜在系统技术风险,保证系统的安全、稳定、快速运行;

4、负责整个产品平台的搭建、多维数据库建设及管控流程设计;

5、参与指标设计,数据建模,负责将数据模型在系统中实现;

6、负责数据抽取、数据交换、实时计算等框架研究及相关产品的研发;

7、负责追踪整体产品过程及质量把控。

任职要求:

1、专业技能:精通Hadoop生态圈中的一项或几项技术,深入了解Hadoop及相关组件的部署及调优;设计或开发过大容量,高性能,高可用,易扩展的分布式系统;熟悉实时计算/流式计算系统,至少熟悉一项Nosql技术;具有扎实java功底及开发能力;对hadoop,hive,hbase,spark等相关源码有一定了解;

2、学历背景:计算机相关专业本科及以上学历;

3、工作经验:3年以上JAVA开发经验及1年以上大数据研发经验

4、能力素质:具有出色的抽象设计能力,思路清晰,善于思考,良好的团队合作能力、沟通能力、较好的自学能力,具有敬岗爱业的精神。

5、有团队管理经验者优先。

大数据开发工程师岗位职责篇6

职责:

1、负责公司云计算业务相关系统的开发、升级、优化工作。

2、参与相关业务逻辑后台架构设计、系统建模、数据库设计、核心代码的编写及后台服务程序的研发和编写。

3、独立完成完整功能测试和发布,准备相关的技术文档,协助解决各种技术问题。

4、进行详细设计、代码开发,配合测试,高质量完成项目。

5、按照项目计划,按时提交高质量代码,完成开发任务。

任职资格:

1、2年以上PHP开发经验;精通PHP+MySQL,熟悉OOP编程思想和MVC框架,有整体项目开发经验。

2、熟练使用JavaScript,jQuery熟悉AJAX、JSON数据交互,对Mysql数据库有丰富的经验及熟悉优化。

3、熟悉PHP缓存技术、了解高并发、负载均衡处理技术。

4、有移动开发经验,能完成主流应用工具接口的二次开发,能为业务提供接口支持者优先。

5、有良好的编码习惯,具有高度的责任心、良好的沟通能力和团队协作精神。

大数据开发工程师岗位职责篇7

1、负责数据仓库和大数据处理模块的架构设计和开发;

2、负责实现基于Spark框架的分布式计算框架的设计和开发工作;

3、负责Spark技术研究和通用数据平台的性能调优;

4、负责大数据项目中,基于kafka、flume、sparkstreaming、SparkSQL等相关技术的海量数据的处理、分析、统计、挖掘工作。

5、熟悉Scala/Java语言,对Scala/Java原理、底层技术有深入研究者优先;

6、有过海量数据系统开发经验者优先;

7、熟悉Hadoop/Spark生态系统组件的使用,至少有2年以上的Spark开发经验;

8、写过推荐系统的优先考虑

大数据开发工程师岗位职责篇8

职责:

1、负责数据库的安装、配置、监控、实时备份、恢复和管理;

2、负责数据清理及系统间的数据迁移;

3、根据需要负责数据库设计包括表结构、表、索引等的设计;

4、负责编写SQL、触发器、存储过程等;

5、负责原有SQL优化,原有存储过程维护。

工作要求:

1、2年以上数据库开发或Java软件开发经验;

2、熟练使用Linux系统,熟悉表结构设计、SQL优化,熟练编写存储过程;

3、熟悉Oracle、Mysql数据库运行机制、体系架构;

4、掌握Oracle数据库维护,能对业务需求和故障及时反馈和处理;

5、具较强的责任心和学习能力,有团队合作精神、沟通协调能力、承压能力。

大数据开发工程师岗位职责篇9

职责:

1.负责公司大数据业务集群的运维工作确保高可用;

2.负责基础运维、故障定位、容量规划、扩容及性能优化;

3.设计实现大规模分布式集群的运维、报警监控和管理平台;

4.参与业务架构设计,在设计阶段给出可运维性改进建议;

5.深入研究大数据业务相关运维技术,持续优化集群服务架构,探索新的大数据运维技术及发展方向。

任职资格:

1.大专以上学历,2年及以上大数据运维工作经验,熟悉hadoop/hbase/hive/Yarn/Spark等分布式相关技术,熟悉源码尤佳,至少掌握python/shell中的一种语言,接受优秀应届毕业生;

2.了解大数据平台应用架构,具备常见问题的基本分析和解决能力;

3.熟悉Linux操作系统的配置、管理及优化,能够独立排查及解决操作系统层面的问题;

4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web应用/中间件及主流开源数据库的使用和配置。

大数据开发工程师岗位职责篇10

职责:

1、参与微信开发、小程序项目功能编码及完成项目技术攻关;

2、独立完成网站前后台的功能开发;

3、负责数据库优化、程序性能优化;

4、能独立理清产品需求,完成代码编导;

岗位要求:

1、大专以上学历,三年或以上相关工作经验;

2.精通PHP+MYSQL编程

3.熟练使用一种PHP框架,ThinkPHP、Yii2框架优先;

4.熟练的进行MySQL数据库设计和优化;

5.熟练使用PHP缓存技术

6.对前端语言Html、Div+CSS、JS、jq有所了解;

7.熟悉常见的短信接口,熟悉支付宝、微信等支付接口的集成.

8.有微信开发、小程序项目、商城开发经验者优先

大数据开发工程师岗位职责篇11

职责:

1.负责设计和实现手机卫士大数据BI平台;

2.不断完善数据产品的架构设计,应用开发和新技术迭代;

3.配合业务,产品,根据不同的业务需求,灵活快速地完成具有挑战性的项目,为业务提供有价值的数据分析和预测。

任职要求

1.计算机软件相关专业本科及以上学历,至少3年以上工作经验;

2.认可技术与平台在BI的价值,能够深入业务领域,通过使用数据分析和挖据技术,让业务生成的海量数据产生更大价值。

3.熟练掌握大数据技术:包括Hadoop,Spark,Storm,Hive,Presto,Parquet,Flink,Druid,OLAP,ElasticSearch等等。

4.具备良好的编程能力和代码风格,熟练掌握Java,Python等语言,熟练使用SQL,并具有较强的优化能力。

5.需要有很强的开发和架构设计能力,特别是在大数据的分布式和实时处理领域,对存储引擎和查询引擎的原理和优化都具备比较深入的理解。

6.有一定的数据挖掘和机器学习算法能力,包括推荐系统,深度学习等技术领域。

7.拥有正直、积极、宽容的品质,学习能力强,并且善于沟通合作。

大数据开发工程师岗位职责篇12

职责:

1、独立负责工作小组,并对下级成员进行监督;

2、具备资源整合以及对软件项目全局把控的能力;

3、负责软件项目的系统设计和需求分析;

4、制定软件项目开发计划,并按时完成功能模块的设计、开发以及编程任务;

5、积极配合并完成主管下达的任务,并能够对软件部门的发展规划提出意见;

任职条件

1、大数据相关开发经验3年以上,至少具备2年以上java开发经验;

2、有基于hadoop的数据抽取、转换、加载的开发相关经验;

3、熟练掌握hadoop生态的相关知识,如hive,hbase,flume.kafka,storm,spark,mapreduce等;

4、熟悉Linux操作系统。熟悉linux各项基本操作,至少掌握一门脚本语言;

5、熟练数据仓库,对多维数据建模有深入理解;

6、有BI数据平台、数据仓库、日志采集、多维数据仓库设计、开发、架构经验者优先;

7、思维敏捷,有较强的钻研学习能力,较好的沟通能力、团队合作;

56290