大数据开发工程师的主要职责(精选15篇)
大数据开发工程师的主要职责 篇1
职责:
1. 负责机票酒店大数据项目的评估、设计及关键模块研发;
2. 参与公司大数据平台及联机分析系统的建设;
3. 机器学习算法讨论、评估及算法的最终编码实现;
4. 数据平台开发规范制定,数据建模及核心框架研发;
任职要求:
1. 本科及以上学历,计算机或数学相关专业,三年以上相关工作经验;
2. 掌握Java、Python、Scala等 中的一到两种语言;
3. 熟悉Mongodb、Hive、Hbase、Redis等NoSQL数据库开发和调优;
4. 熟悉数据相关开源框架和工具,如ZooKeeper、Spark、Flink、Impala、Kylin 等;
5. 对数据结构和机器学习算法有一定的了解;
6. 具有海量数据处理、数据挖掘、数据分析相关项目的工作经验者优先;
7. 有机票酒店等旅行行业数据开发经验者优先。
大数据开发工程师的主要职责 篇2
职责:
1、负责公司项目应用监测数据,分析软件大数据平台的代码开发;
2、负责大数据体系架构设计和应用产品的研究;
3、负责大数据平台及应用场景的构建、部署、测试;
4、编写软件研发相关技术文档;
5、编写产品研发相关任务单计划,阶段性代码、技术方案和软件产品及时提交至配置管理理库;
6、Spark程序的研发,sqoop脚本开发和商家用户行为等离线分析数据;
7、kudu,kylin等技术调研,编写软件研发相关技术文档;
8、SUNMI数仓设计架构以及ETL流程开发;
9、建立多维度,多体系的用户标签体系以及用户行为数据库。
岗位要求 :
1、本科以上学历,4年以上?工作经验,2年以上Hadoop平台的相关研发经验,具有良好的需求分析,方案设计,架构设计,程序编写、测试能力;
2、熟悉J2EE或Python平台开发,有良好的Java或Python语言功底;
3、了解Linux/Unix操作系统,了解脚本编程(Shell/Python其中一种);
4、具备Data Center资源管理(YARN)、监控(ClouderaManage)、调度(Azkaban)等系统研发经验者优先,具备分布式系统研发经验者优先;
5、熟悉hadoop以及其?生态圈系统上的hive、hbase、sqoop、spark、spark-streaming等技
术,懂hadoop源码者优先;
6、熟悉Kylin有OLAP平台设计和开发经验优先;
7、具有应用大数据技术处理TB级以上数据的项目开发经验者优先;
8、有较清晰的代码编写规范,逻辑性强,工作态度认真,良好沟通能力和团队合作精神。
大数据开发工程师的主要职责 篇3
职责:
1.负责公司环保大数据平台的架构与搭建;
2.负责需求分析,根据客户应用需求规划大数据平台架构;
3.负责将大数据平台部署至私有主机群、私有云或公有云;
4.负责在企业内部进行数据平台原型开发与数据实时交互、存储性能测试;
5.负责与数据挖掘算法交互的架构设计与开发。
任职要求:
1.计算机相关专业,全日制本科以上学历;
2.具有3年以上大数据相关应用开发经验,有Java开发经验更佳;
3.至少熟悉一种流行的大数据编程框架,如Spark,Storm,Flink等;
4.熟悉大数据生态圈常用技术如RocketMQ,Kafka,Flume,Zookeeper等;
5.熟悉Hadoop安装、调试、发布配置应用,熟悉Linux操作系统更佳;
6.至少熟悉TIDB,MySQL,SQLServer其中一种数据库;
7.学习能力强,对技术有热情,关注技术发展方向;
8.具有工业物联网、智慧型环保项目背景者优先。
大数据开发工程师的主要职责 篇4
职责:
1、 负责基于Hadoop/Spark平台架构的开发、设计和布局 ;
2、 完成系统框架的设计和核心代码的编写;
3、 针对海量的用户行为数据进行统计、分析与挖掘,不断提高系统运行效率;
4、 负责对数据进行分析,为项目组提供大数据技术指导及分析手段支撑;
5、 负责大数据平台的性能监控和持续优化;针对需求提供大数据分析技术解决方案 ;
6、 大数据平台的运维工作,持续完善大数据平台,保证稳定性、安全性;
7、 熟练使用大数据ETL数据抽取工具;
8、领导安排的其他工作。
任职资格:
1、 3年互联网行业开发经验,计算机或相关专业本科以上学历;
2、 精通Hadoop大数据平台架构,具有扎实的Java/Python等开发语言;并可以开发高效可靠的代码;
3、 具有较强的数据分析、数据挖掘的能力;
4、 熟悉spark、Hive、storm等计算框架者优先,对分布式存储和计算原理有较深的理解;
5、 严密的数学思维、突出的分析和归纳能力、优秀的沟通表达能;
6、 个性开朗,对技术钻研好学、逻辑思维能力强,沟通能力优秀,有团队合作精神。
大数据开发工程师的主要职责 篇5
职责:
1、负责公司大数据平台建设;
2、根据业务需求,制定数据仓库和数据分析平台的实施和持续更新;
3、攻克技术难关,保证大数据系统的稳定运行;
4、完成大数据产品的开发。
职位要求:
1、计算机相关专业全日制专科及以上学历,大数据相关经验;
2、熟悉Java或Scala语言,熟悉Spark,Hadoop,Kafka,Hive,HBase,ZooKeeper等大数据相关技术;
3、精通SQL语句并对Redis,Mongodb等NoSQL数据库有一定经验;
4、对于高并发、高稳定可用性、性能、大数据处理有过实际项目产品经验者优先;
5、责任心强,工作踏实,有团队协作精神,沟通能力强者优先。
大数据开发工程师的主要职责 篇6
1. 负责游戏社交产品的后端研发
2. 对后端系统不断改进和优化,提高性能、可用性、安全性和可扩展性
3. 承担项目中重点、难点的技术攻坚
大数据开发工程师的主要职责 篇7
职责:
1.电商平台技术架构设计和系统框架搭建;
2.电商平台核心代码编写,注重编码规范和系统性能;
3.搭建小程序订单系统+即使通讯系统,有关商城及即时通讯经验优先考虑。
4.参与开发过程的代码设计、审核和检查。
职位要求:
熟练掌握PHP开发语言;熟悉PHP/Ajax/JavaScript/XML/Webservice;
对B2B,B2C等电商平台系统有深入的了解,有过1个以上电商平台系统的开发经验,并带领过项目组完成过至少一个电商平台系统的开发工作;
掌握架构设计理论,实践,掌握多种可重用架构机制和模式,掌握流行技术框架和工具;
有大型分布式项目开发经验、微服务架构经验优先、有高并发的系统核心研发经验优先。熟悉门户网站的基本系统架构,对内容发布系统、视频直播点播技术、网站统计分析系统、网站数码商务系统有深入了解;
有良好的沟通能力,具有跨部门协作的经验、推进能力强,责任心强;
熟练掌握缓存技术,网站优化,主机优化,分布式集群技术,负载均衡,消息中间件等;
掌握PHP及MVC架构技术,具备在Linux平台下使用PHP开发网站的经验,可在主机系统配置php+mysql运行环境;
具有PHP缓存技术、静态化设计方面的经验;
学习能力强, 能快速上手新接触的技术. 积极挑战技术难题, 积极向上, 有团队合作精神.
大数据开发工程师的主要职责 篇8
1.、负责系统APP(IOS)开发和维护;
2、对兼容性以及用户体验进行优化;
3、能够根据公司要求,进行IOS独立模块架构设计,功能开发及调试工作;
4、能够根据项目计划独立完成高质量代码;
5、验证和修正开发、测试过程中的问题,保证用户体验和质量。
大数据开发工程师的主要职责 篇9
职责:
1、 参与软件系统的需求调研、分析及设计工作;
2、 参与系统核心模块的程序编码工作;
3、 负责按照公司的开发规范编写相关项目及平台技术文档;
4、 配合项目经理执行开发过程的技术工作。
岗位要求:
1、3年左右工作经验,有2-3个项目开发经验;熟悉Java编程,包括:JSP、Struts、Servlet、EJB、Hibernate、Spring;
2、熟练使用eclipse等Java开发工具,熟悉DevOps平台;
3、精通系统的设计,能够独立完成模块或系统的设计工作;
4、具有J2EE架构经验,或者熟悉SSH架构;
5、精通MySQL或Oracle数据库的开发;具有Struts、Hibernate、EJB或Spring的开发经验;熟悉Socket通讯、HTTP协议、多线程编程者优先;
6、具有中、大型公司工作经验、具有项目管理或团队管理经验者优先;掌握其他主流开发语言的优先;工作积极,积极,认真;
大数据开发工程师的主要职责 篇10
职责:
1、根据产品需求和设计完成兼容性良好的前端页面制作,与后台工程师协作;
2、完成数据交互、动态信息展现,实现数据可视化;
3、拥有良好的设计审美;
4、基于Html5的webapp界面开发;
5、保持代码的高可靠性和可维护性。
任职资格:
1、熟练使用Html5、Html、CSS,CSS3等页面结构和布局;
2、熟练使用响应式页面开发,屏幕自适应;
3、熟练使用Jquery、javaScript,能独立开发;
4、精通WEB标准页面开发,能实现兼容主流界面(IE8及以上、FF、Chrome等主流浏览器);
5、熟悉前端页面代码结构、前端交互性能,页面结构和页面布局,对语义化、结构与内容分离、用户体验有一定的理解;
6、至少有Angular、Vue之一开发经验。
大数据开发工程师的主要职责 篇11
职责:
1、认真分析软件的架构,整理设计者(项目经理)的设计思路之上进行功能设计;
2、独立完成项目经理分配的开发任务,负责程序开发、代码编写;
3、参与项目中遇到问题的讨论会并有效提出解决方案;
4、详细记录测试过程,发现并修复BUG;
5、对现场实施日志中出现的问题及时进行修正;
6、自主学习、追求创新,掌握岗位需要的技能;
岗位要求:
1、本科及以上学历,3年以上的java web应用开发经验;
2、有扎实的Java编程基础,熟悉java开发工具及代码编程,精通SSH,Jsp、Javascript、CSS、Ajax、jQuery等web应用开发技术;
3、熟悉微服务相关设计理念,熟悉高并发、高负载等相关技术,并具有实际开发经验;
4、熟悉各种主流开源框架,精通SpringBoot,Mybatis,JPA,Springmvc,Shiro等开源框架并熟悉其实现原理;
5、熟练操作Linux主机,熟练搭建运行环境集群;
6、熟悉主流关系型数据库(ORACLE、MYSQL等 )的开发应用;
7、了解前端开发技术,比如react,vue,bootstrap等,或国内主流的开发框架;
8、具备较强的团队协作能力和沟通理解能力,责任心强;
9、熟悉系统搭建过程(比如WEB项目搭建),并编写过公用代码(比如:公用DAO、SERVICE层代码);
10、有基于H5的APP、微信开发人员优先考虑。
11、接受过社会培训机构全方面技术培训者优先考虑。
大数据开发工程师的主要职责 篇12
职责:
1、承担项目组重要开发或设计工作,并能够按要求、高质量地完成开发或设计任务;
2、掌握分析设计工具,按照规范的要求,编写设计文档;
3、按照设计的功能,实现模块的代码编写和维护;
4、按公司规范进行编码,并对开发的代码进行单元测试。
任职资格:
1、3年以上工作经验,1年以上企业应用或互联网项目开发经验, 熟练掌握面向对象编程思想和设计模式
2、精通JAVA语言及JDK规范,熟悉一种其他服务端开发语言(如 Python/PHP/GO/Node.js等)者尤佳;
3、熟悉分布式服务、集群式服务开发相关技术
4、熟悉SQL数据库或NoSql数据库
熟悉常见中间件(ActiveMQ,Redis,Dubbo等)的编程接口
5、了解基本的计算机网络原理;
6、逻辑思维能力强,有良好的编程习惯,具备较强的学习能力和钻研精神,熟悉敏捷开发流程;
7、有责任心,有良好的沟通协调能力和团队协作意识;积极上进, 执行力强, 富有创业激情,愿意接受挑战。
大数据开发工程师的主要职责 篇13
职责
1.负责web前端页面开发、维护和优化工作。
2.掌握HTML5/JavaScript/CSS3等Web开发技术。
3.熟练使用React或vue及其全家桶。
4.熟练使用echarts 制作满足ui需求的图表。
5.通过各种前端技术?手段,提?高?用户体验并满?足性能要求。
6.掌握常用的性能优化手段,提升页面性能。
任职资格:
1.至少三年以上前端开发经验;
2.熟练掌握HTML5、CSS3、JavaScript、ES6等
3.熟练使用至少一种JS框架,熟悉Vue或者Reactjs,掌握其原理,能独立开发常用组件;
4.熟练使用前端自动化构建工具,熟悉Webpack,对前端工程化与模块化开发有一定了解,并有实践经验;
大数据开发工程师的主要职责 篇14
1.负责游戏体系的搭建和相应业务需求;
2.强化系统稳定性,健壮性,优化系统性能,提升用户体验;
3.对线上突发问题进行及时响应并解决;
4.相关开发文档的整理与编写。
大数据开发工程师的主要职责 篇15
职责:
1、参与项目的核心功能编码与完成项目技术攻关;
2、协助完成数据库设计、功能设计、架构设计任务;
3、协助完成任务分解、任务检查;
4、协助核心产品技术攻关,新技术的研究。
任职要求:
1、精通PHP+MYSQL编程以及PHP框架(TP、yii2、Zend);
2、熟悉常用Linux操作命令,对数据库优化、PHP缓存技术、静态化设计、数据库安全等方面有自己的见解;
3、熟练掌握XHTML、CSS、DIV、Javascript、jquery等页面技术;
4、熟悉设计模式,具有较强的面向对象分析设计能力,能熟练应用设计模式;
5、有良好的代码习惯,要求结构清晰,命名规范,逻辑性强,代码冗余率低;
6、有良好的沟通表达能力,良好的团队合作精神和高度的责任感,能独立承担任务和有系统进度把控能力。
7. 全日制大专及以上,本科优先考虑。
推荐站内搜索:湖南人事考试网、关于生日的日志、成人高考成绩、江苏省会计从业资格考试报名入口空间伤感日志大全、小学五年级日记、教师资格证面试报名时间2020年、2级建造师报名时间、重庆二级建造师准考证打印、孔乙己读后感