您的位置:群走网>实用资料>岗位职责>数据工程岗位职责
数据工程岗位职责
更新时间:2023-04-08 13:30:03
  • 相关推荐
数据工程岗位职责

  随着社会一步步向前发展,我们都跟岗位职责有着直接或间接的联系,制定岗位职责有助于提高内部竞争活力,提高工作效率。到底应如何制定岗位职责呢?下面是小编整理的数据工程岗位职责,供大家参考借鉴,希望可以帮助到有需要的朋友。

数据工程岗位职责1

  职责:

  1、依据客户需求完成大数据项目的数据分析及建模;

  2、进行大数据核心算法的编写;

  3、参与项目的需求分析、系统设计、编码工作;

  4、参与开发过程中相关新技术的研究和验证。

  5、协助承担架构性的体系设计和改造工作,配合制定技术实施方案,按照总体设计组织子系统的设计和开发。

  任职要求:

  1、精通数据建模、数据体系建设,具备数据仓库架构设计、模型设计和处理性能调优等相关经验;

  2、具有丰富的基于hadoop体系的数据平台、数据仓库建设经验,精通基于hadoop源码的'开发、优化改造及成功应用案例;

  3、精通hadoop生态体系各项技术,如kafka、flume、hive、impala、hbase、spark等,具有100+节点hadoop集群的开发、运维经验;

  4、具有对大型hadoop集群的硬件规划能力;

数据工程岗位职责2

  职责:

  1、负责大数据平台数据仓库建设、数据分析挖掘工作;

  2、负责大数据的处理、整合及数据建模,协同业务开发人员,将模型算法成果应用到实际业务系统中,并通过可视化工具进行分析成果展示;

  3、基于用户数据,研究用户行为,构建用户画像。

  任职要求:

  1、应用数学、计算机、信息处理等相关专业本科及以上学历;

  2、3年以上大数据开发经验;

  3、熟悉hadoop的大数据生态,精通SQL语法【有较好的SQL性能调优能力,掌握基于Hive或者Spark sql的HQL脚本编写;

  4、具有从数据查询,聚合,分析到可视化的整套实践经验;

  5、熟练使用java或者python、基础扎实、能编写Hive环境下或者Spark sql环境下的UDF;

  6、具备良好的表达和沟通能力、学习能力,具备极强的'团队合作精神,能够承受一定的工作压力。

数据工程岗位职责3

  职责:

  1负责大数据平台、数据仓库多维模型设计

  2负责大数据平台相关生产系统数据的抽取、清洗、转换等工作

  3负责BI平台设计与报表开发工作

  岗位要求:

  1、精通数据仓库建模理论,有参与过2个以上的'数据仓库建设经验;

  2、精通ETL开发,熟悉数据的抽取、常用数据脚本编写、存储过程的编写;

  3、熟悉BI平台,有数据报表设计和开发经验;

  4、熟悉SQL,掌握Oracle、PostgreSQL、MySql等至少一种主流关系数据库;

  5、具备良好的团队协作精神,良好的沟通能力;

  6、供应链、物流行业数据从业经历者优先。

数据工程岗位职责4

  职责:

  1、负责数据挖掘领域的分析研究,包括数据挖掘算法的分析研究,特定工程的数据挖掘模型的需求分析、建模、实验模拟;

  2、负责数据挖掘系统的`开发,包括需求分析、系统设计、系统测试和优化。

  3、负责大数据集成、分析和洞察技术研究,业务建模。包括业务模型、数据模型的生成和应用,关键算法的研究和开发。

  任职要求:

  1、具有深厚的统计学、数学和数据挖掘知识基础;

  2、有较强的数据分析能力,逻辑思考、问题定位解决能力;

  3、具有良好的沟通能力和团队协作精神。

  4、较强的数据处理和分析能力。

数据工程岗位职责5

  职责:

  1、利用数据挖掘、机器学习相关知识和算法,解决工厂业务需求,驱动业务数字化;

  2、利用数据处理和挖掘相关知识实现工厂KPI要求,包括生产线IDC降低,预测性维护等数据挖掘的多方面应用场景实现;

  3、负责数据挖掘项目管理,进度把控,同时针对工厂各方面需求推广数据挖掘和机器学习的主流应用算法和工具,并制定相关的规范和标准;

  4、针对数据挖掘涉及的数据库和业务相关硬件网络架构的.搭建和日常运维支持;

  岗位要求:

  1、本科或以上学历,数学、计算机或者信息工程等相关专业。

  2、有工业领域或AI领域数据分析处理或者相关行业一年及以上工作经验。

  3、熟悉运用各种常用算法和数据结构,有聚类、分类、回归等数据挖掘工作经验优先考虑;

  3、熟悉Linux平台上的编程环境,至少掌握R/Python/C#一门编程语言,有项目应用优先考虑

  4、至少掌握SQL Server/Oracle/MySQL一种数据库,有项目实践者优先考虑

  5、熟悉Hadoop架构、网络通信和数据平台架构设计知识者优先考虑

数据工程岗位职责6

  职责:

  1、负责内容的处理,包括关键词提取、主题分析、类目预测、质量打分等;

  2、负责海量用户行为的分析研究,挖掘优化用户画像,包括人口属性和用户兴趣等;

  3、负责推荐引擎算法的开发,包括各类推荐算法的实现、特征和参数调优、用户体验优化等;

  4、负责数据营销平台策略的开发,包括用户洞察、行业指数趋势预测、各类精准定向算法的实现和优化等;

  5、负责人工智能技术的研究,包括机器学习、知识推理、文本语义理解、计算机视觉等技术;

  6、通过海量数据对用户广告的行为进行深入分析与洞察,提炼和发现业务规律,指导推荐模型特征构建,定位产品相关的数据问题及分析优化;

  7、结合广告投放场景和用户画像进行分析、归纳统计指标建设,协助模型快速定位问题。

  招聘要求及条件:

  1、具备数据挖掘、NLP、机器学习、最优化等算法原理知识背景;

  2、具备推荐系统、精准营销、信息检索等方面的'工作经验优先;

  3、具备大规模分布式计算平台的使用和并行算法的开发经验,对大数据处理及应用有浓厚兴趣;

  4、具有机器学习、数据挖掘、算法优化的基础并具有浓厚兴趣;

  5、熟悉统计原理及检验方法、熟悉数据分析方法;

  6、熟悉分类、回归、聚类、降维等机器学习算法及应用场景;

  7、熟悉Java、Python等,能独立完成相关的数据分析及分析报告相关工作。

数据工程岗位职责7

  职责:

  1、参与公司数据仓库基础平台的建设

  2、参与数据建模及数据仓库应用产品的设计和开发。

  3、参与数据仓库ETL流程的优化及解决ETL相关的技术问题。

  4、通过专项分析,输出专项分析报告,为业务模块的.决策和产品方向提供数据支持

  5、通过市场细分、同期群分析或者AB测试来分析数据,根据数据变化定位产品的运行现状;

  6、其他工作,参与完成各类分析报告、报表等其他指定的工作。

  岗位要求:

  1、本科以上学历,有三年以上互联网数据仓库设计和实现经验。

  2、熟悉数据仓库各类模型建模理论,了解数据仓库数据分层架构,熟悉3NF和多维数据模型设计。

  3、具备Hadoop、Hive、Hbase,Spark,Kylin等大数据技术处理经验,并具有开发经验者更佳。

  4、热爱数据工作,具有学习精神,有超强责任心和上

数据工程岗位职责8

  1、负责整车动力学性能属性管理,整个底盘系统的产品开发交付,包括:悬架系统、轴系统、制动系统和转向系统

  2、负责底盘系统的开发计划(依据项目开发节点),底盘系统零部件结构设计;

  3、负责底盘的性能开发,设计验证CAE仿真及试验跟踪,反馈以及设计优化,如相关的`整车/零部件验证计划

  4、负责项目开发阶段的供应商管理,尤其对高风险供应商的管理

  5、负责底盘系统产品的质量提升、质量改进工作及设计改进

数据工程岗位职责9

  职责:

  1.负责机票酒店大数据项目的评估、设计及关键模块研发;

  2.参与公司大数据平台及联机分析系统的`建设;

  3.机器学习算法讨论、评估及算法的最终编码实现;

  4.数据平台开发规范制定,数据建模及核心框架研发;

  任职要求:

  1.本科及以上学历,计算机或数学相关专业,三年以上相关工作经验;

  2.掌握Java、Python、Scala等中的一到两种语言;

  3.熟悉Mongodb、Hive、Hbase、Redis等NoSQL数据库开发和调优;

  4.熟悉数据相关开源框架和工具,如ZooKeeper、Spark、Flink、Impala、Kylin等;

  5.对数据结构和机器学习算法有一定的了解;

  6.具有海量数据处理、数据挖掘、数据分析相关项目的工作经验者优先;

  7.有机票酒店等旅游行业数据开发经验者优先。

数据工程岗位职责10

  职责:

  1、负责数据库环境建设、维护、安全管理;

  2、负责数据库环境变更、故障异常分析处理;

  3、负责数据库日常运行状况监控、容量规划、架构设计等;

  4、对运行的数据库进行性能分析和优化,并推进优化工作的`有效实施;

  5、支持技术咨询,部分售前交流和文档编写;

  任职要求:

  1、熟悉ORACLE、SQL SERVER等主流数据库,具有2年以上数据库管理及数据集成项目经验;

  2、精通数据库的安装配置,故障处理,备份恢复操作,能够独立完成数据库日常管理和运维工作;

  3、熟悉计算机相关Windows/Linux/UNIX操作系统、Oracle、SQL等数据库的配置和维护;

  4、能够熟练运用RAC/DATAGUARD/GOLDENGATE/STREAMS等高可用技术;

  5、有良好的实施方案撰写能力和丰富的实施经验;

  6、具有良好的逻辑分析能力、沟通能力和协调能力;

数据工程岗位职责11

  1、与营销、研发部门沟通协助,确定项目的milestone与MP schedule;

  2、制定各个工作的详细任务,跟踪任务的执行情况并进行控制;

  3、组织会议,对整个开发过程中的`问题进行解决、检讨;

  4、协调各项目参与人员之间的关系以及临时的工作任务等。

数据工程岗位职责12

  职责:

  1)配合业务伙伴推动思迈特数据挖掘产品的销售,负责售前阶段的客户需求调研、需求分析,完成项目售前方>案的制作、招投标支持以及产品演示;

  2)理解客户具体业务需求,利用思迈特数据挖掘软件,提供明确的大数据分析应用解决方案;

  3)负责具体数据挖掘需求的落地实施工作,进行项目现场业务技术支持、与客户进行技术沟通;

  4)整理行业案例,深入研究分析市场需求趋势、行业知识及发展方向,并进行行业案例与解决方案的`包装和推广;

  5)具有良好的沟通表达能力,抗压能力强,责任心强,接受短期出差;

  岗位要求:

  1)本科以上学历,计算机、软件、数学、统计相关专业毕业,数学功底扎实及研究生学历者优先考虑,2年以上数据挖掘相关工作经验;;

  2)具备大量数据挖掘经验,具备项目建模经验,有自然语言处理、文本分析经验尤佳;

  3)能快速理解客户需求、解决方案编制、模型开发;

  4)至少熟练一门数据挖掘工具,如Python,R等,同时具有Java开发能力优先;

  5)精通数据挖掘和机器学习算法,对深度学些有一定的了解以及应用;

  6)熟悉Linux开发环境,良好的系统编程、数据结构、算法基础、系统设计能力;

数据工程岗位职责13

  岗位职责:

  负责团队现有算法的优化,代码实现以及移植

  负责算法计算性能优化,并推动其上线应用

  基于大规模用户数据,以效果为目标,建立并优化系统的基础算法和策略

  应用机器学习等尖端技术,针对海量信息建模,挖掘潜在价值跟踪新技术发展,并将其应用于产品中;

  跟踪新技术发展,并将其应用于产品中

  协助其它技术人员解决业务及技术问题

  任职资格:

  熟练使用Java、python、scala语言(至少一门),熟悉面向对象思想和设计模式

  具备一年以上机器学习理论、算法的研究和实践经验

  擅长大规模分布式系统。海量数据处理。实时分析等方面的算法设计。优化

  熟悉Hadoop、spark等大数据处理框架

  具备分布式相关项目研发经验(如分布式存储/分布式计算/高性能并行计算/分布式cache等)

  熟悉大规模数据挖掘、机器学习、分布式计算等相关技术,并具备多年的实际工作经验

  对数据结构和算法设计有深刻的理解

  具有良好的分析问题和解决问题的能力,有一定数学功底,能针对实际问题进行数学建模

  良好的逻辑思维能力,和数据敏感度,能能够从海量数据中发现有价值的规律

  优秀的分析和解决问题的`能力,对挑战性问题充满激情

  良好的团队合作精神,较强的沟通能力

数据工程岗位职责14

  相关文件的定义和编写

  2.生产良率和抛料率的监控和改善

  3.生产异常的分析解决

  4.技术人员的班别安排

  5.设备保养的'安排和作业follow

  6.设备故障维修&coordinator

  7.配合新产品导入或者其他需求的试产验证

  8.主管交付的其他事项

数据工程岗位职责15

  职责

  1、负责基于hadoop/spark生态系统、亿级别数据的全文检索,搜索引擎的产品研发;

  2、基于海量用户行为数据和其他数据,分析和研究数据与实际业务的关联关系,并与实际业务应用相结合开发;

  3、负责大数据分析需求设计和开发,承担数据抽取、清洗、转化等数据处理程序开发。

  任职要求:

  1、熟悉Hadoop/HBase/Spark/Storm/Redis/Kafka/ES/Flume技术及其生态圈,具备相关项目开发经验,有数据实时计算项目经验优先;

  2、有搜索引擎全文检索开发经验,如:elasticsearch、solr;

  3、熟悉python、R任意一门开发语言;

  4、有SAAS,PAAS企业级应用平台或者互联网,金融等大型应用平台开发经验优先考虑;

  5、本科及以上学历,计算机/软件工程/统计学/数学等相关专业,互联网/金融等行业3年以上工作经验;

  6、拥有良好的'代码习惯,要求结构清晰、命名规范、逻辑性强、代码冗余率低,代码注释清晰;

  7、熟悉使用svn,禅道等项目管理工具,有良好的团队协作开发经验、

【数据工程岗位职责】相关文章:

数据挖掘工程师岗位职责02-11

数据工程师岗位岗位职责03-08

数据挖掘工程师岗位职责04-08

数据挖掘工程师的岗位职责02-23

数据开发工程师岗位职责02-22

数据库工程师岗位职责10-20

数据挖掘工程师工作的岗位职责03-15

数据仓库工程师的岗位职责04-16

数据仓库工程师岗位职责01-06