当前位置:荟萃吧>办公>文秘>岗位职责>

数据仓库工程师岗位的工作职责(精选20篇)

荟萃吧 人气:2.33W

数据仓库工程师岗位的工作职责 篇1

职责:

数据仓库工程师岗位的工作职责(精选20篇)

1 负责大数据平台、数据仓库多维模型设计

2 负责大数据平台相关生产系统数据的抽取、清洗、转换等工作

3 负责BI平台设计与报表开发工作

岗位要求:

1、精通数据仓库建模理论,有参与过2个以上的数据仓库建设经验;

2、精通ETL开发,熟悉数据的抽取、常用数据脚本编写、存储过程的编写;

3、熟悉BI平台,有数据报表设计和开发经验;

4、熟悉SQL,掌握Oracle、PostgreSQL、MySql等至少一种主流关系数据库;

5、具备良好的团队协作精神,良好的沟通能力;

6、供应链、物流行业数据从业经历者优先。

数据仓库工程师岗位的工作职责 篇2

职责:

参与数据仓库模型设计和开发工作;

负责建立数据分析模型,设计前端报表,数据可视化开发;

负责数据平台项目数据仓库的管理、性能监控及优化等;

负责数据平台的日常运维及优化

职位要求:

大学本科以上学历,3年以上工作经验,包含2年以上数据仓库开发工作经验;

精通数据仓库建设,熟悉常用的模型设计方法;

对数据可视化有丰富的经验,熟悉常用的数据分析方法;熟悉至少一种报表工具开发;

精通数据仓库领域知识和技能,包括元数据管理、主数据管理、数据质量管理等;

熟练使用ETL工具如Kettle、SSIS等进行数据清洗、转换、整合;

熟悉至少两种关系型数据库,如Oracle、SQL Server、PostgreSQL、MySql等主流数据库,精通SQL Server开发和运维者优先考虑;

有完整的数据平台建设经验者优先;

熟悉使用Linux系统及Shell脚本开发,熟练开发Python程序者优先;

熟悉大数据开发框架者优先,如Spark,Flink等;

对新技术好奇爱学习,主动性和责任心强,对数据敏感,逻辑性强,有良好的抗压能力;

团队协作能力强

数据仓库工程师岗位的工作职责 篇3

职责:

1、参与据仓库的长期架构规划,与数据开发,建设共享大数据平台;

2、负责数据平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地;

3、负责来自业务团队数据需求的研发支撑;

4、大规模数据挖掘和机器学习算法的实现和维护;

5、在线和离线海量数据分析平台的开发;

6、负责数据仓库的建设和维护,包括需求调研分析、软件规划、概念模型、设计逻辑、物理模型、数据处理(抽取、清洗、转化)、项目实施管控等;

7、负责制定数据接入和采集规范制定。

任职要求:

1、从事数据仓库领域工作2年以上;

2、熟悉数据建模、ETL设计与应用、报表开发等,并有实际模型设计及ETL开发经验 ;具有良好的编程习惯和文档编写习惯;

3、熟悉数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、性能调优等;

4、掌握大型数据库开发技术,如Oracle、Teradata、DB2、Mysql等等掌握至少其中一种,灵活运用SQL实现海量数据ETL加工处理;

5、了解大数据基础架构和平台 ,具备相关产品(Hadoop、Hive、HBase、Pig、Sqoop、Spark等)项目应用研发经验,有MapReduce开发的实战经验者优先考虑;

6、熟悉linux系统;

7、熟练掌握python语言;

8、熟悉数据可视化的基本方法,有数据可视化的开发经验优先;

9、对数据敏感,具有良好的逻辑分析、责任心强、良好的对外沟通和团队协作能力

数据仓库工程师岗位的工作职责 篇4

职责:

1、基于互联网行业特点构建企业级数据仓库架构,建设PB级共享数据平台;

2、负责数据平台相关数据研发及管理工作,参与制定EDW相关规范并推动实施落地;

3、对海量数据处理的相关需求进行评估及方案设计;

4、负责数据产品如用户画像等模型设计;

5、了解行业前沿大数据处理方法。

任职资格:

1、8年以上数据仓库开发及管理经验,5年以上互联网/电商行业经验;

2、精通数据仓库建设方法论,有大型数据仓库建设项目经验(PB级以上);

3、熟悉HADOOP、HIVE、HBASE、SPARK、FLUME等工作原理;

4、精通HiveSQL,有较丰富的HiveSQL性能调优经验;

5、至少熟练使用Shell、Python、Perl等脚本语言之一;

6、工作认真、负责,有良好的团队合作精神,良好的分析及沟通能力;

数据仓库工程师岗位的工作职责 篇5

职责:

1. 负责数据仓库建设、设计、优化和落地

2. 负责数据ETL任务开发及日常维护

3. 对数据ETL任务进行性能调优及性能瓶颈分析

4. 学习新技术,提高整个平台的计算能力和效率

任职要求:

1. 计算机相关专业,全日制本科及以上学历,2-5年工作经验

2. 熟悉数据仓库理论基础,对数据模型建设、应用层建设有比较丰富的经验

3. 熟练使用 SHELL或PYTHON

4. 熟悉HADOOP相关的大数据技术:HDFS, MAPREDUCE, HIVE

5. 能对HIVE进行性能分析及调优

6. 有MAPREDUCE开发经验优先

7. 良好的沟通能力、组织协调能力、应变能力, 极强的责任心、学习能力。

数据仓库工程师岗位的工作职责 篇6

职责

1、负责数据库设计、开发、运维工作,能独立完成核心数据库开发、数据库性能优化工作;

2、针对公司的海量结构化和非结构化数据,设计和开发数据存储模型,实现数据资源合理高效的存储、管理;针对具体数据应用系统的建设需求与目标,参与设计和开发数据仓库;基于数据库和数据仓库,设计和开发数据服务接口,实现数据资源服务化;

3、负责主导该领域的技术沉淀及经验分享。

4、能够及时配合并支持数据团队完成该领域的数据库开发及性能问题处理。

5、负责数据库环境部署和运维管理;及时处理数据库系统的各类故障问题;

6、负责数据库日常监控、维护、备份和恢复,探查系统潜在的问题和可能的性能瓶颈,并进行优化。

7、有良好的沟通技能及处理突发事件的能力;

8、可适应短期出差(浙江省内);

9、熟悉DB2或MySQL数据库、具有OCP认证优先考虑。

招聘要求

1、计算机、电子通信、自动化等专业,本科及以上学历;

2、五年以上相关领域的数据库开发及运维工作经验,熟悉制造业及相关领域业务,熟练掌握数据库相关工作技能、了解该领域发展趋势;

3、掌握高效的数据库开发和管理工作方法及流程,能承受工作中的各种压力;

4、具备良好的自我学习能力及团队合作意识;

5、熟练使用关系型数据库,并具有丰富的实际项目经验;

6、对数据库有一定的了解并具备一定的相关项目实践经验;

7、熟悉Hadoop 、Hive、Spark等技术及其生态圈。

数据仓库工程师岗位的工作职责 篇7

职责:

1. 与客户沟通,确定需求边界。能根据客户的表述进行需求文档的编写和需求的拆分;

2. 配合公司市场人员获取需求;

3. 进行需求可行性研究;

4. 参与需求调研和产品定义评估,业务需求讨论与设计;

5. 根据产品定义实现详细需求分析文档、用户手册编写并协助解决测试问题;

6. 参与整个产品开发流程,与开发测试团队一起保证最终产品发版。

任职要求:

1.计算机,软件工程等相关专业,本科以上学历;

2.具有2年以上软件项目分析经验,参与过项目(或产品)的规划设计、需求分析工作;

3.较强的用户需求判断、引导、控制能力;优秀的文字表达、业务理解、交流能力;

4.团队合作精神;

5.要求至少2年从事离散电子制造行业 MES系统相关从业经验,熟悉业界知名MES产品优先。

数据仓库工程师岗位的工作职责 篇8

职责:

1、存储、服务器、云计算售后技术支持工程师;

2、负责项目主机存储系统建设的实施方案设计、系统调试、系统测试;

3、负责主流主机、存储、备份设备的安装调试;

4、负责项目协调工作;

5、负责存储、云计算项目的售后技术支持;

6、负责设备的安装及调试。

任职要求:

1、熟悉主流Linux、Unix、Windows等平台及应用环境,熟悉数据库软件安装与维护工作;

2、对存储、备份、容灾等领域相关技术具有深刻的理解;

3、有Vmware、Oracle、Symantec(BE NBU)、IBM ITM,TSM,WAS,MS AD等软件实施经验优先;

4、良好的沟通表达能力和职业操守,能严格自律;自我学习能力强,善于思考和分析问题。

数据仓库工程师岗位的工作职责 篇9

相关文件的定义和编写

2.生产良率和抛料率的监控和改善

3.生产异常的分析解决

4.技术人员的班别安排

5.设备保养的安排和作业follow

6.设备故障维修&coordinator

7.配合新产品导入或者其他需求的试产验证

8.主管交付的其他事项

数据仓库工程师岗位的工作职责 篇10

职责:

1. 针对用户行为预测业务,负责用户画像、订单特征体系建设,包括离线数据产出以及服务化;

2. 针对用户端上行为产出的实时数据流,挖掘实时特征并服务化;

3. 针对客服场景,挖掘实时用户行为异常以及进线异常;

4. 针对智能客服场景用户标签挖掘,人群挖掘等工作,支持智能运营方向的业务;

5. 负责开发并维护智能客服业务的特征服务系统。

任职资格:

1. 三年以上数据挖掘或者系统开发经验;

2. 熟悉Hive,redis,Kafka,spark,flink,ES等大数据系统;

3. 要求熟悉Java,python,shell等语言,并有相关开发经验;如果熟悉Golang,scala语言有加分;

4. 熟悉常用的数据挖掘、分析工具和方法,有数据挖掘工作经验;有实时数据处理、分析、挖掘的经验;

5. 具备快速学习能力,乐于了解业务,沟通能力强,具备团队精神;

6. 有责任心,能快速响应线上问题与风险,安全意识强;

数据仓库工程师岗位的工作职责 篇11

职责:

1、根据银行、保险、互联网金融等行业客户对大数据的需求,通过大数据挖掘技术研究客户本质属性,进行针对性数据分析;

2、深入理解内部与外部各种数据的数据结构,应用先进的统计建模、数据挖掘、机器学习方法,进行清洗、分析、建模,完成数据的产品转化设计,并不断完善和优化模型;

3、通过数据分析手段,描述业务特征,结合市场行业状况,为业务战略决策、业务方向提供决策支持,竞争分析及建议,以推动业务发展。

岗位要求:

1、本科学历及以上

2、本科学历需3-4年工作经验,硕士及以上可放宽至2年

3、统计学、计量经济学、数学专业优先,

4、熟悉2种以上分析开发工具:Python、R、SAS 等,熟悉两种及以上数据库:hiveoraclemysql等,熟悉SQL语句;

5、熟悉常用数据挖掘、机器学习算法,有金融业相关的数据挖掘项目经验为佳;

6、具有良好的沟通和快速学习能力,能够快速、准确地理解需求,并将业务需求转换为数据模型。

数据仓库工程师岗位的工作职责 篇12

职责:

1、负责ETL开发、作业调度和数据平台建设

2、负责数据仓库的设计、开发和优化,建立结构层次合理、灵活可扩展的数据仓库

3、设计并研发BI分析相关的数据产品

4、结合对数据的理解和业务需求,对数据进行整理、分析和挖掘

任职要求

1、计算机相关专业本科及以上学历,有2年以上数据仓库、ETL工作经验

2、有海量数据处理、ETL及作业调度优化、数据仓库建模等经验

3、熟悉Linux、SQL、Python或Java、Shell脚本,有Hadoop/Hive/Spark/HBase/Kylin/Impala等大数据技术使用经验

4、逻辑清晰,对数据敏感,深入了解业务,具备自己独特的想法并能提出合理的建议

数据仓库工程师岗位的工作职责 篇13

一、熟练掌握工程制图、熟悉3D solidworks工程制图;

二、全面熟悉以下专业技术者:膜技术及其工程应用;大气环境处理技术;

三、有大气环境监测工职业资格等相关资质。

四、有涉及到本专业实战经验、具体从事过本行业设计、负责过本行业相关水、气、废处理工程者优先;

五、熟悉本行业的仪器、仪表使用原理、有相关电气设计理论基础者优先;

六、能有吃苦耐劳,出差与客户的沟通能力,及团队合作能力,及团队的奉献精神;

七、有较强的自学及专研创新的能力;

八、能服从公司及领导的工作安排,积极完成工作任务者优先,外出跟单、调机的可能性;

九、能有效带领三废环境部门队员进行工作分工、任务安排、工程进度跟进、项目方案拟制、项目成本合算者。

数据仓库工程师岗位的工作职责 篇14

1负责公司设备TPM管理制度及相关文件的编制,并组织实施

2负责组织对公司设备操作人员进行有关设备知识方面的培训、考试及操作证办理工作,提升操作者技能;

3负责对公司设备操作点检、保养执行过程的监督和检查并考核;

负责设备点检、保养问题推动处理;

4负责组织公司设备部门与制造部门设备定期碰头会,收集问题,组织制定实施计划并跟踪、检查落实情况;

5负责设备安全、维修安全管理,对过程执行情况进行监督和检查

6持续开展TPM,减少或避免设备故障发生

数据仓库工程师岗位的工作职责 篇15

职责:

1、根据项目计划推进项目的实施,以满足项目交付目标;

2、根据服务请求提供对应服务报告;

3、对客户数据库系统进行实施建设、例行检查、故障分析诊断以及优化提升;

4、根据项目交付情况以及客户满意度,改进完善项目交付;

岗位要求:

1、计算机专业专科以上学历,一年以上ORACLE数据库相关工作经验;

2、熟悉ORACLE数据库体系结构以及安装、配置、升级、迁移、备份恢复;

3、熟练配置ORACLE RAC、DG;

4、具备数据库性能分析以及优化SQL的能力。

5、熟悉Unix/Linux操作系统;熟悉Bash、Perl,Python等脚本语言;

6、具备OCP或OCM证书优先

数据仓库工程师岗位的工作职责 篇16

职责:

1. 对信息化项目进行立项评估管理、跟踪项目执行进度与状态、项目过程变更管理、评估信息化项目上线后的实际产出效果;

2. 对接业务部门,对信息化需求进行需求调研、整理、分析、原型设计、评估需求合理性可行性,提出系统解决方案;

3. 对信息系统建设进行优先级及版本统一协调、规划;

4. 与跨体系开发团队、供应商对接需求、审核解决方案、管理项目/SR的执行情况、推动项目/SR的落地;

5. 统筹、指导用户完成验收测试及系统上线切换工作;

6. 完善信息系统建设相关的流程规范、并推动流程规范的实施。

任 职 资 格

1. 精通需求分析的方法;

2. 具备对需求合理性准确的把握能力;

3. 具备2年及以上的开发经验;有3年以上的需求分析经验;

4. 具备良好的项目评估、项目管理经验;

5. 具备快速理解业务,以IT角度对业务进行抽象的能力,善于理解和沟通,逻辑思维能力好;

6. 对新技术感兴趣,对新事物感兴趣,把握新技术前沿应用;

7. 至少5年以上同类工作经验。

数据仓库工程师岗位的工作职责 篇17

职责:

1.负责SQL审核及SQL审核系统维护、优化;

2.负责执行数据库监控策略,备份策略,容灾策略;

3.据项目开发需求,进行数据库设计,包括SQL优化,指导以及配合开发工程师进行开发工作;

4.配合研发制定数据库技术方案,分库分表策略,数据迁移方案。

技术要求:

1.计算机相关专业,3年以上mysql dba实际工作经验;

2.精通MySQL,精通SQL脚本编写,有丰富数据库管理、运维调优经验;

3.熟悉数据库集群、熟悉MySQL主从复制,MHA,熟悉No-SQL技术(Redis、MongoDB等),了解相关高可用技术方案;

4.具有数据库备份,数据库还原工作经验;

5.熟悉MySQL相关监控、分析、开发和管理工具;

6.熟悉linux/windows操作系统,具有简单的shell脚本编写能力;

7.具有较强逻辑思维、沟通能力、学习能力、喜欢在技术领域内钻研;

8.具有高度的责任心,工作主动积极,抗压能力较强。

数据仓库工程师岗位的工作职责 篇18

1、在上级的领导和监督下定期完成量化的工作要求,并能独立处理和解决所负责的任务;

2、现有客户的管理和联系,维护工作完成销售任务;

3、收集潜在客户资料,在铝行业开发新的潜在客户;

4、了解和发掘客户需求及购买愿望,针对铝行业特别是铝轧制行业能够推荐特浦朗克的润滑产品,介绍自己产品的优点和特色;

5、与技术服务工程师一起为客户提供润滑方案、 解决问题、跟踪现场产品使用情况和维护;

6、收取应收账款。

数据仓库工程师岗位的工作职责 篇19

职责:

1、根据业务需求完成数据库架构设计,配合系统开发团队提供DBA服务。

2、负责数据库的系统安装、配置管理以及性能监控和调优;

3、对数据库运行状况进行监控,及时对故障进行分析处理,记录解决文档;

4、提供数据库的高可用性部署设计方案、以及负责数据库的日常维护/管理(数据备份/恢复计划,系统数据安全以及权限管理)

任职要求:

1、3年以上mysql DBA全面运维工作经验,有存储过程,触发器,大数据量的经验。

2、熟悉Linux系统,能独立完成数据库系统的部署、调优、测试和监控;

3、有mysql数据库高负载高并发系统运维经验;

4、具有很强的故障排查能力,有很好的技术敏感度和技术文档整合能力;

5、熟悉MySQL数据库设计、管理与优化,熟悉myisam和innodb引擎,熟练mysql性能优化、SQL调优技术;

6、具备基本的JAVA知识,可以协助team完成一些基本的开发工作。

7、工作踏实、责任心强,敢于独立分析和解决问题。

8、有良好的团队协作精神,乐于分享,共同进步。

数据仓库工程师岗位的工作职责 篇20

职责

1、设计安全画像体系,基于海量行为和相关数据信息,构建和优化画像,产出安全标签;

2、设计和验证数据分析模型,结合业务需求,验证模型的有效性并不断优化;

3、负责各业务数据的持续运营,保障数据服务质量。

任职要求:

1、计算机、统计、数学、信息技术本科及以上学历;

2、两年以上的画像标签经验,并对挖掘算法有深入理解;

3、熟练运用SQL、Excel,python,有Hive/Spark SQL使用经验者优先;

4、具备对数据的归纳、整理和分析能力;

5、良好的报告写作功底。