当前位置:经典范文谷>文秘>岗位职责>

数据仓库工程师的主要职责(精选16篇)

岗位职责 阅读(3.05W)

数据仓库工程师的主要职责 篇1

职责:

数据仓库工程师的主要职责(精选16篇)

1.建设公司级数据仓库,并根据业务变化持续迭代和优化;

2.对业务数据进行梳理和抽象,建设数据仓库的数据模型;

3.对业务数据进行采集、清洗、转换和存储;

4.支撑BI、用户数据、用户运营、用户画像、房源数据、推荐系统等核心数据平台产品;

5.研究大数据前沿技术,不断持续优化大数据平台,为业务提供价值。

任职资格:

1.本科及以上计算机、统计学、数据库、机器学习等相关专业,5年以上数据相关工作;

2.对业务数据有敏锐的理解能力,并能快速梳理和分析业务数据;

3.熟练掌握SQL语言、熟悉MySQL,对Shell、Java(主要开发语言)、Python编程非常熟悉;

4.熟悉常用的ETL技术和原则;精通数据仓库数据库设计规范和实操;

5.熟悉Hadoop、Hive、HBase、Spark、Storm等开源平台者优先;

6.具有较强的分析和解决问题的能力,良好的学习能力和团队合作精神,追求价值实现,认同目标管理和敏捷。

数据仓库工程师的主要职责 篇2

职责:

1.参与传统数仓和大数据数仓日常开发工作;

2.参与大数据仓库设计、规划和开发;

3.参与日常工作的优化,提出建设性意见;

4.负责管理项目,负责板块内的资源协调、进度管理、交付管理;

5.参与数据仓库、数据集市体系架构的设计、规划与开发, 参与大数据、ETL开发,sql性能优化。

任职要求:

1.全日制本科,计算机等相关专业。3年以上数仓开发经验,有银行、金融从业经验者优先。

2.2年以上项目管理经验,具备PMP证书优先.

3.熟悉oracle/hive/spark,熟悉数据处理和性能优化,有UDF自定义函数、MR开发经验优先;

4.熟悉常用ETL工具,熟悉常用的Linux指令,熟悉shell/python任意一种脚本语言。

数据仓库工程师的主要职责 篇3

职责:

1、负责制定数据仓库平台技术体系架构、数据架构及规范;

2、负责设计和实施公司业务数据的实时/离线数据ETL架构方案;

3、负责调度架构设计与开发;

4、负责数据仓库平台运维以及日常数据运营等管理;

5、负责关键技术攻关;

任职要求:

1、5年以上数据仓库项目开发经验,参与过数据仓库架构设计,对ETL开发流程、调度架构有深入理解;

2、精通mysql、 oralce 、greenplum等至少一种数据库,丰富的SQL性能调优经验;

3、熟练使用Java、Shell、Python、Perl等至少一种脚本语言;

4、熟悉数据治理理论,数据质量、元数据管理流程和方法;

5、了解Hadoop/Hive/HBase/Spark/Storm等技术及其生态圈;

6、沟通能力好、责任心强,具有良好的团队合作精神和敬业精神;

数据仓库工程师的主要职责 篇4

职责:

1.负责企业级数据仓库设计、规划、建设、实施、管理,数据仓库架构设计与数据开发,创建数据仓库、数据集市

2.熟悉数据仓库领域知识,从架构和技术层面参与建设数据仓库,包括元数据管理、数据质量、主数据管理、性能优化和调优。

3.负责数据仓库平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地

4.配合和协助数据分析/数据挖掘形成底层/中间层的业务逻辑切片

任职资格:

1. 本科或硕士以上学历,计算机工程相关专业

2. 熟悉大数据相关技术能力(Hadoop/MapReduce/Hive/Hbase等),熟练进行数仓Hive建设和软件架构,较强的数据抽象能力

3.精通SQL,具备海量数据处理和Hive/Spark性能调优经验,3年以上大规模分布式数据仓库建设经验

4.熟练使用Druid/Kylin之一进行数据挖掘模型设计,熟练掌握Java/Scala之一,具备良好的coding素养和习惯,了解脚本语言,如Python、Shell等

5.强烈的责任心,工作态度积极主动,有较好的团队精神和沟通能力,工作细致认真

数据仓库工程师的主要职责 篇5

职责:

1、负责ETL开发、作业调度和数据平台建设

2、负责数据仓库的设计、开发和优化,建立结构层次合理、灵活可扩展的数据仓库

3、设计并研发BI分析相关的数据产品

4、结合对数据的理解和业务需求,对数据进行整理、分析和挖掘

任职要求

1、计算机相关专业本科及以上学历,有2年以上数据仓库、ETL工作经验

2、有海量数据处理、ETL及作业调度优化、数据仓库建模等经验

3、熟悉Linux、SQL、Python或Java、Shell脚本,有Hadoop/Hive/Spark/HBase/Kylin/Impala等大数据技术使用经验

4、逻辑清晰,对数据敏感,深入了解业务,具备自己独特的想法并能提出合理的建议

数据仓库工程师的主要职责 篇6

职责:

1、负责公司业务部门的需求调研,收集、分析、整理产品需求,编写详细需求文档,跟踪需求在设计、编码和测试阶段的完成情况;

2、基于业务的理解,开展数据分析,发掘数据价值,撰写数据分析报告和数据应用方案,为业务部门等提供数据支持;

3、负责优化主数据管理流程及质量监控,跨部门合作横向沟通解决数据质量问题;

4、与相关团队协作为业务提供数据挖掘、模型及算法等相关服务,推动业务部门的数据化运营。

任职资格:

1、大专以上学历,2年以上数据管理或需求分析相关工作经验,制造业或消费定制行业从业者佳;

2、熟悉产品设计的各种设计工具(MindManager、PPT、Visio等),了解需求用例的编制过程,有CRM、ERP、供应链经验优先

3、具有制造业中营销、供应链、产品企划、财务、人力等至少一个方面的行业经验;

4、对工作充满热情,富有创新精神,能承受较大的工作压力,优秀的理解分析能力、沟通合作和资源协调能力。

数据仓库工程师的主要职责 篇7

职责:

1. 设计和搭建游戏服务器端的技术架构;

2. 负责游戏平台服务器端开发工作,游戏脚本内容编写;

3. 负责与游戏客户端数据传输协议的制定。

岗位要求:

1、熟悉网游的架构设计,熟悉多线程开发技术,处理大量网络并发数据, 有高并发多线程服务端程序开发经验

2、2年以上工作经验,1年及以上的C/C++服务器开发经验,熟悉掌握C/C++,良好的编程习惯和调试技巧

3、熟悉C/S结构,网络通讯协议,http,socket编程技术

4、熟悉数据库开发,熟悉Mysql,SqlServer数据库编程技术

5、熟悉windows server开发环境,熟悉Linux操作系统原理和日常使用的Shell命令服务器开发

6、熟悉lua脚本编程

7、熟悉Redis开发

8、逻辑思维清晰,能独立设计游戏中系统逻辑,较强的沟通和能力,能承担工作压力

数据仓库工程师的主要职责 篇8

1、负责编写项目初步方案,配合业务部进行技术交流、工况确认;

2、根据专业负责人分配的任务熟悉设计资料,了解设计要求和设计原则,正确进行设计,并做好专业内部与其他专业的提资和配合工作;

3、配合专业进度,制定详细的作业计划,并按照项目要求完成设计、自校工作,减少差错,保证设计质量;

4、独立编制技术方案和施工图设计,负责设计修改和处理施工中出现的工艺专业问题;

5、协助处理项目现场安装调试方面的各类问题,根据项目实际情况作出设计变更。

数据仓库工程师的主要职责 篇9

职责:

1、负责HP、DELL、华为、浪潮等业界主流品牌的服务器安装配置及日常维护工作;

2、负责VMWare/Hyper-V虚拟化平台项目实施及维护工作;

3、负责HP、华为、浪潮等企业级存储及其SAN网络的安装配置及日常维护工作;

4、负责服务器集群拓扑及SAN存储网络部署;

5、编写各类维护文档,譬如:实施方案、实施报告、巡检报告、故障处理报告等等。

任职要求:

1、计算机相关本科以上学历,2年以上IT运维或机房管理工作经验;

2、熟悉主流X86服务器(IBM/HP/华为/浪潮)和存储的运维和管理;

3、熟悉vmware虚拟化架构技术,具有虚拟化的搭建和运维经验。

数据仓库工程师的主要职责 篇10

1、推行 TPM (Total Productive Maintenance) 体系,建立工艺文件和定期更新TPM

2、负责设备导入及国内与海外各工厂设备转移

岗位要求:

1、大专以上学历,5年以上设备管理经验

2、3年TPM推行经验及设备海外转移经验

数据仓库工程师的主要职责 篇11

职责:

1、维护分析集团软件数据库功能及故障

2、提取、转换集团软件数据

3、维护数据库功能的日常运行

4、协调软件开发

5、部门ERP系统的日常维护

6、部门安排的其他工作

要求:

1、计算机或数学专业,大专以上学历

2、有一年以上数据库实际相关工作经验,熟悉sqlserver,oracle中至少一种

3、不接收应届生,不接收实习生或学徒(有实际项目开发经验,并能够独立分析、解决、编程者不限)

4、男女不限,年龄不限

数据仓库工程师的主要职责 篇12

职责:

1、协助研发自动化运维平台,提高运维、开发实施协作效率,规范操作流程;

2、协助研发基本服务组件,虚拟化;

3、评估主机、系统运行状态及性能,编写主机硬件架构方案;

4、快速准确汇报系统中出现的故障,配合相关人员做好系统升级,故障解决和测试等工作;

5、作好工作记录,定期汇总并上报给负责人。

任职资格:

1、计算机相关专业,大专及以上学历,三年以上服务器运维经验;

2、熟悉主流Linux/Windows服务器系统(CentOS/Redhat)日常安装配置维护能力,熟练常用命令编写;

3、熟悉Java应用,能完成Java应用的部署及常见运维工作;

4、熟悉Nginx、Lvs等软件负载均衡方案,能进行部署和排错;

5、熟悉Mysql数据库的管理,熟悉Mysql备份和恢复,熟悉Mysql主从同步复制及性能调优者优先 。

数据仓库工程师的主要职责 篇13

1.执行新产品设计开发流程,承担微波新产品的设计开发工作;

2.承担新工艺的开发工作或工艺指导工作;

3.负责设计开发产品的样品制作、试生产及批量生产的技术指导工作;

4.负责本岗位相关技术文件、工艺文件和图样文件的编制工作;

数据仓库工程师的主要职责 篇14

1、负责编制脱硫工程项目机务专业施工技术方案以及施工计划,组织机务施工;对本专业施工进度、质量、安全、成本负责;

2、配合施工经理做好分包队伍的管理,审核分包单位上报的本专业各项资料。

数据仓库工程师的主要职责 篇15

职责:

1、负责公司信息化系统的业务需求分析和评估及管理工作;

2、负责相关系统的需求调研、分析和管理工作,对需求文档进行管理;

3、对需求进行分析、管理,估算需求执行的成本和工作量,跟踪及控制变更;

4、配合技术经理估算项目的需求开发成本和周期,并跟进项目/任务执行进度;

5、负责需求优先级沟通确认等;

6、负责向开发和测试团队讲解业务需求和业务流程;

7、负责跟进维护型需求的设计、开发、测试、上线整个流程,保障需求与实现的一致性。

任职要求:

1、2年以上相关行业开发、测试或需求分析经验;

2、参与过1个以上重要项目需求调研、需求分析;

3、精通软件工程、了解系统架构,具备一定的管理经验;

4、精通需求开发和需求管理流程, 熟练一种以上需求分析、设计工具;

5、熟悉UIUE设计的过程、方法或工具,具有交互体验设计技能;

6、具有良好的亲和力和团队合作精神;

7、具有很强的工作责任心、敬业精神;

8、具有创新精神和学习精神;

9、具有良好的分析能力、沟通表达能力、概括总结能力和综合协调能力。

数据仓库工程师的主要职责 篇16

职责:

1. 负责或参与智能连接产品(智能耳机,音箱等)后端系统的设计、代码实现;

2. 参与制定前后端业务流程、接口协议、文档输出等;

3. 负责或参与前端程序(APP, Device)的对接、调试;

4. 持续迭代开发,改善系统性能,用户体验。

岗位要求

1. 五年以上服务器端开发经验,一年以上Go语言开发经验;

2. 熟悉linux,对服务器性能优化有一定了解,有高并发项目经验优先;

3. 熟练掌握nginx、mongodb、Redis等开源组件;

4. 了解服务器安全配置相关的知识;

5. 熟悉多线程和网络编程,有分布式系统项目经验者优先;

6. 有可穿戴产品后台开发经验者优先。