当前位置:经典范文谷>文秘>岗位职责>

数据仓库工程师的基本职责模板(精选16篇)

岗位职责 阅读(1.86W)

数据仓库工程师的基本职责模板 篇1

职责:

数据仓库工程师的基本职责模板(精选16篇)

1、 负责全平台流量及业务数据开发,参与数据模型体系构建及数据主题设计,为BI数据报表提供底层数据支持;

2、 理解产品、业务人员的数据需求,提供OLAP、数据提取等数据服务;

3、 参与数据仓库模型设计,负责元数据建设、数据融合、多维度事实表及维表的数据仓库开发;

4、 参与项目ETL的设计、开发、调度、执行、处理,进行模型性能及ETL流程调优;

任职要求:

1、大学本科及以上学历,5年以上工作经验;

2、 熟悉ORACLE、MYSQL、SQL Server等主流数据库,熟练使用Power designer、kettle、 Data service等数据仓库及ETL工具,了解Dashboard、Smart BI、Power BI、Cognos等前端开发工具;

3、 熟悉Data Cube,并精通SQL,熟练使用Hive、Spark-SQL, python、Shell等进行数据开发,具备开发复杂业务逻辑的数据处理及分析能力;

4、熟悉数据仓库理论,掌握Kimball维度建模方法,有ETL开发和数仓模型设计经验;

5、有很强的自我驱动力,对开源技术非常感兴趣并具有一定的研究能力;

数据仓库工程师的基本职责模板 篇2

职责:

1.负责VIVO公司级的数据集市和数据仓库的设计和开发

2.负责基于用户行为的用户标签探索和开发

3.负责基于业务需求的数据中间层和可视化开发

4.负责各类分类和预测模型的开发

任职资格:

1.本科学历,数统、计算机相关专业。

2.了解hadoopspark生态,有完整仓库设计和开发经验。

3.精通hql调优,shellpython,熟练使用常规机器学习算法。

数据仓库工程师的基本职责模板 篇3

职责:

1. 独立完成ETL 需求分析、设计、开发及部署工作

2. 独立完成BI分析报表等应用的需求分析、模型设计、数据处理、报表开发等工作;

3. 配合开发经理完成BI分析报表等项目的过程管理、元数据管理、质量管理;

4. 完成实时大数据处理系统及批处理系统的架构设计及实现;

5、负责BI分析报表等应用的系统部署及运维

任职要求:

1. 计算机相关专业本科及以上学历,3年以上相关开发经验;

2. 精通主流关系型数据库,精通SQL优化、ETL问题定位,能够从模型设计层面做ETL优化;

3. 精通ETL架构的设计,精通BI/DW,精通数据仓库模型设计;

4. 熟悉Hadoop、Map/Reduce的原理,能够选用合适的工具设计、编写Hadoop的ETL程序;

5. 熟悉Shell/Perl/Python等脚本语言;

6. 熟悉kettle及sqoop; 精通元数据管理、数据质量分析和处理设计。

数据仓库工程师的基本职责模板 篇4

职责:

1、根据公司业务需求,构建可扩展的数据仓库,负责数据模型的规划设计实现和优化。

2、负责业务数据的采集,清洗,特征抽取。

3、负责ETL的维护工作,发现故障及时诊断、定位、分析和调试,保证数据准确、稳定。

4、根据业务需要,提供面向业务的报表、数据提取等数据服务。

5、参与业务数据分析体系的数据统计、分析及建模。

任职资格:

1、 统招本科及以上学历,三年以上数据仓库、BI开发经验;至少两年

2、熟练使用oracle、mysql、Postgres等关系型数据库及Hive、Hbase、spark、impala等基于hadoop集群的组件、编写优秀的存储过程、熟悉shell脚本语言,有良好的代码习惯

3、 熟悉数据仓库建设的流程及方法论、理解维度建模,有实际的模型设计经验及ETL相关开发经验;

4、 熟悉二种以上开源或商业的BI工具,有报表及可视化开发经验,熟悉帆软开发优先;

5、互联网金融工作经验优先,汽车金融行业经验优先

5、 较强的逻辑思维能力和学习能力,对数据有敏锐的认知力,工作态度踏实、认真、积极主动,有良好的团队协作能力、执行力以及抗压工作能力和心态,乐于沟通交流和分享。

数据仓库工程师的基本职责模板 篇5

职责:

1、负责公司大数据平台建设、开发

2、依据业务需求,进行数据产品的规划和设计开发,为数据分析和运营等人员搭建友好高效的数据产品,如报表、BI系统等

3、协助对业务数据进行分析、建模,为业务部门的数据化运营提供支持

任职要求:

1、本科或以上学历,2年以上大数据开发或数据仓库或BI经验,熟练掌握Java或者Python开发语言

2、熟悉Hadoop或Hadoop生态圈相关技术,如Hive、Spark等,或者大数据云服务技术。

3、对业务有敏锐的洞察力,有较强的业务理解与分析能力;

4、具备良好的团队合作精神,有较好的沟通交流能力,善于主动思考和行动,乐于解决具有挑战性的问题;

5、具有电商领域大数据开发、推荐系统研发经验的优先考虑。

数据仓库工程师的基本职责模板 篇6

职责:

1、根据业务需求负责数据库存储过程、包、触发器的编写、排错、优化;

2、配合开发人员对数据库、表、数据字典进行分析与设计;

3、精通数据库的规划、安装、备份、恢复,负责数据库日常维护操作;

4、对数据库进行性能监控、分析、优化、问题跟踪及管理。

任职资格:

1、全日制本科及以上学历;2年及以上Oracle开发、运维经验;

2、精通oracle的安装配置,故障处理,备份恢复操作,能够独立完成数据库日常管理和运维工作;

3、精通DataGuard、GoldenGate等Oracle高级技术;

4、熟练掌握Linux,以CentOS,熟练掌握shell、python等编程语言;

5、较强的英文文档阅读和理解能力;

6、诚实稳重,工作责任心强,沟通能力强优先;

7、熟悉MySQL开发、运维、网络的优先。

数据仓库工程师的基本职责模板 篇7

职责

1. 负责重点系统的数据库设计、分析、开发与评审;

2. 负责为开发团队提供数据库技术支持、方案支持;

3. 负责数据库日常维护、调优;

4. 负责公司整体数据运营规划以及数据分析架构;

5. 组织产品数据采集、清洗、汇总和集成。

任职资格

1. 熟悉MySQL、SQL Server、Oracle等数据库技术;有存储过程开发经验;

2. 有良好的敬业精神,喜爱数据库开发与优化,能承担较高工作压力。

3. 较强的学习能力,良好的团队合作精神,稳定、有责任心。

数据仓库工程师的基本职责模板 篇8

1.1 建立电控硬件标准,包含:指定电控零件品牌、定义电控零件重要功能、制定应用规范

1.2 建立电控设计标准,包含:电控设计输出标准、PLC程序标准结构、建立各类PLC标准功能模块

1.3 建立软件设计标准,包含:制定语言选用规范、程序标准结构、建立标准功能模块

1.4 建立严谨的电控及软件技术的审核、验证流程,不断提高审核及验证标准,持续推动高质量设计输出

1.5 主导电控及软件技术输出的评审,负责电控及软件设计输出的最终批准

1.6 建设电控及软件技术的人员技能识别、技能培训提高体系

1.7 支持研发中心的各项自主技术研发、外部技术消化吸收,负责内部推广

1.8 支持电控部经理提升团队及工程师工作效率效果

数据仓库工程师的基本职责模板 篇9

职责:

1、深入理解业务,了解需求和痛点,为风控和业务部门提供数据支持;

2、针对业务需求,参与数据仓库需求分析,制定ETL相关设计方案和开发计划;

3、负责数据同步,数据整合清洗,以及数据质量的治理;

4、数据仓库模型设计,分层体系构建,元数据管理监控以及权限控制。

任职资格:

1、重点院校统招本科及以上学历,计算机基础扎实;

2、具有2年以上金融贷款类业务经验;

3、熟悉数据仓库理论和数据库建模,有redshift和AWS经验优先;

4、精通pgsql/mysql等数据库,精通sql语言,具有数据库优化/sql优化相关经验;

5、熟练掌握python/shell语言。

数据仓库工程师的基本职责模板 篇10

1.根据产品设计报告,根据开发进度与任务分配,开发控制器的硬件模块;

2.根据设计说明书,设计详细的原理图和PCB图;

3.测试或协助测试开发的硬件设备,并进行调试,确保其按设计要求正常运行;

4.编写项目文档、质量记录以及其他有关文档,并协助完成相关产品认证工作;

5.维护管理或协助管理所开发的硬件,并做好产品变更工作;

数据仓库工程师的基本职责模板 篇11

1、11-80GHz频段天馈系统指标规划与产品实现;

2、11-80GHz频段测向天线单元及监测天线设计、仿真与产品实现;

3、11-80GHz天线开关矩阵设计;

1、有5年以上微波天线设计开发工程经验;

2、具备良好的电磁场与电波传播、天线原理的理论知识;

3、熟悉通信系统(尤其是接收系统)工作原理和主要指标;

4、能够熟练使用至少一种电磁场仿真软件(如HFSS、CST等)

数据仓库工程师的基本职责模板 篇12

职责:

1、负责海量科技数据(含文本数据)的挖掘工作;

2、负责科技数据挖掘算法模型的构建、应用、评测、报告;

3、主持或参与海量科技数据的入库工作,科技数据知识图谱的构建;

4、负责或参与数据挖掘成果论文、专利、标准的撰写;

5、负责或参与制定数据加工清洗的方案,并形成操作手册;

6、为指定的课题提出解决方案,并主持或参与方案实施;

7、完成安排的各项工作,与其他部门合作。

岗位要求:

1、数学、统计、金融、科技管理、计算机等相关专业,博士学历优先;

2、具有2年及以上海量数据挖掘经验,有文本挖掘、非结构化文本处理经验者优先;

3、精通Matlab/Python/R/Scala之一,熟悉Java/C/C++等编程语言,熟练掌握Linux各项操作指令;

4、熟练掌握Hadoop/Spark/Storm/Kafka中的一项或几项,有MPI经验者尚佳;

5、掌握机器学习的基本算法框架,有自然语言处理和丰富的特征工程(特征选择/特征抽取)经验者优先;

6、掌握关系型数据库的基本操作,有图形数据库、其他非关系型数据库经验者尚佳;

7、在医疗信息化从事产品开发工作者优先,有顶会paper或人工智能领域国际比赛中获奖者优先;

8、有比较强的组织协调能力,可同时处理好多个任务,具备一定的管理能力;

9、性格开朗,具有团队精神;较强的沟通能力,能与相关业务和开发人员讨论并快速理解需求。

数据仓库工程师的基本职责模板 篇13

职责:

1、负责IBM/LENOVO/DELL/HP服务器的售后硬件维修、安装。

2、windows/linux服务器OS的安装、部署、配置与维护。

3、数据机房日常运维(设备巡检、上架等)。

4、存储设备的安装、部署、配置、维护及日常运维工作等。

5、按照公司的要求进行客户服务,维护客户满意度及维修效率。

任职要求:

1、一年以上相关经验;25-35岁;

2、大专或以上学历;计算机相关专业;

3、服务器英文技术文档阅读能力;

4、较强的学习能力、沟通协调能力、独立分析问题和解决问题的能力;

5、有良好的服务和专业素质;

6、熟悉当前主流计算机及相关产品原理;掌握计算机硬件和软件基础知识;

7、动手能力较强 ,熟悉windows操作系统及linux系统;

8、有MCSE,CCNA,RHCE,MCP等相关证书者优先考虑。

数据仓库工程师的基本职责模板 篇14

职责:

1、负责公司与阿里巴巴在新行业方向(新金融、新零售、国内外运营商)的产品研发;

2、负责分析挖掘客户/行业对大数据产品的需求(应用场景),利用数据分析结论提升客户业务能力。例如:文本挖掘,潜在客户挖掘,用户画像,个性化推荐,用能预测等;

3、进行大数据场景下的数据统计、数据挖掘、机器学习、深度学习,包括数据整理、模型建立、模型应用、评估优化等;

4、将客户需求准确转化为可执行的数学模型,针对不同的应用场景,负责编写数据挖掘算法及对其的优化;

5、基于需求分析/运营支持/商业报告等成果,抽取典型用户/客户/行业/产品分析模型并与开发团队沟通实施方案及构建产品原型。

岗位要求:

1、本科以上学历,扎实的机器学习、数据挖掘、统计学理论基础;有统计、应用数学、金融等相关专业背景优先;

2、精通常见机器学习算法(如逻辑回归、SVM、神经网络、决策树、贝叶斯等),有实际建模经验,掌握深度学习算法优先;

3、具有扎实的计算机操作系统、数据结构等编程基础,精通至少一门编程语言例如JAVA/python/R等;

4、熟悉Map-Reduce模型,对Hadoop、Spark、Storm等大规模数据存储与运算平台有实践经验优先。

数据仓库工程师的基本职责模板 篇15

职责:

1.负责sql sever、Mysql数据库集群的日常维护、监测、备份、优化及恢复;、

2.负责数据库开发支持,熟悉sql语句编写与调优,配合开发人员完成特殊需求如数据提取、数据修改及报表相关开发;

3.负责业务系统上线支持,管理数据库服务器高可用集群,保障服务稳定7X24可用;对数据库进行持续性能优化;

4.负责排查数据库故障,分析和解决疑难问题,提出预防方案;

5.协助完成系统SIT,UAT及上线验收工作。

任职资格:

1.大专及以上学历,两年以上SQLSERVER、MySQL数据库设计开发维护等相关经验;

2.熟悉关系型数据库体系结构,精通sql语言、能编写存储过程、函数以及SQL语句;

3.有实际数据库优化经验;

4.对数据库方向有浓厚兴趣,愿意往深层次发展。

5.有良好的编程习惯,思路清晰,工作规范,有良好的沟通能力和学习能力,工作踏实,责任心强,有良好的团队合作精神。

数据仓库工程师的基本职责模板 篇16

职责

1、在遵守公司和部门规章制度的基础上,按照工程服务流程、标准,独立完成工程服务部门安排的工作任务;

2、负责某证券行业IT数据中心的驻场技术工作,工作范围为PC服务器及存储的运行保障;

3、负责项目的现场组织、协调、实施、维护、客户培训、技术咨询和支持服务;

4、严格遵守业主方的规章制度及工作要求等。

任职资格:

1、二年以上PC服务器及企业级存储系统集成相关经验,熟悉Linux,以及WINDOWS企业级操作系统环境;

2、熟悉SAN、NAS存储系统、备份、容灾及虚拟化基础知识,具备备份、容灾、虚拟化规划、实施能力者优先;

3、有大型企业数据中心相关运维经验者优先;

4、熟悉网络维护,华为、思科、H3C,具有华为HCIE认证优先考虑。

5、具备良好的职业素养,工作积极、主动,具有强烈的责任心和自学能力,能够承受工作压力和出差要求。