仓库工程师岗位职责第1篇职责:参与数据仓库模型设计和开发工作;负责建立数据分析模型,设计前端报表,数据可视化开发;负责数据平台项目数据仓库的管理、性能监控及优化等;负责数据平台的日常运维及优化职位要求下面是小编为大家整理的仓库工程师岗位职责必备23篇,供大家参考。
仓库工程师岗位职责 第1篇
职责:
参与数据仓库模型设计和开发工作;
负责建立数据分析模型,设计前端报表,数据可视化开发;
负责数据平台项目数据仓库的管理、性能监控及优化等;
负责数据平台的日常运维及优化
职位要求:
大学本科以上学历,3年以上工作经验,包含2年以上数据仓库开发工作经验;
精通数据仓库建设,熟悉常用的模型设计方法;
对数据可视化有丰富的经验,熟悉常用的数据分析方法;熟悉至少一种报表工具开发;
精通数据仓库领域知识和技能,包括元数据管理、主数据管理、数据质量管理等;
熟练使用ETL工具如Kettle、SSIS等进行数据清洗、转换、整合;
熟悉至少两种关系型数据库,如Oracle、SQL Server、PostgreSQL、MySql等主流数据库,精通SQL Server开发和运维者优先考虑;
有完整的数据平台建设经验者优先;
熟悉使用Linux系统及Shell脚本开发,熟练开发Python程序者优先;
熟悉大数据开发框架者优先,如Spark,Flink等;
对新技术好奇爱学习,主动性和责任心强,对数据敏感,逻辑性强,有良好的抗压能力;
团队协作能力强
仓库工程师岗位职责 第2篇
职责:
1、参与据仓库的长期架构规划,与数据开发,建设共享大数据平台;
2、负责数据平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地;
3、负责来自业务团队数据需求的研发支撑;
4、大规模数据挖掘和机器学习算法的实现和维护;
5、在线和离线海量数据分析平台的开发;
6、负责数据仓库的建设和维护,包括需求调研分析、软件规划、概念模型、设计逻辑、物理模型、数据处理(抽取、清洗、转化)、项目实施管控等;
7、负责制定数据接入和采集规范制定。
任职要求:
1、从事数据仓库领域工作2年以上;
2、熟悉数据建模、ETL设计与应用、报表开发等,并有实际模型设计及ETL开发经验 ;具有良好的编程习惯和文档编写习惯;
3、熟悉数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、性能调优等;
4、掌握大型数据库开发技术,如Oracle、Teradata、DB2、Mysql等等掌握至少其中一种,灵活运用SQL实现海量数据ETL加工处理;
5、了解大数据基础架构和平台 ,具备相关产品(Hadoop、Hive、HBase、Pig、Sqoop、Spark等)项目应用研发经验,有MapReduce开发的实战经验者优先考虑;
6、熟悉linux系统;
7、熟练掌握python语言;
8、熟悉数据可视化的基本方法,有数据可视化的开发经验优先;
9、对数据敏感,具有良好的逻辑分析、责任心强、良好的对外沟通和团队协作能力
仓库工程师岗位职责 第3篇
职责:
1、负责建设数据仓库架构,包括元数据管理、ETL调度、数据集成、OLAP等子系统的设计和开发;
2、制定和推广数据字典,建立完善的元数据管理规范,负责数据质量监控设计;
3、搭建和维护数据仓库表,解决业务人员在仓库系统流程、工具使用、数据处理等遇到的问题;
4、负责数据仓库和其它业务系统接口。
5、基于对数据的理解和业务需求,对数据进行整理、分析和用户画像搭建。
岗位要求:
1、计算机相关专业本科及以上学历,有2年以上数据仓库、ETL工作经验;
2、熟悉SQL、Shell等相关技术,有海量数据处理、ETL及任务调度优化、数据仓库建模等经验;
3、熟悉Linux环境,了解Java/Python服务端系统开发;
4、熟悉Hadoop/Spark/Hive/Hbase/Kafka/Flume等大数据技术者优先;
5、逻辑清晰、对数据敏感,良好的沟通能力和协作能力,敢于接受挑战,能够承受压力;
仓库工程师岗位职责 第4篇
职责:
1、负责金融数据的收集、整理与分析;
2、负责oracle数据仓库的设计、开发搭建及运行维护;
3、依据业务需求优化数据存储结构;
4、协助项目其他成员设计关键的SQL语句和触发器、存储过程、表等;
5、通过数据库的日常检查,对性能较差的SQL语句提出优化方案;
6、协助搭建量化投资策略平台。
要求:
1、计算机网络、统计、数学或信息技术本科及以上学历;
2、能编写Oracle简单脚本,可以独立在windows和linux环境下搭建管理oracle服务器数据库;
3、对linux,unix 操作系统有了解,熟练使用shell,python等脚本语言处理数据;
4、至少一年以上的的数据分析、挖掘、清洗和建模的经验;
5、ORACLE数据库开发管理经验,精通SQL,有一定的SQL编写和优化调优经验;
6、了解hadoop或具有项目数据挖掘算法开发经验优先考虑;
7、有互联网数据分析经验者优先考虑;
8、良好的数据敏感度,能从海量数据提炼核心结果;
9、性格积极乐观、诚信、有较强的语言表达能力,具备强烈的进取心、求知欲及团队合作精神。
仓库工程师岗位职责 第5篇
职责:
1、深入理解业务,了解需求和痛点,为风控和业务部门提供数据支持;
2、针对业务需求,参与数据仓库需求分析,制定ETL相关设计方案和开发计划;
3、负责数据同步,数据整合清洗,以及数据质量的治理;
4、数据仓库模型设计,分层体系构建,元数据管理监控以及权限控制。
任职资格:
1、重点院校统招本科及以上学历,计算机基础扎实;
2、具有2年以上金融贷款类业务经验;
3、熟悉数据仓库理论和数据库建模,有redshift和AWS经验优先;
4、精通pgsql/mysql等数据库,精通sql语言,具有数据库优化/sql优化相关经验;
5、熟练掌握python/shell语言。
仓库工程师岗位职责 第6篇
职责:
1、负责制定数据仓库平台技术体系架构、数据架构及规范;
2、负责设计和实施公司业务数据的实时/离线数据ETL架构方案;
3、负责调度架构设计与开发;
4、负责数据仓库平台运维以及日常数据运营等管理;
5、负责关键技术攻关;
岗位要求:
1、计算机、数学、统计等相关专业本科及以上学历,3年以上数据仓库项目开发经验,参与过数据仓库架构设计,对ETL开发流程、调度架构有深入理解;
2、精通mysql等数据库,丰富的SQL性能调优经验;
3、熟练使用Java、Shell等脚本语言;
4、熟悉数据治理理论,数据质量、元数据管理流程和方法;
5、了解Hadoop/Hive/HBase/Spark/Storm等技术及其生态圈;
6、沟通能力好、责任心强,具有良好的团队合作精神和敬业精神;
仓库工程师岗位职责 第7篇
职责:
负责业务的数仓\数据集市的建设,能提炼通用需求,数仓标准,实现高质量的数据互通共享
对海量数据进行统计与分析,产品效果评估与分析,为产品策略优化迭代提供强有力的数据支持
和业务团队紧密合作推动数据产品与服务的落地,具备良好的沟通协调能力
任职要求:
计算机 数学 统计, 金融等相关专业的本科或以上学历;从事数仓领域至少3年以上,具备海量数据的DW模型设计与ETL开发经验 熟悉数仓领域知识, 包括但不局限于:数据质量,元数据管理,主数据管理,数据开发测试工具与方法;
掌握Greenplum,Oracle,Teradata,Mysql 等至少一种,灵活运用SQL实现海量数据ETL加工处理;有Greenplum经验优先
具有数据仓库相关开发经验,如ETL,建模,BI,数据产品等,熟悉数仓模型
掌握一门或多门开发语言,不限于java/python/scala等,熟悉Linux/Unix 平台上的开发环境
6、主导过大型数据仓库架构或模型设计经验者优先;
7、较好的沟通理解能力,性格乐观,态度踏实,积极上进;
仓库工程师岗位职责 第8篇
职责:
1、负责建设数据仓库架构,包括元数据管理、ETL调度、数据集成、OLAP等子系统的设计和开发;
2、制定和推广数据字典,建立完善的元数据管理规范,负责数据质量监控设计;
3、搭建和维护数据仓库表,解决业务人员在仓库系统流程、工具使用、数据处理等遇到的问题;
4、负责数据仓库和其它业务系统接口。
5、基于对数据的理解和业务需求,对数据进行整理、分析和用户画像搭建。
岗位要求:
1、计算机相关专业本科及以上学历,有2年以上数据仓库、ETL工作经验;
2、熟悉SQL、Shell等相关技术,有海量数据处理、ETL及任务调度优化、数据仓库建模等经验;
3、熟悉Linux环境,了解Java/Python服务端系统开发;
4、熟悉Hadoop/Spark/Hive/Hbase/Kafka/Flume等大数据技术者优先;
5、逻辑清晰、对数据敏感,良好的沟通能力和协作能力,敢于接受挑战,能够承受压力;
仓库工程师岗位职责 第9篇
岗位职责
1.负责电商数据仓库搭建、etl开发与维护;
2.完成数据统计、编写计算任务、接口开发;
3.参于数据规范制定、文档编写。
任职要求:
1.本科以上学历,软件工程/计算机/通信/数学等相关专业;
2.熟悉hive sql语言,熟悉shell, python等至少一种脚本语言;
3.有hadoop、spark、flink等至少一种大数据平台的使用经验;
4.理解能力强,善于沟通,有责任心和团队精神;
5.有数据仓库建设、商业数据分析、增长项目经验者优先。
仓库工程师岗位职责 第10篇
职责:
1、搭建企业数据仓库平台,负责数据仓库的系统设计、开发与运维;
2、负责数据仓库系统架构和规范,包括ETL调度、数据集成、报表、数据质量等子系统的设计和开发;
3、参与数据治理规划和推广,推进数据质量、元数据、数据标准等专题治理工作;
4、指导和协助团队内其他成员,共同建立起数据仓库的相关流程、规范和方法;
5、完成公司安排的其他数据相关工作和任务。
岗位要求:
1、学历大学本科(含)以上 , 计算机技术、统计、数学等相关专业,5年以上数据仓库项目经验;
2、具备良好的沟通协调、计划、创新能力,责任心和执行力强;
3、熟悉各类关系型与非关系型数据库,如Oracle、Teradata等,熟悉各类ETL开发;
4、具备良好的项目管理能力,有2年以上的项目管理经验;
5、具备基本的代码编写能力,熟练掌握至少一门语言,如python、java、R语言;
6、有Teradata数据仓库管理或实施经验者优先。
仓库工程师岗位职责 第11篇
职责:
1、参与公司数据仓库基础平台的建设
2、参与数据建模及数据仓库应用产品的设计和开发。
3、参与数据仓库ETL流程的优化及解决ETL相关的技术问题。
4、通过专项分析,输出专项分析报告,为业务模块的决策和产品方向提供数据支持
5、通过市场细分、同期群分析或者AB测试来分析数据,根据数据变化定位产品的运行现状;
6、其他工作,参与完成各类分析报告、报表等其他指定的工作。
岗位要求:
本科以上学历,有三年以上互联网数据仓库设计和实现经验。
熟悉数据仓库各类模型建模理论,了解数据仓库数据分层架构,熟悉3NF和多维数据模型设计。
具备Hadoop、Hive、Hbase,Spark,Kylin等大数据技术处理经验,并具有开发经验者更佳。
热爱数据工作,具有学习精神,有超强责任心和上
仓库工程师岗位职责 第12篇
职责:
1、负责金融行业数据仓库开发工作
2、负责与多个应用对接的接口和框架设计
3、充分理解产品需求,能够结合需求进行任务设计,完成详细设计文档的编写。
岗位要求:
从事数据仓库及商业智能(BI)领域工作至少3年以上,熟悉数据仓库模型设计方法论,并有实际的模型设计经验,有大型数仓建设经验优先;
精通数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、主数据管理、性能调优等;
有主流商业/开源ETL工具(Informatica、Datastage、Kettle等)使用经验者优先;
熟悉Hadoop生态相关技术并有相关实践经验,包括Hdfs、Map-Reduce、Hive、Hbase、Spark等,具备海量数据加工处理(ETL)相关经验;
熟练使用java语言,对微服务架构有一定了解;
具有较强的团队意识与良好的沟通能力及高度的工作责任感,热爱技术,有很强的钻研能力,乐于接受有挑战性的任务;
7、有团队管理经验优先。
仓库工程师岗位职责 第13篇
职责:
1、负责大数据开发工作;
2、负责公司数据服务接口平台的建设;
3、参与打造数据中台内容的规划、设计、开发工作,实现高质量数据的互通与共享; 4、参与数据模型体系构建及数据主题设计和开发,搭建离线、近线、实时数据公共层;
5、参与构建非结构化数据体系,进行网络数据爬取,数据清洗,特征挖掘,统计分析,并结合应用场景实现落地。
岗位要求:
1、本科以上学历,计算机、数学、统计学等相关专业;
2、熟悉数据集成、数据仓库、数据分析等全流程数据处理,具备开源或阿里大数据平台实战经验,如hive/spark/Maxcompute;
3、熟悉数据治理体系,包括数据模型、数据标准、数据质量等;
4、熟悉常见的离线、实时、流式数据应用场景及架构;
5、至少掌握一门开发语言,Java/Python;
6、具备良好的沟通能力和设计文档编写能力;
7、懂数据挖掘、知识图谱的构建者优先。
仓库工程师岗位职责 第14篇
职责:
参与打造数据中心内容的规划、设计、开发和优化工作,实现高质量数据的互通与共享;
参与数据模型体系构建及数据主题设计和开发,搭建离线、实时数据仓库;
参与数据产品与应用的数据研发;
负责日常应用系统监控,发现异常问题及时分发,并跟进后续处理;
编写Python程序,或ETL技术完成日常数据抽取和整理任务,可独立进行数据分析;
岗位要求:
熟悉ETL开发、数据仓库设计流程,熟悉Oracle, MS SQL Server 等主流数据库,表结构设计,存储过程编写;
熟练掌握常用Linux命令,具备shell编程能力,熟练掌握Python编程语言
具有较强的语言表达和沟通能力,良好的团队合作精神
逻辑思维能力强,对数据敏感,有较强学习能力和创新思维;
具有高度的责任感和敬业精神,能够承受较大的工作压力
仓库工程师岗位职责 第15篇
职责:
负责数据ETL开发,根据数仓层级结构及主题域划分,规范清洗代码,提供准确数据
负责数据质量治理,发现异常业务逻辑或数据质量问题,推动业务优化及改善。
负责数据开发需求评审、结合数据分析体系制定ETL清洗方案;
任职要求:
一年以上数据仓库ETL设计及开发经验,有BI经验者优先
熟练使用 SQL,熟悉HQL常用内部函数,有一定的 HQL性能调优经验优先
具备数据仓库架构设计、模型设计、ETL设计,调度的相关经验优先;
对数据敏感,有较强数据分析和解决问题能力;
积极沟通,主动了解业务需求,愿意尝试新的技术领域。
仓库工程师岗位职责 第16篇
职责:
1 负责大数据平台、数据仓库多维模型设计
2 负责大数据平台相关生产系统数据的抽取、清洗、转换等工作
3 负责BI平台设计与报表开发工作
岗位要求:
1、精通数据仓库建模理论,有参与过2个以上的数据仓库建设经验;
2、精通ETL开发,熟悉数据的抽取、常用数据脚本编写、存储过程的编写;
3、熟悉BI平台,有数据报表设计和开发经验;
4、熟悉SQL,掌握Oracle、PostgreSQL、MySql等至少一种主流关系数据库;
5、具备良好的团队协作精神,良好的沟通能力;
6、供应链、物流行业数据从业经历者优先。
仓库工程师岗位职责 第17篇
岗位职责
负责业务数据调研、需求理解,数据采集方案设计及实现;
2.负责建立数据模型,根据业务设计数据主题;
3.负责数据模型的etl编写,参与团队etl流程的优化及解决etl相关技术问题;
4.理解业务方的数据需求,提供面向业务的olap、报表、数据提取等数据服务;
任职要求:
1.本科及以上学历,计算机相关专业,2-5年企业级数据平台相关系统开发经验;
2. sql技能娴熟,精通hive-sql,presto-sql
3.具有扎实的计算机操作系统、数据结构等编程基础,熟悉java或scala语言;
4.有过2年以上bi项目经验,熟悉开源的`bi工具如:metabase,superset,redash.有实际操作经验。
7.有良好的沟通能力,善于主动思考和行动,有极强的责任心和自驱力。
仓库工程师岗位职责 第18篇
职责:
负责大数据数据仓库的建设,根据数据仓库及BI项目的需求,制定相关的设计方案和开发计划;
参与数据的分析处理和数据统计内容的架构设计与研发;
组织项目组成员完成数据仓库的开发和运维等;
负责公司数据规范、数据标准、数据指标梳理与定义;
协助技术人员完成数据管控平台的搭建,完成数据规范管理体系到信息平台的落地实施;
组织开展对数据平台各模块的内容进行培训;
制定和审计业务系统数据数据库模型设计规范;
任职资格:
有一定的互联网数据仓库经验;
深入了解 Hadoop 生态系统,熟悉HBase、Hive、Storm、spark等大数据开发工具中一种或几种;
具备大型数据仓库架构设计、模型设计、ETL 设计的相关经验;
关系型数据库原理基础扎实,熟悉 MySQL/PostgreSQL等的使用和调优;
有独立设计数据仓库经验、熟悉数据仓库相关理论知识者优先;
仓库工程师岗位职责 第19篇
职责:
负责公司数据仓库/数据集市模型设计,优化现有数据仓库模型;
参与数据仓库支持工具设计;
参与数据仓库需求定义;
参与数据治理、元数据建设、优化数据开发流程。
任职资格:
计算机、数学、统计或相关专业本科及以上学历,数据挖掘/平台和BI分析领域优先;
3年及以上数据仓库设计开发经验;
熟悉HIVE,有HQL使用经验者优先;
精通数据仓库建模方法,对kimball维度建模理论有深入的了解;
有实际数仓建设项目负责人经验者优先;
熟悉Hadoop生态圈以及大数据环境的 OLAP 框架者优先。
仓库工程师岗位职责 第20篇
职责:
利用数据仓库建模及相关技术,参与数据仓库模型的设计。
参与企业级大数据仓库项目的落地开发。
参与企业级主数据管理项目的实施落地。
利用hadoop生态相关技术,负责大数据中心的数据处理流程,包括数据清洗、融合、统计、挖掘等。
任职要求
熟悉数据仓库产品,对数据处理、维度建模、数据分析等有深刻认识,具备数据仓库架构设计、模型设计、ETL设计的相关经验、熟悉数据仓库架构,熟悉数据仓库项目的实施流程,有一个以上企业级数据仓库项目设计经验者优先;
熟悉数据治理及主数据管理的理论知识,掌握主数据管理项目的实施方法和落地过程,至少参与过一个主数据管理项目的实施落地。
精通JAVA、Python等编程语言;精通Oracle、Mysql等主流数据库,精通SQL;
具备基于Hadoop大数据平台开发经验,熟悉hadoop生态体系,熟悉Hadoop、Hbase、Hive,Spark,Impala等常用组件,进行常用的ETL开发工作;
熟悉常用的数据分析及数据挖掘方法及实现;
具备较强的代码能力,有较强的数据分析能力;具备优秀的沟通能力、学习能力;
相关专业硕士以上学历,或本科学历相关工作经验超过2年,具有智能制造领域相关经验或背景者优先,能力突出者可适当放宽要求。
仓库工程师岗位职责 第21篇
职责:
1、负责建设数据仓库架构,包括元数据管理、ETL调度、数据集成、OLAP等子系统的设计和开发;
2、搭建和维护数据仓库表,解决业务人员在仓库系统流程、工具使用、数据处理等遇到的问题;
3、基于对数据的理解和业务需求,对数据进行整理、分析和挖掘。
任职资格:
1、做事耐心,有强烈的责任心;
2、计算机,数学,统计学相关专业本科及以上学历,
3、熟悉主流的关系型数据库及MPP数据库,至少精通一门数据库,熟悉Gbase优先;
4、熟练使用SQL语言,具有2年及以上数据仓库、报表系统等ETL开发、维护经验;
5、熟悉Hadoop/Spark/Hive/Hbase等大数据技术者优先;
6、逻辑清晰、对数据敏感,良好的沟通能力和协作能力,敢于接受挑战,能够承受压力;
7、有公安相关业务经验者优先考虑。
仓库工程师岗位职责 第22篇
职责:
1、负责数据库业务程序开发(包括脚本、函数、存储过程等),编写数据库设计文档,进行SQL代码规范审核;
2、负责数据库库表模型设计,数据库架构搭建和优化策略,和开发人员SQL代码开发技能提升;
3、协助进行数据提取和数据分析,负责BI系统后端ETL数据抽取;
4、利用相关建模软件(数据分析软件)进行数据建模工作。
任职要求:
1、有电商行业工作经验,熟悉电商业务优先;
2、工作经验2-5年;
3、本科及以上学历,计算机相关专业;
4、熟悉Oracle,mysql等主流数据库,精通SQL各种查询汇聚,具有BI/数据仓库经验者优先;
5、善于与人沟通,为人正直、诚信,有较强的事业心,对工作认真负责。
仓库工程师岗位职责 第23篇
职责:
1、基于Oracle/大数据平台环境进行数据仓库开发,可根据需求分析说明书、设计说明书完成数据仓库中间层、数据集市等开发。同时具备带领开发人员完成需求开发的能力。
2、根据业务进行数据仓库建设,保证指标口径的统一完善。
3、能独立和客户对接业务,并编写需求和设计文档。
4、与团队形成良好沟通,有效传达设计意图,并持续跟进设计的调整和优化。
任职要求:
1、本科及以上学历,三年以上相关工作经验,有较好的业务理解能力,能快速响应业务人员的需求,并且可以用优化技术手段实现;
2、熟悉数据仓库建模理论,了解数据仓库数据分层架构、多维数据模型设计;
3、具备优秀的沟通与表达能力和文档编写能力,工作积极主动,严谨认真,肯吃苦,肯钻研 ;
4、掌握Oracle、SQL Server、DB2、hadoop大数据平台等主流数据库及其数据仓库的开发、设计和调优;
5、有电信行业数据仓库开发经验,或有Hadoop / Spark / Hive 使用经验者优先。
推荐访问:岗位职责 仓库 必备 仓库工程师岗位职责必备23篇 仓库工程师岗位职责(必备23篇) 仓库工程师的职责
【仓库工程师岗位职责必备23篇(全文)】相关文章: