数据仓库工程师岗位职责(通用30篇)

发布时间:

数据仓库工程师岗位职责(通用30篇)

数据仓库工程师岗位职责篇1

1、利用数据仓库建模及相关技术,参与数据仓库模型的设计。

2、参与企业级大数据仓库项目的落地开发。

3、参与企业级主数据管理项目的实施落地。

4、利用hadoop生态相关技术,负责大数据中心的'数据处理流程,包括数据清洗、融合、统计、挖掘等。

数据仓库工程师岗位职责篇2

1、负责数据仓库(HADOOP)ETL工作以及数据运营;

2、负责数据产品的业务需求梳理、数据开发以及维护;

3、负责数据仓库的'维度建模以及设计相关的脚本调度;

4、负责维度模型的数据处理的脚本开发,程序开发以及接口对接。

数据仓库工程师岗位职责篇3

1、学习并理解励步云学业务及系统,根据业务部门需求对公司各项业务数据进行统计分析,出具相关报表;

2、进行数据仓库设计、模型开发、数据质量校验,报表开发;

3、进行数据差异分析,找出统计口径、数据错误、操作错误等造成的差异原因;

4、进行数据查询优化,解决跑数性能问题。

数据仓库工程师岗位职责篇4

1、负责产品数据库研发,参与系统整体架构设计;

2、根据产品目标负责相关业务的数据分析、建模、设计评审,跟进产品过程中数据库设计;

3、负责产品模块的数据层分析、设计、编码、测试;

4、能够独立完成产品数据层开发任务,负责各类数据接口开发;

5、负责各类型数据操作处理和兼容问题;数据库复杂SQL开发和调优。

数据仓库工程师岗位职责篇5

1、负责大数据平台搭建及数据仓库建模;

2、负责数据库管理及数据优化;

3、利用大数据相关技术实现对数据的分析、挖掘、处理、及数据可视化等相关工作;

4、维护大数据平台并能解决相关问题,保障平台正常运行;

5、学习和研究新技术以满足系统需求。

数据仓库工程师岗位职责篇6

1.负责企业级数据仓库设计、规划、建设、实施、管理,数据仓库架构设计与数据开发,创建数据仓库、数据集市

2.熟悉数据仓库领域知识,从架构和技术层面参与建设数据仓库,包括元数据管理、数据质量、主数据管理、性能优化和调优。

3.负责数据仓库平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地

4.配合和协助数据分析/数据挖掘形成底层/中间层的业务逻辑切片

数据仓库工程师岗位职责篇7

1、负责每日的数据仓库运维工作,保障数据的稳定性、一致性等;

2、参与数据仓库的优化设计,如元数据、数据权限、调度优化;

3、负责数据质量和数据标准化的设计与开发;

4、负责满足业务部门的日常业务提数与报表需求的开发。

数据仓库工程师岗位职责篇8

岗位职责:

1.负责衔接大数据平台与前端的数据传输;

2.根据客户需求设计大数据业务平台架构、配置组件;

3.负责后台服务的调试与测试,梳理接口文档、开发文档与测试文档。

任职资格:

1.硕士以上,或较为优秀的本科生;后端开发经验2年以上;

2.有基于b/s架构进行实际业务平台开发的经验,有tob软件开发经验更佳;

3.通用软件开发基础、软件架构基础、scrum敏捷开发方法,有大数据基础更佳;

4.精通java或python语言,有rcp框架经验更佳;熟练掌握mybatis、springcloud/springboot、node.js等框架,精通sql技术;了解以太网通信协议,熟悉websocket技术。熟练使用git,svn等工具;

5.学习能力强,勇于挑战,代码质量意识强,笃信“工程即魔法”。

数据仓库工程师岗位职责篇9

1、进行GIS数据建库和数据处理方案的设计和实现;

2、运用相关GIS软件进行数据空间化处理建库;

3、进行影像识别及处理;

4、进行数据采集处理建库项目管理。

数据仓库工程师岗位职责篇10

1.嵌入式bootloader,kernel开发;

2.工业通讯协议解析等;

3.windows/linux平台网关应用层程序开发;

4.网关产品的软件功能测试验证;

5.工业网关产品软件sdk及library开发。

数据仓库工程师岗位职责篇11

数据处理工程师(大数据项目)全成通信上海全成通信技术有限公司,全成通信,全成岗位职责:

1、负责大数据平台的日常维护和监控

2、负责大数据项目日报发布工作

3、负责日报数据的统计

4、负责大数据项目日常数据的计算、分析和维护

任职要求:

1、一年以上相关工作经验,有电信行业经验者优先

2、熟悉linux和excel,熟练使用perl或者其他的'脚本语言

3、具有oracledll/dml技术的使用经验

4、具有良好的团队合作精神,有较强的学习能力、适应能力、沟通能力

数据仓库工程师岗位职责篇12

1.高质量地完成集团内外各类数据生产集成、数据分析应用建设工作,涉及投研、市场、ERP、全球金融资讯等四个业务领域方向;

2.需求及源系统数据分析,完成数据仓库/EDM等系统数据模型及应用模型设计、数据Mapping规则文档撰写、开发、自测及上线部署;

3.数据质量稽核、问题分析及处理,优化数据处理程序;

4.洞察数据、满足业务场景需求。

数据仓库工程师岗位职责篇13

1.负责海量数据的分析开发工作;

2.完成数据挖掘模型,跟踪模型的实施和效果,定期优化算法和分析策略,分析研究后提供建设性建议;

3.优化大数据存储、计算等各方面性能,确保能从海量大数据信息里,有效进行数据分析和挖掘;

4.根据用户的活动记录进行特征筛选和关联挖掘。提高关联准确性;

5.参与相关数据标准和规范的制定。

数据仓库工程师岗位职责篇14

1、负责数据接入、数据提取、数据清洗、底层重构、业务主题建模等工作;

2、参与数据集市开发,用户画像标签开发;

3、负责接口平台、自助分析平台等系统的建设和维护;

4、针对具体大数据应用场景,提供有效解决方案,并针对具体模型落地实施;

数据仓库工程师岗位职责篇15

1.负责海量数据的分析开发工作;

2.完成数据挖掘模型,跟踪模型的实施和效果,定期优化算法和分析策略,分析研究后提供建设性建议;

3.优化大数据存储、计算等各方面性能,确保能从海量大数据信息里,有效进行数据分析和挖掘;

4.根据用户的活动记录进行特征筛选和关联挖掘。提高关联准确性;

5.参与相关数据标准和规范的制定。

要求:

1.熟悉java/scala/python/R中至少一种编程语言,具有良好的.编码习惯;

2.计算机、数学相关专业本科以上学历;

3.2年以上数据挖掘及其相关经验,对常用的数据挖掘算法有较深入了解,有实际算法调优经验;

4.熟悉常用数据挖掘算法(聚类/分类/回归/关联规则/图模型)等算法原理,具备实际的建模经验,熟悉常用机器学习算法原理,如朴素贝叶斯/决策树/随机森林/逻辑回归/SVM等,并具备相关应用经验;

5.熟悉hadoop生态,具有spark/flink等实际开发经验;

6.极强的数据敏感度,能从海量数据中挖掘出数据核心价值,相关;

7.熟悉分布式存储,熟悉mysql/oracle、hbase、redis、mogongdb、elasticsearch等,熟悉neo4j/JanusGraph等图数据库优先;

8.富有创新精神,充满激情,乐于接受挑战,良好的沟通技巧和团队合作,抗压性强,能适应加班。

数据仓库工程师岗位职责篇16

职责描述:

1、负责文本数据处理,如格式转换、分词处理、实体抽取、专业词典整理等;

2、自然语言处理相关工具开发;

3、协助训练nlp模型。

任职要求:

1、计算机相关专业(本科2年以上);

2、精通c/c++或java,熟悉python、bash?shell等脚本语言;

3、熟悉正则表达式,了解常用分类、聚类算法及相应工具;

4、熟悉使用基本分类、聚类算法及相应工具;

5、具备nlp相关工作(特别是数据处理与分析)经验,了解nlp基本知识;

6、其他:耐心、细致;较强的逻辑思维能力;性格踏实稳定,抗压能力强。

数据仓库工程师岗位职责篇17

1、空间数据采集、内业处理;

2、电子地图制作、配图以及地图服务发布;

3、编制空间数据建库工作文档;

4、对成果数据的分类整理、归档;

5、领导安排的其他工作任务。

数据仓库工程师岗位职责篇18

1、熟悉掌握业务系统功能,灵活制定不同业务的推广策略,通过活动运营、内容运营等方式策划并落地项目推广方案,拓展系统用户量及影响力。

2、熟悉公文写作,配合完成工作汇报材料的撰写及分析报告。

3、与企业及海关关系的协调和维护,强化合作关系,维护好项目参与方的'关系。

4、面向进出口企业开展调研,主动挖掘系统需求,进行需求分析,形成调研报告或业务需求报告。

5、项目管理相关工作,包括组织业务需求论证、项目立项、进度管理等根据项目管理规范开展相关工作。

6、完成领导交办的其他工作事项。

数据仓库工程师岗位职责篇19

1、负责数据仓库的设计、开发、部署、维护和优化;

2、参与公司项目数据库架构设计,及相关文档的撰写;

3、协助开发完成数据库表的设计以及SQL调优,给开发人员提供SQL调优指导;

4、负责数据库技术规范建设。

数据仓库工程师岗位职责篇20

1.负责工业设备组网及数据采集方案设计;

2.负责设计方案所需传感器、仪表选型,布线图、数据存储方式、数据表等详细设计;

3.负责与设备厂商、数控系统厂商进行业务协议、通信协议及接口协调;

4.负责现场数据采集相关软硬件安装调试;

5.负责和用户现场对口协调、技术指导及现场培训。

数据仓库工程师岗位职责篇21

•在行业担任数据工程师或后端工程师超过4年

•您将了解数据仓库的概念(建模,调整,维护)

•您非常精通SQL,并渴望指导和教其他SQL

•您精通Python或任何其他脚本语言和软件开发

•您在分布式数据处理/传统RDBMS/MPP/NoSQL系统和数据建模方面有很强的低估/经验

•您在Spark/Kafka/HBase/Redis/Kettle方面拥有丰富的经验

•您受到探索数据的好奇心和动力的驱动

•您具有处理数据管道的DevOps问题的经验

•对数据驱动业务,关键思想家,问题解决者和自我启动者的热情

•获得认可大学的相关学科的学士学位

数据仓库工程师岗位职责篇22

1、针对具体的业务场景需求、定义数据分析及挖掘问题;

2、使用统计学分析方法、挖掘算法、构建有效且通用的数据分析模型,对数据挖掘方案进行验证、开发、改进和优化,实现数据挖掘的功能应用;

3、搭建高扩展高性能的数据分析模型库,作为数据分析团队的基础工具;

4、完成领导安排的其他工作。

数据仓库工程师岗位职责篇23

岗位职责:

1.参与金融大数据平台系统和算法的研发和优化;

2.基于大数据金融场景,进行信用风险模型,风控模型,营销模型的创新设计;

3.与业务部门沟通合作,将数据模型应用于实际业务。

任职要求:

1.计算机相关专业硕士及以上学历,至少7年以上相关工作经验;;

2.具有良好的商业敏感度和优秀的数据分析技能,能够开发创新而实际的.分析方法以解决复杂的商业问题。

3.熟悉机器学习的一般模型;例如分类.聚类.预测,理解一些常用的特征选择和矩阵分解算法。

4.熟悉深度神经网络和常用模型(如CNN,DBN,sparseconding,RNN等),有Caffe或Theano或ConvNet的实践经验。

5.在语义理解检索(如知识图谱表示.结构化预测.语义解析.信息检索.知识挖掘等)有过深入的工作与研究。

6.较强的自学能力.优秀的逻辑思维能力和良好的沟通表达能力和敬业精神。

7.具备良好的系统分析能力,良好的抽象思维和逻辑思维能力,独立分析问题解决问题的能力;

8.可承受较大压力,有责任感,较强的沟通协调能力,具有团队合作精神;

9.有互联网公司.大型金融企业和大型IT企业工作经历的优先。

数据仓库工程师岗位职责篇24

岗位职责:

1、对通信和金融业务数据进行分析和挖掘,满足研发和运营等部门的业务需求和决策需求;

2、能根据业务特点选择最合适的数据挖掘算法,并做调优;

3、支持数据分析、挖掘算法平台的部署和日常运营;

4、撰写分析类报告。

任职资格:

1、大学本科或本科以上统计学、数学或其他相关专业,对数据结构熟悉;

2、熟练使用python进行数据分析、处理、可视化。熟悉numpy/pandas/matplotlib等常用模块。熟练使用sql,最好用过hive-sql或spark-sql;

3、对hadoop/spark有一定了解。能够简单使用hadoop系列命令;

4、对线性回归,决策森林,xgboost,评分卡等数据挖掘相关算法有一定了解;

5、做过web接口调试,熟悉json者优先;

6、熟练掌握PPT和EXCEL制作;

7、具备良好的学习、沟通与表达能力,具有较强的团队合作精神,对工作富有热情,能承受工作压力;

8、有运营商或金融类相关数据经验工作优先考虑;

9、能适应中长期现场出差。

数据仓库工程师岗位职责篇25

1、维护数据库稳定运行,持续发现和解决潜在的问题;

2、负责数据库的性能优化,使用新技术和新架构满足日益增长的业务需求;

3、负责数据库的监控系统设计,为开发团队提供平台支持;

4、负责数据库的运维方面的相关工作,包括数据库的安装部署、压力测试、备份恢复、知识库管理等

5、负责数据库进行容量规划、架构设计,提高业务高可用性和容灾能力;

6、负责数据库相关工作的整体规划,提供决策建议。

数据仓库工程师岗位职责篇26

•识别,分析和解决计划支持问题。

•与BU利益相关者合作,确定并优先考虑数据和统计要求,包括要收集的特定数据元素。

•协助开发和实施数据库,数据收集系统/工具,数据分析以及其他优化统计效率和质量的策略(包括确定流程改进以更好地满足业务需求)。

•分析大量数据集,提出有见地的业务建议。

•通过查看报告和绩效指标来确定和纠正数据收集问题,从而确保数据的准确性和完整性。

•识别,分析,解释和建模数据湖中数据的趋势或模式。

•为各种受众设计和生成准确有效的统计数据可视化产品和报告。

•通过促进技术和非技术利益相关者之间的沟通,确保技术团队了解计划和业务工作的短期和长期目标

•准时交付优质,易懂,明确的产品。

•参与构建机器学习策略平台。

•对数据驱动业务,关键思想家,问题解决者和自我启动者的热情

•促进技术和非技术利益相关者之间交流的能力

•出色的书面和口头交流能力。

数据仓库工程师岗位职责篇27

任职要求:

1、软件、计算机、通讯等理工科相关专业本科及以上学历;

2、具有3年配置管理或产品数据管理经验;

3、熟悉计算机与网络管理;

4、熟悉配置管理与产品数据管理知识,熟练掌握svn、plm等数据管理平台的`操作与管理;

5、熟悉系统与信息安全知识;

6、具有较强的逻辑思维能力及良好的沟通能力,良好的主动学习能力及执行力。

数据仓库工程师岗位职责篇28

相关文件的定义和编写

2.生产良率和抛料率的监控和改善

3.生产异常的分析解决

4.技术人员的班别安排

5.设备保养的'安排和作业follow

6.设备故障维修&coordinator

7.配合新产品导入或者其他需求的试产验证

8.主管交付的其他事项

数据仓库工程师岗位职责篇29

1、参与数据仓库建设,负责数据仓库模型设计;

2、开发高质量可扩展的底层数据仓库体系;

3、负责数据仓库系统与业务系统的接口设计和确认工作;

4、负责数据平台相关的管理工作,如数据研发规范、数据质量及稳定性保证等建设;

5、参与公司各个业务线BI、数据产品与应用的数据研发,发觉数据潜在价值。

数据仓库工程师岗位职责篇30

1.负责数据分析,数据挖掘相关的算法、应用的设计与开发;

2.负责公司产品各阶段数据的整理、分析、挖掘及提交数据报告,重点对车辆行为数据进行分析和挖掘,利用数据分析结论推动业务产品的优化;

3.对海量业务数据进行整合、分析挖掘,挖掘产品以及用户潜在信息,为营销、运营及决策提供业务分析及数据支持。