
数据仓库工程师岗位职责
在学习、工作、生活中,我们每个人都可能会接触到岗位职责,岗位职责主要强调的是在工作范围内所应尽的责任。相信很多朋友都对制定岗位职责感到非常苦恼吧,以下是小编为大家收集的数据仓库工程师岗位职责 ,欢迎阅读,希望大家能够喜欢。
职责:
1、参与据仓库的长期架构规划,与数据开发,建设共享大数据平台;
2、负责数据平台相关数据管理工作,如研发规范、质量规范、保障规范的制定与推动实施落地;
3、负责来自业务团队数据需求的`研发支撑;
4、大规模数据挖掘和机器学习算法的实现和维护;
5、在线和离线海量数据分析平台的开发;
6、负责数据仓库的建设和维护,包括需求调研分析、软件规划、概念模型、设计逻辑、物理模型、数据处理(抽取、清洗、转化)、项目实施管控等;
7、负责制定数据接入和采集规范制定。
任职要求:
1、从事数据仓库领域工作2年以上;
2、熟悉数据建模、ETL设计与应用、报表开发等,并有实际模型设计及ETL开发经验;具有良好的编程习惯和文档编写习惯;
3、熟悉数据仓库领域知识和管理技能,包括但不局限于:元数据管理、数据质量、性能调优等;
4、掌握大型数据库开发技术,如Oracle、Teradata、DB2、Mysql等等掌握至少其中一种,灵活运用SQL实现海量数据ETL加工处理;
5、了解大数据基础架构和平台,具备相关产品(Hadoop、Hive、HBase、Pig、Sqoop、Spark等)项目应用研发经验,有MapReduce开发的实战经验者优先考虑;
6、熟悉linux系统;
7、熟练掌握python语言;
8、熟悉数据可视化的基本方法,有数据可视化的开发经验优先;
9、对数据敏感,具有良好的逻辑分析、责任心强、良好的对外沟通和团队协作能力
职责:
1、负责建设数据仓库架构,包括元数据管理、ETL调度、数据集成、OLAP等子系统的设计和开发;
2、搭建和维护数据仓库表,解决业务人员在仓库系统流程、工具使用、数据处理等遇到的'问题;
3、基于对数据的理解和业务需求,对数据进行整理、分析和挖掘。
任职资格:
1、做事耐心,有强烈的责任心;
2、计算机,数学,统计学相关专业本科及以上学历,
3、熟悉主流的关系型数据库及MPP数据库,至少精通一门数据库,熟悉Gbase优先;
4、熟练使用SQL语言,具有2年及以上数据仓库、报表系统等ETL开发、维护经验;
5、熟悉Hadoop/Spark/Hive/Hbase等大数据技术者优先;
6、逻辑清晰、对数据敏感,良好的沟通能力和协作能力,敢于接受挑战,能够承受压力;
7、有公安相关业务经验者优先考虑。
职责:
1、 完成系统集成项目数据库相关的售前技术支持工作;
2、参与系统集成项目数据库相关的调研规划设计实施维保工作;
3、 掌握及丰富数据库行业生态的.变化及趋势,便于精确匹配及配合销售的商务运作策略;
4、公司安排其它工作。
岗位要求:
1、大学本科以上学历,3年或者以上数据库工作经验;
2、熟悉主流的关系型数据库Oracle,MySQL,SQL Server,DB2;能够独立完成数据库相关的调研规划设计实施维保工作;
3、优秀的口头表达能力和方案撰写能力,谈吐良好,能与用户有效沟通;
4、能适应长期出差,根据项目需求出差(售前交流出差1-2天,项目实施出差1周-6周);
5、熟悉金融行业数据中心建设优先考虑;
6、具有OCP/OCM等证书者优先考虑;
7、具有金融/互联网/运营商行业从业经验者优先考虑;
8、熟练掌握分布式数据库从业经验者优先考虑;
1、光学工程/应用光学等相关专业,本科以上学历,3年以上工作经验;
2、熟练使用Zemax等光学机械设计软件;做事认真细致;态度积极向上。
3、了解掌握光学设备的装调和技术问题的`解决;
4、动手能力强,能够熟练设计光学系统的装调方案,熟悉光学设备定标的实际操作;
5、有激光工作经验优先、最好做过激光设备调试及售后工作。
1、参与数据仓库建设,负责数据仓库模型设计;
2、开发高质量可扩展的`底层数据仓库体系;
3、负责数据仓库系统与业务系统的接口设计和确认工作;
4、负责数据平台相关的管理工作,如数据研发规范、数据质量及稳定性保证等建设;
5、参与公司各个业务线BI、数据产品与应用的数据研发,发觉数据潜在价值。
职责:
1.根据业务场景要求设计数据挖掘模型,包括有监督、无监督类模型,以及偏好、价值评估类模型、组合最优化类模型等
2.通过数据挖掘手段进行标签化工作
3.根据数据挖掘方法论完成数据挖掘全流程建模工作
4.自主开展模型效果评估,并不断优化
5.开展数据挖掘模型产品化工作
6.带领产品(或项目)团队进行技术攻关
7.主导数据挖掘相关解决方案编写、客户交流
任职资格:
1.本科及以上学历
2.熟悉SPARK ML
3.精通Python技术
4.精通数据挖掘常用算法以及神经网络算法
5.精通SQL数据处理,包括关系型数据库,以及Hive SQL、Spark SQL处理
6.三年以上数据挖掘设计、开发经验
7.具备独立研究以及解决问题的能力
8.较强的PPT方案撰写以及呈现能力
9.较强的'沟通协调和执行能力,能够承受较大的工作压力
10.较强的工作责任心和客户服务意识
职责:
1、负责制定数据仓库平台技术体系架构、数据架构及规范;
2、负责设计和实施公司业务数据的'实时/离线数据ETL架构方案;
3、负责调度架构设计与开发;
4、负责数据仓库平台运维以及日常数据运营等管理;
5、负责关键技术攻关;
岗位要求:
1、计算机、数学、统计等相关专业本科及以上学历,3年以上数据仓库项目开发经验,参与过数据仓库架构设计,对ETL开发流程、调度架构有深入理解;
2、精通mysql等数据库,丰富的SQL性能调优经验;
3、熟练使用Java、Shell等脚本语言;
4、熟悉数据治理理论,数据质量、元数据管理流程和方法;
5、了解Hadoop/Hive/HBase/Spark/Storm等技术及其生态圈;
6、沟通能力好、责任心强,具有良好的团队合作精神和敬业精神;
职责:
1负责大数据平台、数据仓库多维模型设计
2负责大数据平台相关生产系统数据的抽取、清洗、转换等工作
3负责BI平台设计与报表开发工作
岗位要求:
1、精通数据仓库建模理论,有参与过2个以上的数据仓库建设经验;
2、精通ETL开发,熟悉数据的'抽取、常用数据脚本编写、存储过程的编写;
3、熟悉BI平台,有数据报表设计和开发经验;
4、熟悉SQL,掌握Oracle、PostgreSQL、MySql等至少一种主流关系数据库;
5、具备良好的团队协作精神,良好的沟通能力;
6、供应链、物流行业数据从业经历者优先。
1、维护数据库稳定运行,持续发现和解决潜在的问题;
2、负责数据库的性能优化,使用新技术和新架构满足日益增长的业务需求;
3、负责数据库的监控系统设计,为开发团队提供平台支持;
4、负责数据库的`运维方面的相关工作,包括数据库的安装部署、压力测试、备份恢复、知识库管理等
5、负责数据库进行容量规划、架构设计,提高业务高可用性和容灾能力;
6、负责数据库相关工作的整体规划,提供决策建议。
1、学习并理解励步云学业务及系统,根据业务部门需求对公司各项业务数据进行统计分析,出具相关报表;
2、进行数据仓库设计、模型开发、数据质量校验,报表开发;
3、进行数据差异分析,找出统计口径、数据错误、操作错误等造成的差异原因;
4、进行数据查询优化,解决跑数性能问题。
职责:
1.从事国产数据库系统的测试方案的研究,设计工作:
2.独立完成数据库测试工具的开发和关键技术预研、突破;
3.根据安全可靠项目的设计方案,设计、编制集成适配测试方案,搭建数据库系统1:1仿真测试环境,进行集成适配测试;
4.发现集成适配测试过程中的`性能和适配性问题,定位问题原因,组织、协调、配合国产设备和软件厂商解决集成适配测试中发现的性能、兼容性问题;
5.负责数据库的高可用性部署、系统安装、配置管理以及性能调优;
6.对数据库运行状况进行监控,及时对故障进行处理,并分析故障原因,记录解决文档;
7.研究数据库高可用架构、分布式存储和开展数据库优化等技术,提高系统的稳定性和健壮性;
8.负责编制与项目相关的技术文档及用户操作使用说明书;
任职要求:
1.精通人大金仓、达梦、mysql等主流国产、开源数据库系统的工作原理,能够熟练搭建数据库系统,包含数据库集群;
2.精通Linux操作系统,能够熟练编写Shell脚本;
3.精通SQL语句,能够熟练编写数据库脚本和存储过程,精通数据库性能调优;
4.精通数据库数据迁移、数据备份技术;
5.熟悉网络、安全、存储、虚拟化、中间件等相关领域的专业知识,有相关工作经验或资质认证者优先。
6.精通JAVA,C,C++等一项以上的语言。
7.熟练使用MAVEN、SVN等项目管理工具。
职责:
1. 负责公司数据仓库/数据集市模型设计,优化现有数据仓库模型;
2. 参与数据仓库支持工具设计;
3. 参与数据仓库需求定义;
4. 参与数据治理、元数据建设、优化数据开发流程。
任职资格:
1. 计算机、数学、统计或相关专业本科及以上学历,数据挖掘/平台和BI分析领域优先;
2. 3年及以上数据仓库设计开发经验;
3. 熟悉HIVE,有HQL使用经验者优先;
4. 精通数据仓库建模方法,对kimball维度建模理论有深入的了解;
5. 有实际数仓建设项目负责人经验者优先;
6. 熟悉Hadoop生态圈以及大数据环境的 OLAP 框架者优先。
1. 负责部分化验设备的周期内部比对,收集比对数据,数据有异常波动时及时采取措施予以解决一般性故障,并告知部门领导。
2. 负责样品的收集管理登记和对外样品的递送、打包、邮寄。
3. 负责出口COA的`制作和传递。
4. 负责对本部门内检验岗位进行测试比对,统一并矫正各驻厂检验室检测标准;做好与上海AT化验数据的比对测试。
5. 协助做好化验设备维修保养和定期周检工作,按要求维修保养、周检和送检。
6. 每月汇总和打印成品、原材料分析月报,统计原材料得分表。
7. 做好公司组织试验部分数据的输入与传递.。
职责:
1、基于互联网行业特点构建企业级数据仓库架构,建设PB级共享数据平台;
2、负责数据平台相关数据研发及管理工作,参与制定EDW相关规范并推动实施落地;
3、对海量数据处理的'相关需求进行评估及方案设计;
4、负责数据产品如用户画像等模型设计;
5、了解行业前沿大数据处理方法。
任职资格:
1、8年以上数据仓库开发及管理经验,5年以上互联网/电商行业经验;
2、精通数据仓库建设方法论,有大型数据仓库建设项目经验(PB级以上);
3、熟悉HADOOP、HIVE、HBASE、SPARK、FLUME等工作原理;
4、精通HiveSQL,有较丰富的HiveSQL性能调优经验;
5、至少熟练使用Shell、Python、Perl等脚本语言之一;
6、工作认真、负责,有良好的团队合作精神,良好的分析及沟通能力;
职责:
1参与数据仓库模型设计和开发工作;
2负责建立数据分析模型,设计前端报表,数据可视化开发;
3负责数据平台项目数据仓库的管理、性能监控及优化等;
4负责数据平台的日常运维及优化
职位要求:
1大学本科以上学历,3年以上工作经验,包含2年以上数据仓库开发工作经验;
2精通数据仓库建设,熟悉常用的.模型设计方法;
3对数据可视化有丰富的经验,熟悉常用的数据分析方法;熟悉至少一种报表工具开发;
4精通数据仓库领域知识和技能,包括元数据管理、主数据管理、数据质量管理等;
5熟练使用ETL工具如Kettle、SSIS等进行数据清洗、转换、整合;
6熟悉至少两种关系型数据库,如Oracle、SQL Server、PostgreSQL、MySql等主流数据库,精通SQL Server开发和运维者优先考虑;
7有完整的数据平台建设经验者优先;
8熟悉使用Linux系统及Shell脚本开发,熟练开发Python程序者优先;
9熟悉大数据开发框架者优先,如Spark,Flink等;
10对新技术好奇爱学习,主动性和责任心强,对数据敏感,逻辑性强,有良好的抗压能力;
11团队协作能力强
文档为doc格式