数据开发工程师

相关职位简介

• 来源：浙江数新网络有限公司

  数据开发工程师

  岗位职责：1.负责数据产品/数据仓库的ETL设计.开发.维护及质量核查；2.负责数据仓库模型的规划和设计，建立并执行统一的数据开发规范；3.参与或负责数据仓库基础设施和平台的建设，搭建金融行业领域的企业级数据仓库；4.和需求方进行有效沟通，完成数据需求及数据问题解决等；5.完成日常数据质量的监控，跟踪处理各类数据质量问题。任职要求：1.计算机.数学.统计学相关专业，本科及以上学历，硕士生优先；2.良好的算法.数据结构基础，熟悉计算机操作系统.网络.数据库等课程，至少熟悉JAVA/PYTHON/SQL一门编程语言；3.要求有数据开发的实习/项目经验，热爱数据仓库技术，熟悉Hadoop.HIVE.HBae.Kafka.Flume.Spark.Redi等开源框架，优先考虑；4.有大规模数据系统数据开发经验者优先，熟悉金融领域，或者有相关开发经验者优先；5.参加学校及省级/国家级各类比赛的，且在各类比赛中获奖的同学我司将优先考虑录取。

  所需技能： SQL、Python、Kafka

• 来源：武汉谷一盈电子商务有限公司

  数据开发工程师

  工作内容1.负责数据仓库架构设计.建模和ETL开发，构建可扩展的数据仓库和分析解决方案；2.负责分析和解释产品试验，市场运营活动等结果，为产品改进，推广等提供数据支持；3.负责建立用户数据分析模型，针对用户行为进行数据监控和统计，发现用户行为模式与规律，为改进推荐系统提供支持。职位要求1.全日制本科（重点高校）学历及以上，计算机相关专业，热爱计算机科学和互联网技术，乐于快速学习和尝试新技术.新工具；2.具备强悍的编码能力，熟练使用SQL，熟悉Python或R语言的优先；3.优秀的分析问题和解决问题的能力，对解决具有挑战性问题充满激情；4.熟悉至少一项分布式计算平台，例如Hadoop，Spark，Hive，Storm，Kafka等；5.有较强的逻辑/概率思维能力，善于分析.归纳.解决问题。

  所需技能： ETL、SQL、分布式计算

• 来源：深圳市展动力人才资讯有限公司

  数据开发工程师

  岗位职责：1.2+年以上PYTHON或数据库相关开发经验；2.精通ORACLE.MYSQL.POSTGRESQL至少其中一种数据库；3.有数据库性能调优经验者优先；4.了解ETL流程，有ETL相关开发经验者优先，有KETTLE使用经验者优先；5.具有金融行业软件开发经验者优先；6.熟悉金融行业常用指标算法者优先；7.熟悉金融行业常用算法模型者优先；8.具有良好的沟通能力，团队协作能力，抗压能力，能适应加班和出差。招聘要求： 1.本科及以上学历，计算机相关专业优先；2.负责数据ETL流程的设计与开发；3.负责数据仓库主题模型的设计开发；4.技术支持.对数据问题进行定位.排查；5.具备系统设计能力.有金融等行业从业背景者优先。

  所需技能： Python、QRACLE、MYSQL、ETL、Kettle、数据仓库、金融、出差

• 来源：上海剑阁信息技术有限公司吴江分公司

  数据开发工程师

  岗位职责：1.负责ETL设计与开发；2.负责业务数据的分析.转换和处理，根据规则分析和排查错。任职要求:1.掌握业务系统关键数据实体关系，具备独立进行数据探查和分析能力优先；2.有数据处理.使用ETL工具开发数据转换经验；3.掌握Oracle.Sybae.Vertica等一种及以上主流数据库软件的使用和编程；4.熟悉informatic.datatage.微软BI.Talend等ETL工具的设计和优化.Kettle相关知识的优先；5.有外资金融企业项目经验优先；6.具备一定的沟通和协调能力，能够有效与客户.项目团队成员进行沟通协调，较好地完成需开发任务，对数据处理工作认真仔细。

  所需技能： Kettle、Talend

• 来源：诚迈科技（南京）股份有限公司

  数据开发工程师

  岗位要求：1.计算机.数学.统计学等相关专业本科以上学历，3年以上数据相关工作经验2.对数据有较高敏感性，能独立完成从业务模型到数据模型的设计及开发工作，有电商领域数据建设经验优先3.具备海量数据加工处理相关经验，参与过PB级大型数据仓库架构或模型设计和开发经验者优先4.熟悉大数据技术栈，包括Hadoop/Hive/Spark/Flink/Kafka/OLAP引擎等5.强烈的自驱力和责任感，面对复杂业务问题，可以从业务和技术多角度推进，最终达成目标岗位职责：1.负责电商数据仓库架构与模型设计，确保模型设计的高复用性，负责核心代码逻辑开发与推进落地2.负责电商数据系统建设，参与产品与应用的数据研发，核心ETL规则设计和开发，及任务调度和监控3.负责数据研发规范制定和监督实施，参与元数据管理.业务数据治理.数据质量监控等数据管理工作4.负责数据报表系统及相关数据产品需求管理和研发工作，构建丰富多样的数据应用5.负责前沿技术调研，根据业务特性适时引入前沿技术

  所需技能： Spark、Hadoop、Kafka、HIVE、Flink、数据仓库、OLAP

• 来源：武汉广志信息科技股份有限公司

  数据开发工程师

  任职要求：1.计算机相关专业，本科及以上学历；2.3年以上数据仓库或大数据开发，熟悉HiveSQL和SparkSQL;3.熟悉oracle.Myql数据库，熟悉linux系统，熟悉hell编程；4.熟悉Java/Python/Scala等至少一门语言，熟悉Hadoop/Spark/Hive/HBae/Flink等大数据研发工具；5.精通数据建模及ETL设计开发，对数据仓库.数据分析等有深刻理解，具备丰富的海量数据加工处理和优化经验；6.遵守研发规范.质量规范.安全规范；7.对数据价值探索充满热情，对数据敏感，善于从数据中发现问题；8.良好的沟通表达能力和团队合作精神，有一定的组织协调能力，学习能力强有责任心，不断挑战自己；总体工作内容：1.业务调研；2.数据调研；3.数据模型设计及开发维护；4.指标开发.维护；5.报表开发.维护。

  所需技能： Python、Scala、Spark、HIVE、Flink、数据仓库，数据开发、数据处理，、etl

• 来源：合肥正恩信息科技有限公司

  数据开发工程师

  工作内容：1.负责数据仓库.数据集市的数据模型设计；2.负责数据仓库ETL规则设计和开发；3.负责数据仓库.数据集市建设需求调研和需求分析；4.负责数据仓库.数据集市建设及持续运营；5.负责数据模型资产化整理与运营；6.负责数据模型的监控及质量运营体系规划与设计。任职要求：1.熟悉数据仓库各类模型建模理论，了解数据仓库数据分层架构，精通3NF和多维数据模型设计；2.有4年以上的大型数据仓库架构设计.模型设计.ETL设计的相关经验（有华为dayu同步工具使用经验者优先）；3.熟悉Teradata.IBM等主流数据仓库模型设计之一，熟悉Oracle.Myql等主要关系型数据库（有华为GauDB数据库使用经验者优先）；4.熟练使用Hadoop.Hive.HBae，Spark者优先；5.具备海量数据处理.性能调优经验.熟练掌握SQL及类SQL语言；6.有国网信息化项目（数据中心.全业务统一数据中心等）经验者优先。

  所需技能： SQL、Spark、Hadoop、HIVE

• 来源：南京锐仕方达人力资源顾问有限公司

  数据开发工程师

  职责描述：1.负责离线数据仓库设计.建模和ETL开发，构建可扩展的数据仓库和分析解决方案2.负责数据的加工.处理.支撑数据采集.加工.分析的全流程业务3.理解并合理抽象不同业务需求，做较通用和系统性的支持4.具备文档编写能力，能够完成项目相关文档的编写与交付任职要求：1.理解DW，BI相关的知识，包括：ETL.数据仓库.OLAP.多维数据模型等2.良好的SQL编程能力，具备SQL调优经验3.熟练掌握至少一种BI工具软件，如：FineBI，Tableau，观远等。4.良好的数据库基础，熟练掌握以下至少一种关系型数据库（MySQL.PotgreSQL.SQLServer），具备一定的数据库性能调优能力。

  所需技能： SQL、BI开发、帆软、ETL开发

• 来源：腾讯科技（深圳）有限公司

  数据开发工程师

  岗位职责 ·负责部门数据仓库和数据集市的模型设计.ETL开发与性能优化，代码Review；·深入理解业务，围绕数据分析搭建完善的数据服务，驱动业务的发展；·数据产品研发，提升数据平台的通用性和可拓展性。岗位要求 ·理工科专业本科及以上学历，具备扎实的计算机技术能力，熟练掌握至少一门常见的编程语言（java/python/go)；·3年以上的数据仓库研发经验，熟练掌握Hadoop/Hive/park/flink等相关大数据技术，并有较多的调优经验；·具备必要的数据仓库理论知识，有较好的数据仓库建模经验；·能适应和理解快速发展的业务，有较好的数据敏感度和良好的自驱力，对工作充满热情；·良好的沟通能力.逻辑思维能力和团队协作精神；·优先：有互联网海量数据的建模与ETL经验；·优先：主导过中大型数据仓库的实施。

  所需技能： Hadoop、SQL、Flink、HIVE、Spark

• 来源：普仕英才（北京）管理咨询有限公司

  数据开发工程师

  岗位职责：1.负责企业级数据仓库的规划.建设及维护；2.负责数据仓库ETL开发.数据建模及调度维护；3.负责数据仓库数据质量校验开发.数据异常监控及处理.元数据开发维护；4.负责应用数据接口开发，支持各应用系统数据使用。任职要求：1.重点大学本科及以上学历，计算机.统计学.数学相关专业，2年以上数据开发经验，有大型企业数据仓库开发或BI项目实施和开发经验优先；2.精通SQL，掌握DB2/Oracle/Teradata/Myql/Hive中至少一种主流数据库及其数据仓库的开发.设计和调优；3.具备丰富的数据库模型设计及数据库管理经验，熟悉一种以上主流ETL工具，有大型的数据仓库设计或者数据开发经验者优先；4.掌握Python/Shell/Perl中至少一门脚本开发语言，具有相关开发经验；5.对数据敏感.具备较强的数据分析能力.逻辑思考能力.沟通能力。

  所需技能： Python、Shell、HIVE

• 来源：中国中金财富证券有限公司

  数据开发工程师

  工作职责：1.负责数据平台架构和规划；理解项目需求.结合业务场景，设计开发基金投资类业务数仓项目；2.负责数仓项目的底层数据结构.数据模型设计，包括主题宽表.多维模型的设计；3.带领项目组完成ETL脚本实施，ETL性能优化，ETL数据监控以及相关技术问题的解决；4.负责数据仓库实时数据统计模块开发及大数据工具类的开发；负责面向业务的olap，报表，数据提取工具等开发工作5.与项目经理.产品经理.业务人员.测试等团队密切合作，以完成项目方案交付。任职要求：1.本科及以上学历，金融.数学.统计.计算机等专业；2.深入理解常用的数据建模理论，掌握数据仓库建设流程，并能根据实际场景进行设计,可独立把控数据仓库的各层级设计，有能力完成端到端的数据交付；3.熟练掌握Hive.HBae.myql.oracle等常用数据库使用及调优；有NOSQL数据库使用经验；4.有数据分析经验者优先；有证券类业务相关工作经验者优先；5.踏实，好学，对海量数据处理与分析有热情；

  所需技能： HIVE、Hadoop、Spark、MapReduce、Kettle

• 来源：爱客科技（深圳）有限公司

  数据开发工程师

  岗位职责：1.基于对业务的需求对业务数据进行数据仓库建模，并确保数据易于访问.可靠和精确；2.与其他数据仓库工程师进行协调，以确保数据仓库环境的整体运行状况和性能，设计，开发，测试，监视，管理和验证数据仓库活动，包括为数据仓库定义标准以及对ETL流程进行故障排除并有效解决问题；3.调研新兴工具以及方法论提高团队的技能与效率；4.主动推进外部用户了解数据仓库和ETL最佳实践，与他们一起将业务问题与需求转换为数据模型，提高业务团队的数据技能；5.与业务团队合作通过数据分析解答基本业务问题。岗位要求：1.熟悉数据建模，习惯于设计和实现复杂的数据结构，考虑多个用户的需求并持续进行优化；2.具有处理非结构化数据和复杂的ELT流程的经验；能够调整流式处理和批处理应用程序以数据管道性能；3.了解或者熟悉敏捷开发流程与原理，完整经历从需求到部署的整个生命周期；4.熟练的编写SQL代码，并有能力优化其查询性能；5.至少具有Python/Java/Scala其中之一的编写经验；6.具有数据管道编排工具的使用经验，例如Airflow(首选).Luigi等；7.能够较熟练的使用英文，并渴望在多元文化的国际环境中工作。

  所需技能： SQL、Python、Java、Scala

• 来源：杭州比智科技有限公司

  数据开发工程师

  岗位职责：1.负责基于数据中台产品（Maxcomputer.Dataphin）进行数据建模.开发。2.完成数据治理.数据资产盘点.数据质量管理.元数据管理。3.负责数据中台架构设计.进行新技术可行性研究4.制定开发规范.评审开发质量岗位要求：1.本科三年以上大数据相关开发经验；2.熟悉数据仓库原理，具备数据模型设计能力，能够熟练基于事实.维度的建模，掌握模型原理；3.熟练掌握一个关系型数据的开发，如：Myql/drd/Potgreql/Oracle/Sqlerver；4.熟悉掌握ETL开发流程，熟练掌握一种常见的ETL工具，如kettle.informatica.datatage.DataX等；5.具备两个完整项目经验（hive/odp），熟练掌握各种场景SQL处理能力，具备调优和函数应用；6.具备面向业务的OLAP，即席查询，BI分析，报表工具应用经验；7.阿里云大数据套件datawork使用经验优先；8.阿里云大数据套件Datawork.Quickaudience使用经验优先；9.具备良好的沟通能力，逻辑能力，团队协作能力，良好的英文阅读能力。10.能承受一定时间的出差。

  所需技能： SQL、Hadoop、HIVE、Hbase、DataX、Flink、Oracle、Sql Server

• 来源：软通动力信息技术（集团）股份有限公司

  数据开发工程师

  岗位职责：1.负责浏览器业务的数仓建设，相关数据模型的设计开发。2.负责数据化运营，用户增长领域专题数据产品建设。3.负责业务团队数据需求的研发支撑。4.负责业务数据治理，提升部门数据的易用性。岗位要求：1）必须熟练使用SQL,Python(或其他脚本语言)；2）3年以上数据开发或分析相关工作经验;3）了解常见的数仓建模及架构模式;4）会使用Spark，flink，torm等分析软件或框架；5)拥有数仓建模.ETL数据抽取.报表开发.任务调度等经验者优先；6)要求具备较强的学习能力及业务理解能力，有优秀的沟通协调能力及团队合作精神，积极主动，善于思考.总结并具备分享精神；-

  所需技能： Python、Spark、Hadoop、Storm、Flink、SQL