职位&公司对比

招聘中

实时数据开发工程师

-K·薪
  • 新零售
  • 已上市
招聘中

大数据开发工程师

-K·薪
某大型知名互联网金融公司

职位详情

  • 上海
  • 3-5年
  • 本科
  • Java
  • Kafka
  • Flink

岗位职责: 1、负责大数据实时数仓的技术建设和维护,工程开发及新技术方案的调研引入直聘。 2、参与和主导大数据实时数仓的架构设计、方案选型、验证、落地等 3、参与技术攻坚,解决实时数仓的故障定位及修复,优化实时数仓性能 4、系统化全链路保障实时数仓的数据质量 5、建设复杂业务场景的实时数据体系,驱动业务。 岗位要求 1、大学本科以上学历,有java或大数据经验3年及以上。 2、熟悉大数据实时计算引擎Flink,深入理解原理,并有实际项目经验。 3BOSS直聘、熟悉Hadoop生态相关技术并有相关实践经验,包括Kafka、Hbabossse、bossclickhouse、es等,具备海量数据加工处理相关经验。 4、流式处理性能经验丰富,对流批boss一体化有深入见解。精通Java编程,熟悉流行框架springboot等 4、具备良好的学习能力和分析解决问题能力,责任心强; 具有良好的团队合作意识,沟通能力,协调能力,能够承担工作压力。

职位详情

  • 上海
  • 3-5年
  • 本科
  • 数据库开发

工作职责 1.按照业务需求,进行数据开发设计,并编写相关文档,如ETL模型映射文档,模型规boss则设计文档等。 2.负责数据平台集成不同数据源的数据,以及数据仓库支撑数据应用场景,数据服务搭建。 3.负责数据平台ETL任务的开发、测试、数据质量排查等相关工作。 4.负责数据清理、数据备份、数据迁移等相关功能脚本开发工作。 5.负责据处理相关流程的监控和运维,派驻驻客户现场时完成项目组开发任务以及及时解决系统运行中遇到的问题。 任职资格 1.本科及以上学历,3年以上数据平台建设经验,5年以上金融行业ETL工作经验。扎实的数据开发kanzhun能力,熟练使用SQL语言以及Perl.Python.SAS.Shell等编程语言。 2.熟悉数据平台ETL的工作原理,能够对ETL脚本进行性能优化;熟悉模型设计,有数据仓库boss或数据湖开发、设计经验,有分布式数据库开发经验。 3.熟悉数据开发,数据分析的相关方法,了解数据治理的相关方法。 4.熟练使用git.svn等版本控制工具,具有良好的版本管理意识。 5.对现有的大数据计算架构或者框架具有一定的了解,了解例如Greenplum.MPP.Spark.hive等。 6.思路清晰、工作认真、态度端正、乐于学习、乐于沟通作。

技能解析

专有技能
  • 合作意识
  • 海量数据
  • 分析解决
  • 熟悉大数据
  • 实时数据
  • 技术方案
  • 解决问题
  • 架构设计
  • 熟悉流行
  • 团队合作
  • 协调能力
  • 分析解决问题
  • 工程开发
  • 学习能力和
  • 沟通能力
  • 团队合作意识
  • 学习能力
  • 解决问题能力
相同技能
  • 数据质量

数据来自CSL职业科学研究室

技能解析

专有技能
  • 设计文档
  • 使用SQL
  • 版本控制工具
  • 数据仓库
  • 数据备份
  • 编程语言
  • 数据应用
  • 数据开发
  • 数据分析
  • 乐于沟通
  • 熟悉数据
  • 平台建设
  • 性能优化
  • 开发经验
  • 数据处理
  • 开发工作
  • 设计经验
  • 开发任务
  • SQL语言
  • 沟通合作
  • 数据服务
  • 版本管理
  • 控制工具
  • 管理意识
  • 模型设计
  • 开发能力
  • 数据治理
  • 数据库开发
  • 数据计算
  • 分布式数据
相同技能
  • 数据质量

数据来自CSL职业科学研究室

工作时间

上午09:00   -   下午06:30
双休弹性工作

公司福利

  • 五险一金
  • 带薪年假
  • 员工旅游
  • 餐补
  • 节日福利
  • 零食下午茶

公司福利

  • 带薪年假
  • 定期体检
  • 补充医疗保险
  • 五险一金

备注

职位发布者未明确表明公司信息,具体可咨询职位发布人进行确认。

更新于 2024-06-08