职位&公司对比

招聘中

大数据平台开发专家

-K·薪
  • 互联网
  • D轮及以上
招聘中

大数据架构师

-K·薪
某知名银行公司

职位详情

  • 上海
  • 5-10年
  • 本科
  • Python
  • Shell
  • Scala
  • Spark
  • Hadoop
  • Flink

1. 参与商业化数据中台的架构设计、优化以及平台化集成开发,构建湖仓一体的数据开发平台。 2. 负责数据平台各组件的容量规划、部署、扩容,以及日常的故障处理与性能调优,能快速定位问题并排除故障,为业务开发人员提供日常支持。 3. 支撑商业化业务目前日均100TB/100亿流量下的数据仓库、实时kanzhun报表等关键业务,并有能力进行更大规模流量下的可用性、可扩展性、高来自BOSS直聘效性优化。 任职要求: 1. 掌握Linux操作系统,了解LBOSS直聘inux的基本原理,熟练常用的系统命令,能够应对日常的系BOSS直聘统运维与性能优化; 2. 熟悉Hadoop/Spark/Flink/Hudi/Iceberg等大数据生态技术的原理,能够深入阅读与理解源码,有源码贡献经验者优先; 3. 熟悉Java/Scala/Python/Shell等开发语言,了解JVM原理,有一定的JVM优化经验,能够独立开发大数据相关平台工具; 4. 理解数据治理相关方法和知识,了解企业级数据建模与主数据管理、数据质量管理、数据标准管理等方法; 5. 3年以上Hadoop或相关大数据平台的开发与运维经验,有1000台以上集群BOSS直聘经验者优先; 6. 具有良好的团队合作意识和良好的沟通能力,思维敏捷、有主动发现问题与解决问题的能力。

职位详情

  • 上海
  • 10年以上
  • 本科
  • Python
  • R
  • Hive
  • 大数据平台架构经验
  • 数仓建设经验
  • 金融行业数据相关经验

*银行工作经验是必须 -负责全行的数据基础平台的建设与管理,推动数据环境、数仓、数据集市和数据类应用系统建设; -制定创新业务产品敏捷研发路线,实现快速迭代,不断推动金融科技紧密结合,构建高效、稳定的开发运维体系; -参与大数据平台架构设计,管理大数据平台并确保数据落仓和开发的时效性和准确性; -确保大数据平台开发的实施进度、质量和配置管理按照OKR考核指标及方法开展工作及评价并达标; -设计数仓架构,进行主题维度建模与集市层建设 -管理并结boss合调度策略实施数仓数据开发任务,优化核心数据开发任务性能; -进行数据存储设计,调优大数据存储稳定性、安全性和效率; -工作认真负责,有闭环思维;和身边同事维持良好的关系,并积极协调推进项目和需求落地实施; -积极参与反洗钱及反恐怖融资相关宣传培训工作;配合反洗钱部开展其他反洗钱工作; -遵守本行和监管机构所制定的所有适用的法律法规、规章制度、指引标准等,并高度诚信地履行自身职责; -遵守既定的风控指引、流程和方法,并严格遵循以鉴别、评估、汇报、降低、监控日常工作中可能涉及到的风险。 任职要求: -计算机、软件工程、数学、信息科学及相关专业本科及以上学历; -3年以上大数据相关工作经验,沟通能力优秀; -精通SQL,有较好的SQL性能调优经验; -了解业内相关大数据平台集群如CDH、TDH、HDP等,有独立搭建大数据集群经验者优先;直聘 -熟悉企业数据仓库理论,熟悉维度建模; -有大数据分布式计算平台开发经验,熟练使用Hive开发,熟悉Impala、Presto等大数据ADHOC平台优先; -至少精通一种ETL开发工具,熟悉Waterdrop(seatBOSS直聘unnel)、DataX等优先; -至少精通一种ETL作业调度工具(Airflow、Azkaban等); -至少了解一种数据库,熟来自BOSS直聘悉Oracle、ES、ClickHouse等优先; -有金融领域数据仓库整体建模经验者优先; -工作认真、仔细、负责,有团队协作精神和良好的执行力,关注效率和沟通。

技能解析

专有技能
  • 合作意识
  • 生态技术
  • 快速定位
  • 数据质量
  • 理解数据
  • JVM原理
  • 系统运维
  • 性能优化
  • 业务开发
  • 数据管理
  • 解决问题的能力
  • 主动发现问题
  • 独立开发
  • 可扩展性
  • 解决问题
  • 团队合作
  • 质量管理
  • 基本原理
  • 阅读与理解
  • 数据治理
  • 发现问题
  • 数据建模
  • 团队合作意识
  • 好的沟通
  • 定位问题
  • 开发语言
相同技能
  • 性能调优
  • 数据开发
  • 沟通能力
  • 数据仓库
  • 数据相关
  • 架构设计

数据来自CSL职业科学研究室

技能解析

专有技能
  • 团队协作精
  • 分布式计算
  • 法律法规
  • 精通SQL
  • 软件工程
  • 建模经验
  • 数据存储
  • 协作精神
  • 团队协作
  • 开发经验
  • 平台架构
  • 开发任务
  • 金融领域
  • 系统建设
  • 考核指标
  • ETL开发
  • 团队协作精神
  • 开发工具
  • 配置管理
  • 培训工作
  • 沟通能力优秀
  • 金融科技
相同技能
  • 性能调优
  • 数据开发
  • 沟通能力
  • 数据仓库
  • 数据相关
  • 架构设计

数据来自CSL职业科学研究室

工作时间

上午09:30   -   下午06:30
双休弹性工作

公司福利

  • 五险一金
  • 定期体检
  • 带薪年假
  • 餐补
  • 免费班车

备注

职位发布者未明确表明公司信息,具体可咨询职位发布人进行确认。

更新于 2024-05-30