职位&公司对比
职位详情
- 上海
- 5-10年
- 本科
- Python
- Shell
- Scala
- Spark
- Hadoop
- Flink
1. 参与商业化数据中台的架构设计、优化以及平台化集成开发,构建湖仓一体的数据开发平台。 2. 负责数据平台各组件的容量规划、部署、扩容,以及日常的故障处理与性能调优,能快速定位问题并排除故障,为业务开发人员提供日常支持。 3. 支撑商业化业务目前日均100TB/100亿流量下的数据仓库、实时kanzhun报表等关键业务,并有能力进行更大规模流量下的可用性、可扩展性、高来自BOSS直聘效性优化。 任职要求: 1. 掌握Linux操作系统,了解LBOSS直聘inux的基本原理,熟练常用的系统命令,能够应对日常的系BOSS直聘统运维与性能优化; 2. 熟悉Hadoop/Spark/Flink/Hudi/Iceberg等大数据生态技术的原理,能够深入阅读与理解源码,有源码贡献经验者优先; 3. 熟悉Java/Scala/Python/Shell等开发语言,了解JVM原理,有一定的JVM优化经验,能够独立开发大数据相关平台工具; 4. 理解数据治理相关方法和知识,了解企业级数据建模与主数据管理、数据质量管理、数据标准管理等方法; 5. 3年以上Hadoop或相关大数据平台的开发与运维经验,有1000台以上集群BOSS直聘经验者优先; 6. 具有良好的团队合作意识和良好的沟通能力,思维敏捷、有主动发现问题与解决问题的能力。
职位详情
- 上海
- 10年以上
- 本科
- Python
- R
- Hive
- 大数据平台架构经验
- 数仓建设经验
- 金融行业数据相关经验
*银行工作经验是必须 -负责全行的数据基础平台的建设与管理,推动数据环境、数仓、数据集市和数据类应用系统建设; -制定创新业务产品敏捷研发路线,实现快速迭代,不断推动金融科技紧密结合,构建高效、稳定的开发运维体系; -参与大数据平台架构设计,管理大数据平台并确保数据落仓和开发的时效性和准确性; -确保大数据平台开发的实施进度、质量和配置管理按照OKR考核指标及方法开展工作及评价并达标; -设计数仓架构,进行主题维度建模与集市层建设; -管理并结boss合调度策略实施数仓数据开发任务,优化核心数据开发任务性能; -进行数据存储设计,调优大数据存储稳定性、安全性和效率; -工作认真负责,有闭环思维;和身边同事维持良好的关系,并积极协调推进项目和需求落地实施; -积极参与反洗钱及反恐怖融资相关宣传培训工作;配合反洗钱部开展其他反洗钱工作; -遵守本行和监管机构所制定的所有适用的法律法规、规章制度、指引标准等,并高度诚信地履行自身职责; -遵守既定的风控指引、流程和方法,并严格遵循以鉴别、评估、汇报、降低、监控日常工作中可能涉及到的风险。 任职要求: -计算机、软件工程、数学、信息科学及相关专业本科及以上学历; -3年以上大数据相关工作经验,沟通能力优秀; -精通SQL,有较好的SQL性能调优经验; -了解业内相关大数据平台集群如CDH、TDH、HDP等,有独立搭建大数据集群经验者优先;直聘 -熟悉企业数据仓库理论,熟悉维度建模; -有大数据分布式计算平台开发经验,熟练使用Hive开发,熟悉Impala、Presto等大数据ADHOC平台优先; -至少精通一种ETL开发工具,熟悉Waterdrop(seatBOSS直聘unnel)、DataX等优先; -至少精通一种ETL作业调度工具(Airflow、Azkaban等); -至少了解一种数据库,熟来自BOSS直聘悉Oracle、ES、ClickHouse等优先; -有金融领域数据仓库整体建模经验者优先; -工作认真、仔细、负责,有团队协作精神和良好的执行力,关注效率和沟通。
技能解析
- 合作意识
- 生态技术
- 快速定位
- 数据质量
- 理解数据
- JVM原理
- 系统运维
- 性能优化
- 业务开发
- 数据管理
- 解决问题的能力
- 主动发现问题
- 独立开发
- 可扩展性
- 解决问题
- 团队合作
- 质量管理
- 基本原理
- 阅读与理解
- 数据治理
- 发现问题
- 数据建模
- 团队合作意识
- 好的沟通
- 定位问题
- 开发语言
- 性能调优
- 数据开发
- 沟通能力
- 数据仓库
- 数据相关
- 架构设计
数据来自CSL职业科学研究室
技能解析
- 团队协作精
- 分布式计算
- 法律法规
- 精通SQL
- 软件工程
- 建模经验
- 数据存储
- 协作精神
- 团队协作
- 开发经验
- 平台架构
- 开发任务
- 金融领域
- 系统建设
- 考核指标
- ETL开发
- 团队协作精神
- 开发工具
- 配置管理
- 培训工作
- 沟通能力优秀
- 金融科技
- 性能调优
- 数据开发
- 沟通能力
- 数据仓库
- 数据相关
- 架构设计
数据来自CSL职业科学研究室
工作时间
公司福利
- 五险一金
- 定期体检
- 带薪年假
- 餐补
- 免费班车
备注
职位发布者未明确表明公司信息,具体可咨询职位发布人进行确认。