职位&公司对比
职位详情
- 上海
- 3-5年
- 本科
- Python
- Hadoop
- Spark
- Python
- SQL
- MapReduce
1. Expert experience with mainstBOSS直聘ream RDBMS like MySQL(mandatory), PostgreSQL, Oracle and NoSQL such as Redis, HBase; 2. Familiar with the distributed database architecture, ability to design the OLTP with high availability, scaBOSS直聘lability and performance; solid hands-on experience with distributed DB products in mainstream Cloud environment like AliCloud DRDS or GCP spanner; 3. Extensive experience in big data acquisition, pre-processing, storage, and cleansing technologies including Hadoop (HDFS, MapReduce, Yarn,..), Kafka, Sqoop, Spark, Flink and etc; 4. Experi来自BOSS直聘ence with programming languages: Java, Python or Shell; 5. Knowledge of Graph Database bosslike Neo4j is a plus Responsibility: 1. Responsible for designing, building, testing and maintaining data systems, making sure the data structure, ingestion and processing systems, supporting digital product teams’ requirements and user needs; 2. Responsible for implementing methods to improve data reliability, efficiency and quality; 3. Act as technical expert in regard to integration and connectivity methods, protocols, 4. security and practices for data management systems; 5. Responsible for designing and creating the optimal data pipeline; 6. Work closely with data architects/scientists and other stakeholders on future data handling technologies, including input on risks, costs, benefits
职位详情
- 上海
- 5-10年
- 本科
- 大数据开发经验
- 数仓建设经验
岗位职责: 1、负责大数据平台项目的需求分析、架构设计、核心框架及组件的开发工作; 2、参与构建流批一体的数据自助分析平台,支持业务方自助进行数据的快速定位和分析; 3、负责自动化实时数据接入系统的设计、开发工作,实现游戏日志数据自动化接入; 4、保证大数据平台相关服务的稳定性、高可用性,不断优化服务性能; 5、负责离线和实时数据的采集、清洗和加载工作,以及数据模型、指标建设和BI报表的开发工作。 任职要求: 1、计算机相关专业本科及硕士以上学历,5年以上大数据相关工作经验; 2、具有良好的学习能力、团队协助以及沟通能力,执行力强BOSS直聘,对工作有责任心boss,具备良好的规划、沟通以及协调kanzhun能力; 3、掌握大数据生态技术栈, 如Hadoop、Spark、Flink、Hive、HBase、Kafka、Elasticsearch等,并有实际工作经验; 4、具备3年以上的Java开发经验,熟练掌握SpringBoot、SSM、Mybatis等框架,有一定的DEBUG及性能优化能力。 加分项: 1、做过OLAP查询优化优先; 2、熟悉阿里云大数据组件,如MaxCompute、Hologres、DataWorks、QuickBI等,并有使用经验的优先; 3、熟悉Tableau、有数BI、观远等敏捷交互式bossBI分析产品的技术栈及原理优先; 4、熟悉数数科技、神策数据等行为分析产品的技术栈及原理优先; 5、了解python语言,有爬虫、pandas等开发经验优先。
技能解析
暂无识别出相关技能要求
技能解析
- 优化能力
- 生态技术
- 快速定位
- 以及沟通
- 实时数据
- 需求分析
- 架构设计
- 团队协助
- 系统的设计
- DEBUG
- 协调能力
- 沟通能力
- 数据模型
- 开发经验
- 性能优化
- 数据相关
- 高可用性
- 学习能力
- 开发工作
数据来自CSL职业科学研究室
工作时间
工作时间
公司福利
- 补充医疗保险
- 五险一金
公司福利
- 生日福利
- 节日福利
- 团建聚餐
- 零食下午茶
- 餐补
- 员工旅游
- 带薪年假
- 年终奖
- 定期体检
- 补充医疗保险
- 五险一金