大数据高级工程师

相关职位简介

• 来源：广州华体体育科技有限公司

  大数据高级工程师

  岗位职责：1.参与公司项目业务及技术的系统分析与架构设计工作，负责相关功能代码编写，模块开发与维护；2.参与公司项目开发过程中的需求分析，编码，测试，部署及文档的编写工作；3.负责性能调优，提高稳定性，发现并改进现有软件的的架构以及缺陷修复；4.负责技术攻关和创新技术引用，开发具有数据分析.数据挖掘能力的创新型产品；5.负责网站后台业务管理系统开发及维护，包括现有代码效率优化及重构；任职要求：1.本科及以上学历，计算机.数学相关专业，有3年以上互联网平台架构经验者优先考虑；2.熟练C#中http.Webervice.ocket等相关的网络开发技术和XML相关技术；3.熟悉缓存技术.网站优化.服务器优化.系统性能调优等高级技术；4.精通多线程编程.同步.互斥.线程间通信等；5.对数据库的基本理论和内部实现机制有深入理解，熟练应用SQLServer，有应对高并发的数据库设计经验；6.具有良好的编程风格，有多层结构的开发经验，掌握常用需求/架构设计工具使用，对面向对象.MVC有深刻的理解，熟练使用常用软件建模工具进行系统分析和设计；7.逻辑思维能力强，熟悉业务抽象和数据模型设计，具有很强的分析和解决问题能力；8.有强烈的责任心.团队合作精神和协调沟通能力，有较强的上手能力；9.有足彩行业.大数据/经分/BI项目实施经验者优先；

  所需技能： 数据库、SQLServer、MySQL

• 来源：公安部第三研究所

  大数据高级工程师

  岗位职责1.负责搭建基于Hadoop.Spark.Shark等大数据平台；2.负责搭建及优化常用的大数据存储数据库（MongoDB.HBae.redi.Elaticearch.MySQL等）；3.负责常用的消息中间件搭建及优化（kafka.ActiveMQ等）；4.根据设计文档完成ETL开发；5.根据设计文档完成大数据相关应用开发；6.负责大数据的处理和分析工作。任职要求1.本科及以上学历，计算机等相关专业；2.熟悉java，熟悉主流的开源框架（SpringBoot或者EJB3），具备扎实的数据结构功底；3.精通MySQL/Oracle/MongoDB/Redi/HDFS/HBae/Elaticearch等常用数据库，有数据库性能调优经验，熟悉数据库部署灾备解决方案，具有数据库部署运维能力；4.熟悉SparkStream.SparkSQL.Hadoop生态圈技术，有丰富的RDD/MapReduce开发经验；5.熟练使用Linux系统，至少熟悉PHP/hell/python中的一种脚本语言；6.有分布式大数据挖掘.分析.数据仓库开发实施经验者优先；7.工作认真负责，有较强的钻研学习能力和分析解决实际问题的能力。

  所需技能： 数据仓库、DBA、ETL、大数据、java

• 来源：上海新致软件股份有限公司

  大数据高级工程师

  岗位职责：1.负责大数据模块详细设计.大数据平台优化；2.负责大数据能力开放平台开发工作；任职要求：1.精通Java/Scala/Python/Shell/R中的至少三种开发语言；2.熟练掌握Hadoop.Hive.Hbae.Spark.Storm等分布式框架原；3.熟悉至少一种常用数据库语言(Oracle/MySQL/PG等)；4.有实际的数据仓库开发和数据建模经验，有熟悉可视化.BI工具软件优先；具有解决大数据量的技术手段；5.对数据敏感，有数据分析.数据挖掘经验者优先；6.熟悉大数据平台架构

  所需技能： Python、Shell、Scala、Spark、Hadoop、Storm、Hbase

• 来源：上海泓笛数据科技有限公司

  大数据高级工程师

  职位描述岗位职责1.负责Greenplum数据库的架构设计，包括数据库的备份恢复.性能调优.日志分析.数据迁移.分库分表.解决突发和疑难问题；2.负责日常仓库脚本开发；3.负责数据库运维标准化，规范化以及文档的编写及管理；4.协助业务系统数据库的规划与设计工作，对应用架构和数据库系统提出合理建议；任职要求1.熟练掌握Greenplum.PotgreSQL.MySQL数据库体系架构及运行机制，具备三年以上优化经验；2.对高并发.复杂SQL以及数据库集群系统深入理解并具有丰富的管理和优化经验，具有很强的故障定位和问题解决能力；3.掌握MPP数据仓库设计原理.运行机制；4.熟悉SQL语法及常见SQL优化手段，具备数据库开发经验；5.熟悉Linux系统管理维护技巧，熟练使用hell完成日常维护工作；6.善于沟通与分享，具备良好的团队合作精神，具备较强的学习能力和独立解决问题的能力；

  所需技能： SQL、Python、Hadoop

• 来源：北京基科晟斯医药科技有限公司

  大数据高级工程师

  岗位职责：1.根据业务需求研发大数据总体技术的规划架构与设计2.负责大数据平台的搭建，完成系统调试.集成与实施3.负责解决大数据组件技术问题4.参与大数据项目.架构应用需求.设计.审核和评审，建立大数据平台技术标准规范，编写代码任职要求：1.熟悉linux,会hell和java编程,会python或cala编程。2.精通离线和实时数据处理流程，熟悉大数据生态圈相关组件(hadoop.park.hbae.hive.kafka.torm，cdh,elk)等。3.精通大数据技术架构，熟悉常见数据结构和算法，计算机基础知识扎实。4.思维敏捷，有独立分析和解决问题的能力;有团队精神和表达沟通能力。5.硕士三年以上或本科五年以上大数据技术工作经验，有数据中心搭建及数据架构规划并落地成功案列。

  所需技能： 数据仓库、数据架构、大数据

• 来源：奇瑞控股集团有限公司

  大数据高级工程师

  岗位职责：1.负责制定数据管理标准和流程2.负责数据平台选型.搭建3.负责数据资产化管理任职要求：1.硕士，计算机与科学.数学.统计学等相关专业2.熟悉整个大数据的完整处理流程，包括数据的采集.清洗.预处理.存储.分析挖据.机器学习和数据可视化；3.对大数据基础架构和平台有深刻理解，对大数据的发展方向具备前瞻性.对大数据生态体系有深入认识，熟悉Hadoop相关各种开源项目；4.有过企业BW和BI项目经验优先考虑；5.5年及以上工作经验

  所需技能： 大数据、数据治理、BW、BI、Hadoop

• 来源：深圳市今天国际物流技术股份有限公司

  大数据高级工程师

  职责描述：负责公司大数据平台离线.实时的大数据平台建设以及相应的工具产品以及数据产品的研发任职要求：1.本科及以上学历，计算机软件相关专业毕业，5年及以上服务端开发相关经验；2.具有基于Hadoop/Hive/HBae/Storm/Spark/Kafka等大数据技术的开发经验，对大数据基础架构和平台有深刻理解；3.熟悉Linux环境，熟悉Linuxhell/python任一脚本；4.主导过运用Hadoop及相关产品对海量数据处理优先考虑；5.精通JAVA编程语言.具有高并发.分布式系统的建设经验；6.2年以上金融或者烟草数据仓库经验，具有离线和实时数仓的经验6.熟悉MySQL.ElaticSearch.Mongodb.Redi等技术者优先考虑；7.工作积极主动，有较强的团队协作精神，对技术具有执著的钻研精神，能独立解决问题

  所需技能： 数据仓库、Hadoop、hive、ETL

• 来源：华为技术有限公司

  大数据高级工程师

  工作职责适应全国出差：1.客户需求分析和大数据落地方案设计2.大数据技术.应用规划，帮助客户挖掘数据价值3.指导ISV将应用迁移到华为大数据技术体系4.挖掘客户业务对产品诉求，帮助研发优化大数据产品任职要求业务技能要求：1.熟悉大数据开发框架，熟悉Hadoop.Spark.Storm.TenorFlow等工具或平台；算法数据结构；有较好的Python/Java开发经验；Linux操作系统及hell语言；2.熟悉JAVA.Python中的至少一种，掌握常见的数据结构.算法，了解软件工程.敏捷开发等知识，熟悉常用设计模式；专业知识要求：1.具有主流大数据工具/平台实际项目经验，深入理解大数据处理体系架构；2.熟悉java相关技术，熟悉Hadoop.Hbae.Hive.Zookeeper.MapReduce等分布式存储和分布式计算技术，具备复杂项目的实施落地能力；3.熟悉ETL开发流程和开发工具，有数据仓库开发经验者优先；4.能够深入理解产品的业务场景和关键需求，参加过大规模软件系统开发，具备高扩展性.高性能和分布式系统的实践经验，独立承担过关键模块的开发和维护；5.业务理解力强，对技术有激情，喜欢钻研，能快速接受和掌握新技术，有较强的独立.主动的学习能力。

  所需技能： Hadoop、MapReduce、Spark、Storm、TensorFlow、Zookeeper、Hbase、HIVE