大数据研发经理
相关职位简介
- 来源:神州视界(杭州)信息安全科技有限公司
大数据研发经理
岗位职责1.负责公司的大数据处理框架的研发设计工作,梳理可实现方案和技术规范;2.负责业务平台数据统计分析模块的设计与规划;3.负责公司产品研发过程中的数据及存储设计;4.带领和培养人才团队,制定考核机制完成上级安排任务;任职要求:1.熟悉Spark/Hadoop大数据及其生态圈如MapReduce.HBASE.HIVE等相关技术;并拥有实际的大数据项目经验;2.有NOSQL的使用经验;3.熟练使用Java.C++和C#等相关编程语言;可以编写基于Hadoop/Spark的大数据处理系统;4.熟悉软件开发流程和配置库的使用,拥有软件开发流程中的代码规范意识.配置管理规范意识.文档撰写规范意识和团队合作沟通交流意识;5.有大数据库应用平台开发经验者优先。
所需技能:
- 来源:北京百猎科技有限公司
大数据研发经理
岗位职责:1.负责数据相关产品的解决方案的规划.架构设计以及技术需求的转化和分解.2.负责跟踪相关领域的技术趋势,竞争对手的产品.技术动态并研究转化利用.3.调研.分析新技术,促进平台产品进化,负责研发过程中关键设计的把关并深入研发工作.4.有管理团队经验和能力。任职要求:1.熟悉经典算法并具备实战经验,离线计算和算法有较强的积累2.有较强的数据分析建模.特征工程.优化算法基础,能够快速依据数据并结合当前业务问题制订出有效的解决方案。3.熟悉大数据系统架构,有dw,etl架构体系的设计经验,精通ql4.熟悉目前的大数据分布式平台前沿应用,hadoop.hive.park.kafka.hbae,flink等5.数据采集.清洗.传输.存储.计算等全方位技术架构设计与开发实施;6.有用户画像,用户行为分析,智能推荐等大数据处理方面经验者优先考虑优先:有大数据底层构建的经验.另外就是有NLP.推荐系统等算法方面的经验
所需技能: Spark、Hadoop、Kafka、Flink
- 来源:恒生电子股份有限公司
大数据研发经理
岗位职责:1.负责恒生云PAAS平台全链路离线.在线数据建模和生产。2.交流和理解客户业务需求,将需求转化成对数据加工生产的要求;3.深入理解行业数据,理解和提炼标准,结合数据的技术特点设计数据模型和加工生产逻辑;3.对数据处理过程中的问题进行准确的分析和定位;4.负责包括数据标准在内的项目相关的技术文档的输出;岗位要求:1.从事数据仓库或挖掘领域至少2年以上,熟悉数据仓库模型设计与ETL开发经验,掌握维度建模设计方法,具备海量数据处理经验;2.熟悉数据库技术,熟练运用SQL及其他语言,能高效的与技术团队进行沟通;3.有从事分布式数据存储与计算平台应用开发经验,具备实时流计算数据开发经验,如Hdf.Mapreduce.Hive.Hbae.Spark.flink;4.熟练掌握一门或多门编程语言,并有大型项目建设经验者优先,如Java.Python.Shell;
所需技能: 数据仓库、数据开发
- 来源:北京数聚智联科技有限公司
大数据研发经理
职位描述:1.负责和甲方对接,进行系统的需求论证.功能设计;2.负责项目的整体实施;3.负责大数据相关架构设计.代码框架搭建;4.可承担核心功能代码编写,主力/参与开发和规划系统核心模块;5.主导技术难题攻关;解决系统技术风险,补充和提升系统高可用能力;6.分析业务需求,进行数据规则转化,通过数据清洗.转换.集成.统计等技术手段,完成需求的数据交付;7.负责编写相应的项目文档。招聘要求:1.具备较强的沟通能力.业务理解能力和逻辑能力;2.精通常用大数据开发,熟悉常用的大数据计算.查询引擎,有大数据分析的经验;3.熟悉常用的大数据分析和挖掘算法;4.具备大数据应用系统架构设计能力,具有相关架构设计经验;5.能够理解业务.用户和场景,通过数据分析洞察业务关联;6.具备能够团队协调能力,能够组织团队完成项目实施;7.具备国产化环境系统开发经验的优先;8.写作能力强,有丰富的方案编制经历;
所需技能: Spark、Hadoop、Impala、Presto、Flume、项目牵头
- 来源:山东步长制药股份有限公司
大数据研发经理
岗位职责:1.大数据相关平台和方案的需求分析.体系架构规划设计,并主导团队研发实现;2.基于数据仓库.数据治理.数据图谱.数据湖.特征工程等数据相关技术及平台研发,及核心及疑难技术问题攻关;3.主导构建领域相关的用户画像.企业画像等,为产品及方案提供支撑;4.建设数据运营及决策支撑平台,持续积累数据分析模型和方案,支撑部门产品提升数据运营能力,加强为客户输出智能化数据分析服务的能力;5.负责业务数据的安全.质量.成本.效率.服务五大方向融合闭环。任职资格:1.本科以上学历,计算机/软件工程/统计学等相关专业,6年以上工作经验;2.具有大型项目架构设计经验,参与过大数据架构设计及技术选型,设计健壮.可扩展的大数据分析系统/服务;3.有丰富的数据仓库建设.用户画像构建经验,能够基于数据分析挖掘数据价值,对信息进行深度挖掘和有效利用,驱动产品改进;4.熟悉HiveSQL语言,熟悉cala语言,熟悉java,python等至少一种编程语言,有hadoop.park等至少一种大数据平台的使用经验;5.理解能力强,善于沟通,有责任心和团队精神,抗压性强;6.具备机器学习.深度学习.自然语言处理技术.商业数据分析.大健康医疗数据分析.金融科技经验者优先;7.具有团队精神和责任感,自驱力强,对技术有持续的热情。
所需技能: SQL、Python、Scala、Spark、Hadoop
- 来源:北京艾力泰尔信息技术股份有限公司
大数据研发经理
岗位职责:1.深入理解数据产品需求,紧跟技术发展趋势,负责大数据平台架构的规划.设计和维护,构建数据基础设施和数据应用体系,并推进落地实施;2.调研.分析并确定软件技术研究方向,组织指导人员进行技术验证和实现,核心技术问题的攻关和积累;3.负责大数据部核心团队的组织规划.管理培养和绩效考核,提高团队整体技术能力。任职资格:1.计算机等相关专业本科及以上学历,有较好的理论及计算机工程基础.快速学习能力;2..5年以上技术开发与交付工作经验,3年以上团队管理经验;3.从0到1主导过数据模型到数据指标.数据分析.用数据建模等;4.熟悉目前正在发展的大数据分析平台的前沿技术的应用,包括但不限于Hadoop.torm.Hive.park.Kafka.ES.Redi等,并能结合业务场景进行架构设计;5.精通大数据系统架构,熟悉业界数据仓库建模方法及新的建模方法的发展,有大数据治理服务经验;6.具备出色的分析.归纳.总结能力,善于沟通和跨部门协作,优秀的团队领导和组织协调能力;7.强烈的创新意识,极高的责任心和职业操守,自驱力强,勇于挑战。
所需技能: Spark、Hadoop、Kafka、Storm、HIVE
- 来源:北京海誉动想科技股份有限公司
大数据研发经理
岗位职责:1.负责公司大数据平台开发及技术架构演进;2.负责大数据平台核心组件性能的调优;3.带领团队在技术和能力的综合成长进步;岗位要求:1.本科及以上学历2.五年以上Java/Scala开发经验3.扎实的流式计算基础,有较强的大数据实时系统架构能力;4.熟练使用Actor线程模型,有过ScalaAkka编程经验的优先考虑5.精通Flink基本原理并且熟练应用FlinkSQL及Flink流式计算。6.精通ELK全文检索处理平台,至少三年以上使用Elaticearch的开发经验,有Elaticearch调优经验的优先考虑7.熟练使用大数据生态系统常用组件,如Flink.ES.Kafka.ClickHoue.Hive等8.有数据挖掘及数据分析经验者优先考虑9.有一定前端基础的优先考虑(如JavaScript/TypeScript.Angular等)10.有5~10人开发团队管理经验者优先考虑11.善于沟通,有强烈的上进⼼和求知欲,善于学习,善于沟通和表达,有较强的团队意识和执⾏⼒
所需技能: SQL、Java、Scala、Kafka、Flink
- 来源:中科大数据研究院
大数据研发经理
岗位职责:1.负责单位的大数据采集.数据服务平台.业务分析系统的开发相关工作;设计与开发分布式存储.数据处理与分析框架;2.配合产品经理进行大数据项目和产品的组织实施和项目管理,对项目和产品进行架构设计;3.负责大数据相关项目和产品的计划定制并带领团队实施;4.负责大数据平台新组件的研究.探索与应用;负责大数据技术开发团队的管理,并进行相关技术培训。任职要求:1.计算机.信息.通讯相关专业本科以上学历,5年以上工作经验;2.熟悉大数据生态相关技术.包括但不限于YARN.HDFS.IMPALA.HBASE等生态技术和框架,具有2年以上相关经验;3.熟练掌握Kafka.SparkStreaming等实时处理技术和框架的开发;4.熟练使用Shell.Python等脚本语言;5.熟练使用SQL语言编写数据库脚本;6.具有较强的责任心.执行力,有良好的沟通技巧和团队合作精神;7.有强烈的责任意识,有良好的计划能力,并具有结果导向思维,能够承受较大的工作压力;8.熟悉主流数据挖掘算法开发实施经验者优先;9.有安全.政府.军民融合.科技情报.环保.交通与物流.金融.创新平台.教育等行业的项目管理与实施经验。
所需技能: MySQL、国密算法、数据库开发
- 来源:南京猎明企业管理咨询有限公司
大数据研发经理
职位描述1.负责大数据总体架构.技术规划,大数据平台搭建以及关键技术研究2.根据大数据报表需求,独立进行业务需求分析和事实维度定义,以及数据仓库搭建.数据建模,创建OLAP多维分析框架,设计.开发.优化和维护ETL工具和流程3.负责大数据报表项目开发.技术性能优化.日志监控4.负责外部数据采集和管理5.负责大数据产品研发项目管理.组织协调,确保项目进度6.负责大数据产品研发团队管理.带教.绩效评估任职要求1.7年及以上工作经验,4年及以上完整的数据仓库/大数据/DW项目工作经验2.有扎实的Java基本功,5年以上Java程序编写经验3.熟练使用hadoop及hadoop生态圈中的常用组件原理及应用,包括但不限于Spark.Flink.HBae.Hive.Pig.Kafka.Storm等全部或者部分组件;4.熟悉大数据算法原理及应用5.熟悉ETL.数据仓库.多维分析.即时查询查询等工具原理与技术架构6.精通分布式海量数据处理,数据分析。7.具有推荐系统研发优先8.对新生事物或者新技术有浓厚兴趣者优先9.熟悉JVM内存机制,了解Java性能优化10.深入理解微服务架构11.对设计模式有深入研究,并能在使用中融会贯通12.了解常见的架构模式,并能理解他们的优劣势13.对开源技术有浓厚的兴趣,有源代码阅读习惯,热爱新技术
所需技能: 数据仓库、ETL、Java、分布式技术、Hadoop、Spark、架构师、项目管理
职业晋升路径
横向职业发展
职业问答
数据获取
数据清洗
数据可视化
数据分析(描述统计,定义指标,挖掘,建模…)
常用的工具:Excel,PPT,sql,bi 报表工具,Hadoop 生态圈,xmind,Python,spss……
广义来说工具太多了,但是要做的事就这几件,岗位的分支也很多,就题而论,数据开发应该偏后台
