岗位职责:
1. 负责公司大数据平台架构的规划、选型、搭建、管理;
2. 根据业务要求制定技术解决方案,制定大数据服务系统相关的技术接口和规范;负责评估新技术的可行性,技术难点攻关(如核心代码编写);
3. 负责大数据研发部门的技术培训;
4. 研究跟进大数据架构领域新技术并分享;
5. 支持大数据服务上下游合作方对接,协调内外部接口,制定技术标准,验收监管合作方。
任职要求:;
1. 3年以上大数据相关工作经验,具备4年以上大数据/云平台软件产品架构设计和开发经验,具备4年以上的代码编写工作经验,熟悉高性能,高可用,高拓展系统架构设计;具备深厚的分布式系统或数据库系统的理论基础,具有分布式文件系统、分布式数据库系统、集群存储系统等架构设计经验;精通基于流处理的Hadoop/Spark/HBase/Storm。了解相关核心源码,并能对内核结合实际工作进行优化;对分布式架构,深入理解及使用;
2. 了解大型数据库如Oracle/Sql Server/MySQL等,懂得数据建模及效率优化;
3. 精通R语言海量数据分析,熟悉CISCO配置脚本;会使用tomcat/weblogic/WebSphere等中间件,懂得优化及集群搭建;
4. 熟练使用mongodb/redis/Ehcache等流行技术;
5. 精通Java,Scala,Go,python,Erlang,R语言等编程语言;
6. 有优秀的表达、沟通与协调能力、团队合作精神、保密意识。