2017-06-02 14:10
职位描述：
1、 负责公司大数据体系架构设计、部署
2、 负责公司大数据处理平台整体架构的设计，负责大数据系统研发工作，包括大规模非结构化数据业务模型构建、大数据存储；
3、 负责制定数据建模、数据处理、数据运维和数据安全等架构规范
4、 负责数据挖掘、BI、机器学习等数据系统建设、开发
5、 负责数据库架构设计以及数据库详细设计、优化数据库构架、解决数据库中心建设设计问题
6、 领导大数据开发团队建设和人才培养
任职要求：
1、 五年以上相关工作经验
2、 对大数据架构有深入理解，了解不同架构之间的优缺点
3、 熟悉大数据生态圈，包括但不限于Hadoop、Spark、YARN，MapReduce，Impala，Flume，Kafka，Hive，HBase
4、 熟练使用scala，python至少两种语言
5、 熟悉ETL开发实施流程和原理，有实际的大型数据仓库或企业数据集成的ETL开发和ETL流程优化经验
6、 精通sql以及sql的性能调优，熟悉大型关系型数据库，精通数据结构和常用的算法
算法基础扎实，熟悉常用算法，了解分布式计算和分布式系统
