岗位职责：
1、负责公司大数据&AI平台系统架构设计、核心开发工作（Hadoop生态圈），基于业务场景设计最优的系统解决方案。
2、负责大数据平台&AI平台技术框架的选型与技术难点攻关。
3、构架大数据&AI开发平台。包括数据采集、数据存储、数据计算、数据管理的平台系统及相关监控，推进平台的架构设计和实现。
4、利用Hadoop、Spark、Flink等大数据技术对海量数据进行处理，支持建模（算法）的工程化实现，实现可视化BI分析。
5、对现有系统的进行架构深入分析及系统优化，进一步提升系统的性能及数据处理能力。
6、了解机器学习等技术进行数据分析及建模的方案的系统化设计，跟进数据挖掘项目的架构设计工作。
7、负责对接公司上下游合作方，协调内外部接口，制定相关技术标准。


任职资格：
1、计算机相关专业的背景专业一类院校毕业本科、硕士学位，8年（硕士5年）以上工作经验（至少拥有3年以上大数据项目或产品架构经验）。
2、精通Java，J2EE相关技术，精通常见开源框架的架构，精通关系数据库系统(OracleMySQL等)和noSQL数据存储系统的原理和架构。
3、精通SQL和Mapreduce、Spark处理方法。
4、精通大数据系统架构，熟悉业界数据仓库建模方法及新的建模方法的发展，有DW，BI架构体系的专项建设经验。
5、对大数据体系有深入认识，熟悉Kafka、Hadoop、Hive、HBase、Spark、Storm、greenplum、ES、Redis等大数据技术，并能设计相关数据模型。
6、机器学习技术、数据挖掘、人工智能经验丰富者优先考虑。