岗位职责:
1、负责工业大数据平台和大数据处理模块的架构设计和开发;
2、基于Hadoop、Spark框架的数据仓库的设计,开发,维护;
3、大数据平台API等服务和数据接口的开发;
4、配合机器学习工程师,负责基于Spark技术的海量数据的处理、分析、统计、挖掘功能的开发和项目实施工作;
5、同前端工程师写作完成相关的开发工作。
岗位要求:
1、计算机等相关专业本科以上学历;
2、5年以上基于Java主流框架的设计和开发经验;
3、够独立搭建Hadoop和MPP数据仓库;
4、出色的问题解决能力和快速学习能力;
5、熟悉应用服务器如Weblogic、tomcat、Ajax等中间件安装、部署、调试;
6、具备SQL和noSQL(例如:HDFS)的经验;
7、具备RESTful web services的知识和经验;
8、熟悉J2EE体系架构,熟悉Spring/SpringMVC/MyBatis框架;
9、熟悉大数据应用开发者优先,使用过Redis/Kafka/HBase/ElasticSearch等;
10、Spark分布式数据处理经验。