岗位职责: 1、负责数据仓库的建设,架构设计和落地,实现对产品业务数据化运营的基础支撑; 2、负责数据平台建设,设计并实现对BI分析、数据产品开发、算法开发的系统性支持; 3、相关部门统计分析项目支持。 岗位要求: 1、大学计算机相关专业; 2、有在分布式数据处理经验,Hadoop、Hive、MapReduce、HBase等 3、熟练编写sql语句并优化,有hive、mysql等工作经验优先; 4、了解mysql/hbase/redis等sql与nosql数据库; 5、熟悉Java语言和MapReduce编程等 6、有处理海量数据的经验; 7、了解Storm/Spark Streaming等实时数据处理相关工具; 8、熟悉网络爬虫技术者加分。 9、熟练掌握Linux常规命令与工具。