工作职责:
-舆情数据爬虫产品设计及研发
-产品舆情数据海量数据建模、数据分析
-用户反馈分析平台建设和优化,包括但不限于ad-hoc查询,多维数据分析,高效实时数据
-用户反馈数据基础架构的建设及维护,包括但不限于调度系统、元数据管理、数据监控、流式平台等
职责要求:
-熟悉PHP/python/c/c++中至少一种,熟悉mysql,有1年以上的开发经验
-熟悉MapReduce原理,Hive SQL,熟悉常用脚本语言如Java、python等
-熟悉爬虫框架,有爬虫经验者优先
-有大型互联网公司大数据平台及数据开发经验者优先
-有流式计算,海量数据存储经验者优先