职位名称:高级大数据开发工程师
职位年薪:30-60万 工作地点:上海
招聘企业:某数据科技有限公司 所属行业:信息技术
汇报对象:CTO 发布日期:2018年07月12日
岗位职责
1、 负责建设公司的大数据平台,包括数据采集、传输、存储、计算、可视化等底层能力;
2、 根据业务团队的需求,规划设计上层大数据应用;
3、 为业务团队数据分析提供基础的数据;
4、 搭建公司的大数据团队。
任职要求
1、计算机、数学等相关专业本科以上学历,5年以上相关工作经验;
2、精通Hadoop体系结构、对Hadoop生态圈有较全面了解;
3、精通HDFS/HBase/Hive/Storm/Spark/Spark Streaming/Kafka/flume等相关技术;有多个或多年大数据项目的实施经验;
4、熟悉分布式系统的底层工作原理;
5、熟悉数据仓库架构,如数据结构设计、ELT等;
6、有机器学习、数据挖掘经验者有限,有solr、ES使用经验者优先。