职位描述
1.负责滴滴自动驾驶路测数据分析, 按项目要求完成指定数据的提取, 存储与分析
2.负责HDFS, HIVE存储管理及数据大盘开发与维护
3.负责开发功能模块, 协助算法同学完成特定指标优化前后的数据对比分析工作
4.负责路测数据指标体系建设, 分析关键数据指标波动的原因
任职要求
1.计算机或相关专业本科及以上学历
2.具备2年以上工作经验, 熟练掌握python 编程语言, 熟练常用的功能模块: numpy, pandas, matplotlib, json等
3.熟练掌握pyspark 开发大数据程序, 掌握RDD的基本操作,map, filter, join, collect等
4.熟悉掌握pyspark dataframe 常用API,创建, 筛选, 排序, 等
5.熟练使用HIVE SQL 语言
6.熟悉开发工具, 如gitlab, git, jupyter-notebook
7.责任心强,积极主动学习, 具备良好的沟通表达能力和团队合作意识,较强的逻辑分析能力
8.有实际pyspark大数据开发项目优先
9.熟悉shell 脚本编写, C, C++ 更佳