工作描述：

1、编写脚本，实现对自动驾驶数据的清洗与加工处理；

2、编写脚本，实现对统计数据的汇总与计算；

3、与相关方沟通掌握业务的内在逻辑，协助进行数据治理和完善系统；

技能要求：

1、了解linux系统；

2、熟悉shell或python脚本的编写与调试，至少掌握一种；

3、了解hadoop系统，对HDFS，Mapreduce，HIVE以及SparkSQL有一定认知；

4、了解或熟悉一种报表开发或ETL工具的使用；

5、能够进行大数据平台数据处理脚本开发的优先；