岗位职责:
- 负责基于spark,flink的离线/实时数据计算和维护
- 负责大规模业务,日志等数据的收集、清洗、入库、分析等工作
- 负责数据治理,接口开发等工作, 提升数据易用性及数据质量
- 理解并合理抽象业务需求,发挥数据价值,与业务团队紧密合作
- 大数据平台管理维护工作
任职要求:
- 具有flink,spark大数据开发相关领域3年及以上开发经验;
- 熟悉java,了解python编程语言;掌握Jvm GC调优;
- 具有海量数据实际开发经验,能熟练使用Spark、Flink进行离线和实时数据开发及优化;
- 熟悉主流大数据工具,包括但不限于Hadoop,hive,datahub,redis,flume,kafka,doris,hologres等;
- 熟悉linux操作系统,熟悉shell开发;
- 具有车联网大数据开发经验优先,熟悉阿里大数据平台优先;
- 具有较好处理问题的能力,善于学习,积极主动,有团队合作精神;