大数据架构后端开发工程师

核心技能

- 负责公司核心业务系统的数据ETL开发工作，使用Hive和Spark SQL完成数据抽取、转换与加载，优化ETL流程。

- 熟练掌握大数据技术栈，包括Hadoop、Spark、Flink、Hive、Kafka等，具备丰富的分布式系统设计与开发经验。

- 深入理解数据仓库架构，能够高效完成数据建模、ETL设计与优化，熟悉数据湖架构及技术实践。

- 熟悉 Linux 操作系统和相关操作

- 熟悉 docker/k8s 相关运维服务

- 可以使用 1-2 种脚本语言（Python）开发

- 熟悉Redis缓存、消息队列（如Kafka、RabbitMQ）的使用；

- 有云平台（如AWS、阿里云、腾讯云）开发经验者优先。

- 有高并发、分布式系统开发经验者优先；