高级数据工程师
Description
职位概述: 作为数据开发专家,您将负责设计、开发和维护数据仓库、数据湖和数据管道,确保数据的准确性、完整性和可访问性。您将与数据科学家、分析师和业务团队紧密合作,提供数据支持,推动数据驱动的决策和创新。
主要职责:
设计和实现高效的数据模型,支持复杂的数据查询和分析需求。
开发和维护数据集成和ETL(提取、转换、加载)流程。
优化数据存储解决方案,确保数据的安全性和合规性。
与跨职能团队合作,理解业务需求,提供定制化的数据解决方案。
监控数据质量,确保数据准确性和一致性。
跟踪和评估新兴的数据技术和工具,推动技术创新。
编写技术文档,为团队成员提供指导和培训。
管理数据项目的时间表和预算,确保按时交付高质量的成果。
任职资格任职要求:
拥有计算机科学、信息技术、数据科学或相关领域的学士学位;硕士学位优先。
至少5年以上的数据仓库设计和开发经验。
精通SQL和至少一种现代数据处理语言(如Python或Scala)。
熟悉大数据技术栈,包括但不限于Hadoop、Spark、Kafka等。
有使用云服务(如AWS、Azure或Google Cloud)的经验。
具备数据建模、数据治理和数据质量管理的实践经验。
强大的分析和问题解决能力。
出色的沟通和团队合作能力。
能够在快节奏和不断变化的环境中工作。
