data engineer.

关于公司
科技

关于团队
IT

关于职位
1.端到端数据开发：设计、开发并维护高性能、可扩展的 ETL 管道。全面负责从原始数据摄取、清洗、转换到最终数据服务的完整生命周期 。
2.数据建模与架构设计：领导并优化数据仓库建模（如维度建模、数仓分层设计），根据业务增长需求平衡系统的可扩展性与查询性能 。
3.代码质量管理：制定并执行严格的开发规范与代码审查（Code Review）制度，持续优化现有代码逻辑，确保生产环境的系统稳定 。
4.流程优化与创新：持续关注大数据前沿技术，主动发现现有架构的性能瓶颈并进行优化，利用新技术（如 LLM 应用）提升数据处理效能 。

技能和经验要求

1.具备 1 年以上ETL 开发、数据仓库或大规模数据处理经验 。
2.拥有快节奏互联网公司背景，处理过高并发、海量数据场景者优先 。
3.必须精通复杂 SQL 编写及性能调优 。
4.熟练掌握 Spark、Hive、Hadoop、Kafka 等分布式计算与流处理框架 。
5.精通 Google BigQuery、AWS Redshift 或 Snowflake 现代云数据仓库 。