大数据开发（CRM数据平台方向）

【工作职责】

• 负责CRM营销触达大数据处理流程开发，基于Flink构建实时数据链路，基于Spark完成离线人群圈选与数据加工；

• 对大数据任务进行性能调优，保障集群的高效与平稳运行，提升系统稳定性和可扩展性；

• 持续升级计算存储架构，探索和引入新技术方案（如Paimon湖仓一体、实时特征计算等），更好支持业务增长；

• 构建和优化数据仓库体系，支撑用户画像、标签体系、人群圈选等核心数据能力；

• 参与数据质量治理和成本优化，推动数据链路的标准化和自动化。

【任职要求】

• 计算机及相关专业本科及以上学历，5年以上大数据开发经验，具有扎实的代码功底；

• 精通Hadoop/Hive/Spark/Flink等大数据计算框架，有大规模数据处理实战经验（实时流处理或离线批处理）；

• 熟悉Java/Scala/Python至少一种编程语言，具备良好的编程习惯和工程能力；

• 熟悉数据存储方案（HBase/Hive/Kafka/Elasticsearch/StarRocks等），能根据业务场景进行合理选型与性能优化；

• 掌握数据建模方法论，熟悉数仓分层设计（ODS/DWD/DWS/ADS），有数据质量治理经验。

【加分项】

• 熟悉Paimon/Iceberg等湖仓一体技术，或有实时特征计算/实时数仓建设经验；

• 有电商领域用户画像、标签体系、人群圈选的数据开发经验；

• 有StarRocks/ClickHouse等OLAP引擎的使用和调优经验；

• 有数据成本优化经验（存储压缩、计算资源治理、任务调度优化等）；

• 熟悉Docker/Kubernetes容器化部署，有云原生数据平台经验；

• 有跨境电商或全球化数据开发经验；

• 有Java后端工程开发经验（Spring Boot/微服务），能独立完成数据服务接口开发和平台工程化建设。

【软性-个性特征】

• 业务驱动能力强，能主动理解营销业务场景，将业务需求转化为数据方案；

• 愿意尝试新技术、新框架，接受业界大数据处理的新思想；

• 具备较强的沟通能力和跨团队协作能力，能高效推动项目落地；

• 对数据敏感，关注数据质量和处理效率，具备数据驱动思维；

• 有技术热情，乐于分享和沉淀，能持续推动团队技术能力提升。