数据开发工程师

职位描述：

1、基于业务需求和应用场景，参与大数据平台后端核心代码开发、底层架构设计、技术选型；
2、负责离线计算、实时计算、即席查询、数据安全、机器学习等平台接口的设计和开发；
3、挑战高并发、高可用、及高性能场景，负责API和调度模块的性能和架构优化；
4、调研和关注大数据前沿技术，引入合适技术到平台中，构建数据平台基础设施；
5、打造业界领先的数据湖、湖仓一体平台，同时服务外部客户；
6、为数据展示、数据集成、数据治理的ToB成功技术负责。

 

职位要求：

1、3年以上大数据平台底层开发经验（数据平台建设/数据采集/数据建模/任务调度等），熟悉Java/Scala；如果同时会Python优先考虑；
2、熟悉Hadoop/Flink/Spark/Kafka/Hive等常见大数据组件应用开发和性能调优，熟悉原理源码、有过二次开发者优先；
3、掌握数据库和数据仓库理论、设计方法，分布式存储和NoSQL数据库技术有实际生产项目应用经验；
4、熟悉底层中间件，分布式技术(如负载均衡、RPC框架、缓存、消息系统等)有处理高并发系统经验优先；
5、熟悉数据湖、湖仓一体相关技术和架构设计；具有湖仓一体从 0-1 的搭建经验优先；
6、具有大规模数据平台建设的实际经验，对数据安全、数据治理、数据质量、数据血缘等有深刻理解。

欢迎投递简历：

1.联系人：王欣僮

2.联系方式：wangxintong@hqshuke.com