Python开发工程师

英语口语：读写

职位目标：开发构成 AD 数据平台控制平面的后端服务和平台 API，并连接数据管理、标注、训练、基准测试、分析和工作流系统。

主要职责：
• 开发支持数据管理、数据集管理、数据搜索、数据挖掘、标注、模型训练、基准测试、数据分析、回放和问题跟踪的后端服务。
• 根据实际情况，使用 FastAPI、GraphQL、Spring Boot、REST、RPC 和 Protocol Buffers 设计和维护 API。
• 开发元数据管理、工作流管理、作业状态管理和任务管理服务。
• 将后端服务与 PostgreSQL、MongoDB、Redis、Elasticsearch、Kafka、HDFS 和开源软件集成。
• 将平台服务与 Airflow、Prefect、Argo Workflows、Ray 和 Kubeflow 集成，以实现作业执行和工作流编排。
• 开发用于数据查询、数据集创建、作业提交、标注任务管理、训练作业管理、基准测试执行和结果检索的 API。
• 开发身份验证、授权、权限管理、审计和访问控制功能。
• 根据需要，使用 Kafka 或同等消息传递技术设计并实现异步和事件驱动的工作流。
• 构建可重用的后端服务和跨多个 AD 数据产品共享的通用平台功能。
• 确保服务在生产 Kubernetes 环境中具有可观察性、可扩展性、弹性和可维护性。
• 设计支持长期演进的服务契约和数据模型，同时避免将各个平台组件紧密耦合。
• 参与性能调优、生产环境故障排除、代码审查和后端架构设计。

必备资质：
• 8年以上后端软件工程经验。
• 精通 Python 或 Java 编程。
• 拥有使用 FastAPI、Spring Boot 或类似框架开发生产服务的经验。
• 深入理解 REST API、GraphQL、RPC 和分布式服务架构。
• 精通数据库和 SQL。
• 拥有 PostgreSQL 或类似关系型数据库的使用经验。
• 具备 Docker 和 Kubernetes 使用经验。
• 深入理解异步处理、并发、分布式系统和故障处理。
• 精通 Linux 开发。
优先考虑的资质：
• 具备 FastAPI、GraphQL、Spring Boot 和 Protocol Buffers 使用经验。
• 具备 PostgreSQL、MongoDB、Redis 和 Elasticsearch 使用经验。
• 具备 Kafka 使用经验。
• 具备 Airflow、Prefect、Argo Workflows、Kubeflow 或 Ray 集成经验。
• 具备构建数据平台、机器学习平台、工作流系统或开发者平台的经验。
• 熟悉自动驾驶、机器人或大规模传感器数据系统。